基于语料库的多词单位抽取算法

• 来源期刊: 北京交通大学学报
• 学科: 工学
• 关键词: 多词单位 语料库 统计学 抽取算法 数据挖掘
• 年，卷（期）: 2009,（5）
• 所属期刊栏目: 计算机工程与数据挖掘
• 页码范围: 121-125,131
• 页数: 6页
• 分类号: TP391.1
• 字数: 6718字
• 语种: 中文

摘要

分析了研究者们在多词单位抽取算法中的一些工作,包括多词单位的评分和选择.将评分算法根据它们的设计依据划分为3类,对它们进行总结分析,并用实验进行了验证.本文还分析了多种评分算法的组合方法,使用这些组合方法可以互补各种评分算法,达到更好的抽取效果.