一种基于独立性统计的子串归并算法

• 作者: 冯冲 周浪 王平尧 黄河燕
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 子串归并 独立性统计 分词碎片
• 年，卷（期）: 2010,（24）
• 页码范围: 129-131
• 分类号: TP391
• 字数: 3514字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.2010.24.039

摘要

现行的子串归并算法都是采用一对一的方式针对同频子串提出的.但是在使用词法分析工具对文本进行切分时,不可避免地会产生很多的分词碎片,这直接导致了很多无意义子串的产生.通过分析这些无意义子串和众多父串之间的这种一对多关系,提出了一种基于独立性统计的子串归并算法.最后将该子串归并算法应用在中文术语抽取系统中,使得系统的准确率从91.3%提升到了93.32%.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	冯冲	中国科学院计算机语言信息工程研究中心	9	167	6.0	9.0
2	黄河燕	中国科学院计算机语言信息工程研究中心	54	1398	18.0	36.0
3	王平尧	宁波职业技术学院计算机系	9	80	4.0	8.0
4	周浪	南京理工大学计算机科学与技术学院	3	30	3.0	3.0