中文文本语料库分词一致性检验技术的初探

• 作者: 刘江 张虎 郑家恒
• 来源期刊: 计算机应用研究
• 关键词: 支持向量机 切分一致性 搭配
• 年，卷（期）: 2005,（9）
• 所属期刊栏目: 研究探讨
• 页码范围: 52-54
• 页数: 3页
• 分类号: TP391
• 语种: 中文
• DOI: 10.3969/j.issn.1001-3695.2005.09.016

摘要

对大规模语料库中的分词不一致现象进行分析,提出了语料库分词一致性检查和校对的新方法.该方法提取词与词之间语法、语义搭配信息,利用支持向量机的理论对候选序列进行判断,给出一个切分结果,进而提高汉语语料库切分的准确率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	郑家恒	山西大学计算机科学系	58	1189	16.0	33.0
2	刘江	山西大学计算机科学系	4	46	3.0	4.0
3	张虎	山西大学计算机科学系	33	139	8.0	11.0