面向专业领域的中文分词方法

• 作者: 成于思 施云涛
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 中文分词 专业领域 歧义消解 领域词典 工程法
• 年，卷（期）: 2018,（17）
• 所属期刊栏目: 热点与综述
• 页码范围: 30-34,109
• 页数: 6页
• 分类号: TP30
• 字数: 8067字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.1806-0117

摘要

在专业领域分词任务中,基于统计的分词方法的性能受限于缺少专业领域的标注语料,而基于词典的分词方法在处理新词和歧义词方面还有待提高.针对专业领域分词的特殊性,提出统计与词典相结合的分词方法,完善领域词典构建流程,设计基于规则和字表的二次分词歧义消解方法.在工程法领域语料上进行分词实验.实验结果表明,在工程法领域的分词结果准确率为92.08％,召回率为94.26％,F值为93.16％.该方法还可与新词发现等方法结合,改善未登录词的处理效果.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	成于思	东南大学土木工程学院	11	59	4.0	7.0
2	施云涛	中国移动通信集团南京分公司网络部	5	33	4.0	5.0