基于条件随机场的汉语词汇特征研究

• 作者: 史晟辉 黄定琦
• 来源期刊: 计算机应用研究
• 关键词: 条件随机场 汉语词汇特征 信息提取 命名实体识别
• 年，卷（期）: 2020,（6）
• 所属期刊栏目: 算法研究探讨
• 页码范围: 1724-1728,1754
• 页数: 6页
• 分类号: TP391
• 语种: 中文
• DOI: 10.19734/j.issn.1001-3695.2018.10.0859

摘要

汉语语言在书面表达时不具有天然分词的特性,词汇与词汇之间没有分词标记,因此在汉语文本的识别中需结合其行文的习惯及规则,即所谓的词汇特征.已有研究通常在实验中显式地标注词汇特征来提高识别效果,增加了人工处理流程,极大地加重了算法移植的工作量.研究并归纳了常用汉语语言的词汇特征,并利用条件随机场(conditional random fields,CRF)的特征提取能力,自行实现了复杂特征函数,在语料只具有简单标注的前提下,隐式地提取词汇特征,提高了识别效果.实验证明,在汉语分词中应用复杂词汇特征能有效提高识别性能,提供了在应用中提高识别算法可移植性的新思路.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	史晟辉	北京化工大学信息科学与技术学院	13	82	5.0	8.0
2	黄定琦	北京化工大学信息科学与技术学院	1	0	0.0	0.0