基于统计的汉语叠词自动识别研究

• 作者: 刘亮亮 杨帆
• 来源期刊: 重庆理工大学学报（自然科学版）
• 学科: 工学
• 关键词: 汉语叠词 五元组模型 叠词度 左、右邻接熵
• 年，卷（期）: 2016,（7）
• 所属期刊栏目: 信息·计算机
• 页码范围: 123-128
• 页数: 6页
• 分类号: TP39
• 字数: 4644字
• 语种: 中文
• DOI: 10.3969/j.issn.1674-8425(z).2016.07.021

摘要

提出一种汉语叠词的自动获取方法.首先利用结构合理的五元组模型对分词后的语料进行统计以获得各类叠词候选集;在此基础上,通过叠词度的运算判断实现“AAB”式、“ABB”式、“ABA”式、“ABAB”式、“AABB”式叠词的自动获取;在叠词度判断的基础上,通过左、右邻接熵的运算判断实现“AA”式叠词的自动获取.该方法根据结构合理的五元组模型获得的统计信息,结合叠词度和信息熵的判断,实现了叠词的量化判断和自动获取.实验结果证明:该方法能有效实现汉语叠词的自动获取,且准确率高.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	刘亮亮	江苏科技大学计算机科学与工程学院	14	68	5.0	8.0
2	杨帆		17	30	4.0	5.0