基于Viterbi改进算法的高棉语分词研究

• 作者: 刘习文 蒋艳荣 陈耿涛
• 来源期刊: 计算机工程
• 学科: 工学
• 关键词: Viterbi算法 最大匹配算法 分词 高棉语 剪枝 统计语言模型
• 年，卷（期）: 2011,（15）
• 所属期刊栏目: 人工智能及识别技术
• 页码范围: 174-176
• 分类号: TP391
• 字数: 3401字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-3428.2011.15.055

摘要

采用最大匹配算法对高棉语进行分词准确率较低,且难以正确识别词库中没有的新词.针对该问题,采用改进的Viterbi算法,利用自动机实现音节切分,通过最优选择及剪枝操作提高分词效率,以统计语言模型对未知新词进行数据平滑,提高识别正确率.实验结果表明,改进的Viterbi算法具有较高的分词效率和准确率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	蒋艳荣	广东工业大学计算机学院	9	40	3.0	6.0
2	刘习文	湘潭大学机械工程学院	5	91	4.0	5.0
3	陈耿涛		1	2	1.0	1.0