统计与规则相结合的维吾尔语句子边界识别

• 作者: 吐尔根·依步拉音 艾山·吾买尔
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 维吾尔文 句子边界识别 规则 特征选择 最大熵
• 年，卷（期）: 2010,（14）
• 所属期刊栏目: 数据库、信号与信息处理
• 页码范围: 162-165
• 分类号: TP391
• 字数: 5187字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.2010.14.047

摘要

句子边界识别是词性标注和句法分析等自然语言处理系统的基础问题.提出了一种统计与规则相结合的维吾尔语句子边界识别方法,首先利用歧义段落分类算法分类段落,第二步对无歧义段落进行基于规则的句子边界识别,最后使用最大熵模型对有歧义段落进行句子边界识别.该方法有效利用规则弥补最大熵模型因数据稀疏而误判不存在任何歧义情况的不足,使用最大熵模型有效地消除歧义,提高算法的鲁棒性,召回率达到了98.77%.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	艾山·吾买尔	新疆大学信息科学与工程学院	66	292	10.0	14.0
2	吐尔根·依步拉音	新疆大学信息科学与工程学院	3	31	3.0	3.0