一种新的面向领域的鲁棒性文本分析算法

• 作者: 王晓东 邬晓钧 郑方 陶县俊
• 来源期刊: 中文信息学报
• 学科: 工学
• 关键词: 计算机应用 中文信息处理 线图分析方法 鲁棒性 错误推测
• 年，卷（期）: 2010,（4）
• 页码范围: 39-43
• 分类号: TP391
• 字数: 5095字
• 语种: 中文
• DOI: 10.3969/j.issn.1003-0077.2010.04.006

摘要

在自然语言处理的应用中,特别是在对口语文本、网络文本的处理中,待分析的文本经常会包含字词和句式上的错误.该文描述了一种基于线图分析方法改进的鲁棒性文本分析算法.该算法利用当前活动弧和规则库中的终结符,对基于领域词表的分词过程无法识别的语句串进行错误推测,将无法识别的语句串纠正为可能的正确文字.实验结果表明,在采用拼音的同音匹配进行推测纠错的情况下,该文所设计的鲁棒性文本分析算法相对于燕方法,分析度提高了14.78%,而语句平均分析循环次数增长为9.363%.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王晓东	河南师范大学计算机与信息技术学院	58	405	11.0	17.0
2	郑方	清华信息科学技术国家实验室技术创新与开发部语音和语言技术中心	3	114	2.0	3.0
3	陶县俊	河南师范大学计算机与信息技术学院	3	33	2.0	3.0
4	邬晓钧	清华信息科学技术国家实验室技术创新与开发部语音和语言技术中心	1	1	1.0	1.0