基于动态文本窗口和权重动态分配的中文文本纠错方法

• 作者: 张仰森 王匆匆 黄改娟
• 来源期刊: 郑州大学学报（理学版）
• 学科: 工学
• 关键词: 语义搭配 数据稀疏 动态文本窗口 权重动态分配
• 年，卷（期）: 2020,（3）
• 所属期刊栏目: 信息科学
• 页码范围: 9-14
• 页数: 6页
• 分类号: TP391
• 字数: 5548字
• 语种: 中文
• DOI: 10.13705/j.issn.1671-6841.2019393

摘要

提出一种基于动态文本窗口的中文文本查错方法,依靠窗口的不断滑动来检测文本错误.当中文文本有疑似错误时,采用聚类词集平滑数据稀疏问题,然后采用权重动态分配的纠错词集进行纠错,若纠错结果仍不符合检错规则,则用缩小文本窗口法和拓展窗口法来检查具体错误.构建纠错词集则采用基于最小编辑距离和权重动态分配的方法.实验结果表明,基于动态文本窗口查错方法的F值达到了77.9％;再结合权重动态分配的纠错方法,纠错准确率达到78.1％,相较黑马校对系统和基于平均权重的纠错策略,准确率分别提升了9.7％和15.8％.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	张仰森	北京信息科技大学智能信息处理研究所	104	721	15.0	23.0
3	黄改娟	北京信息科技大学智能信息处理研究所	11	46	4.0	6.0
9	王匆匆	北京信息科技大学智能信息处理研究所	1	0	0.0	0.0