一种基于SVM和规则消除组合型歧义的算法

• 作者: 何中市 刘禹孜
• 来源期刊: 重庆大学学报（自然科学版）
• 学科: 工学
• 关键词: 自然语言处理 中文分词 组合型歧义 支持向量机 规则
• 年，卷（期）: 2005,（10）
• 所属期刊栏目: 计算机·通信·自动化
• 页码范围: 50-53
• 页数: 4页
• 分类号: TP391
• 字数: 4095字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-582X.2005.10.014

摘要

歧义的处理是影响分词系统切分精度的重要因素,也是中文自动分词系统中较为困难的问题.提出一种基于支持向量机(SVM)和规则(Rules)相结合的算法(SR算法),对中文分词过程中的组合型歧义字段进行排歧.SR算法主要思想是利用支持向量机分类的原理,结合词性搭配的一些规则排除组合型歧义.实验表明,用此算法对几种不同的语料进行排歧测试,排除组合型歧义字段的切分正确率可达83%左右,为解决中文自动分词难题提供了一条新路径.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	何中市	重庆大学计算机学院	96	980	17.0	24.0
2	刘禹孜	重庆大学计算机学院	1	13	1.0	1.0