一种改进的MM分词算法

• 作者: 崔骏 王文 苏中义 郭辉
• 来源期刊: 微型电脑应用
• 学科: 工学
• 关键词: 分词 自然语言处理 最大匹配法
• 年，卷（期）: 2002,（1）
• 所属期刊栏目: 研究与设计
• 页码范围: 13-15
• 页数: 3页
• 分类号: TP39
• 字数: 3283字
• 语种: 中文
• DOI: 10.3969/j.issn.1007-757X.2002.01.004

摘要

本文首先提出一种对中文句子进行分词预处理的方法,在预处理过程中就能完成分词过程中所有的数据库访问操作,这种方法可以不加修改地应用于所有机械分词算法以及消除歧义;然后在预处理的基础上实现一种改进的MM法,更加完全地遵照"长词优先"的原则,使分词系统在机械分词阶段能有比MM法更好的效果.