基于最大匹配的中文分词概率算法研究

• 作者: 何国斌 赵晶璐
• 来源期刊: 计算机工程
• 学科: 工学
• 关键词: 分词词典 跳跃表 分词算法 概率算法
• 年，卷（期）: 2010,（5）
• 所属期刊栏目: 人工智能及识别技术
• 页码范围: 173-175
• 页数: 3页
• 分类号: TP301.6
• 字数: 4411字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-3428.2010.05.063

摘要

结合顺序表和跳跃表的快速查询特性,提出一种改进的整词分词词典结构,主要采用哈希法和二分法进行分词匹配,并针对机械分词算法的特点,引入随机数,探讨一种基于最大匹配的分词概率算法.实验表明,该算法具有较高的分词效率和准确率,对消去歧义词也有较好的性能.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	何国斌	西南大学计算机与信息科学学院	8	121	5.0	8.0
2	赵晶璐	西南大学计算机与信息科学学院	4	102	3.0	4.0