汉语文本自动分词算法的研究

• 作者: 何国斌 赵晶璐
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 自动分词 分词算法 字典 歧义切分
• 年，卷（期）: 2010,（3）
• 所属期刊栏目: 数据库、信号与信息处理
• 页码范围: 125-127,130
• 页数: 4页
• 分类号: TP391
• 字数: 5061字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.2010.03.037

摘要

分析了中文分词词典的机制,提出了一种改进的整词分词字典结构,并针对机械分词算法的特点,将其与概率算法相结合,探讨了一种中文自动分词概率算法.采用哈希及二分法对词典进行分词匹配.实验表明,该算法具有较高的分词效率和准确率,对于消去歧义词也有较好的性能.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	何国斌	西南大学计算机与信息科学学院	8	121	5.0	8.0
2	赵晶璐	西南大学计算机与信息科学学院	4	102	3.0	4.0