中文信息检索中词典机制分词算法的研究

• 作者: 宗中
• 来源期刊: 计算机技术与发展
• 学科: 工学
• 关键词: 信息检索 中文分词 数据结构 哈希
• 年，卷（期）: 2014,（4）
• 所属期刊栏目: 智能、算法、系统工程
• 页码范围: 118-121
• 页数: 4页
• 分类号: TP301.6
• 字数: 3489字
• 语种: 中文
• DOI: 10.3969/j.issn.1673-629X.2014.04.030

摘要

中文自动分词是实现搜索引擎信息检索的基础，分词词典是汉语自动分词系统的一个重要组成部分，词典的加载和查询速度直接影响到分词系统的速度。文中在研究传统词典机制的基础上，分析了基于双字哈希词典机制对词条除首次字外剩余词的不足，给出了一种改进的双字哈希的词典机制。最后，文中对改进算法从准确率、分全率和分词速度等方面进行了测试，结果表明，改进后的分词算法在不提升已有典型词典机制维护复杂度的情况下，提高了词条匹配的查询速度和效率。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	宗中		1	9	1.0	1.0