一种基于全Hash的整词二分词典机制

• 作者: 丁宋涛 彭焕峰
• 来源期刊: 计算机工程
• 学科: 工学
• 关键词: 中文分词 Hash函数 整词二分 逐字二分 最大匹配
• 年，卷（期）: 2011,（21）
• 所属期刊栏目: 软件技术与数据库
• 页码范围: 40-42
• 分类号: TP391.1
• 字数: 4676字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-3428.2011.21.014

摘要

为提高整词二分词典机制的分词效率,分析现有分词词典机制,提出一种基于全Hash的整词二分词典机制.该机制将首字相同的词条按字数分组,并进行全词Hash,对Hash值相同的词条进行二分查找,从而减少词条匹配的次数.理论分析和实验结果表明,该机制的分词效率较高.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	彭焕峰	南京工程学院计算机工程学院	31	85	6.0	7.0
2	丁宋涛	南京大学软件学院	4	61	3.0	4.0