一种中文分词词典新机制--双字哈希机制

• 作者: 孙家广 李庆虎 陈玉健
• 来源期刊: 中文信息学报
• 学科: 工学
• 关键词: 计算机应用 中文信息处理 中文分词 双字哈希
• 年，卷（期）: 2003,（4）
• 页码范围: 13-18
• 页数: 6页
• 分类号: TP391.1
• 字数: 3405字
• 语种: 中文
• DOI: 10.3969/j.issn.1003-0077.2003.04.002

摘要

汉语自动分词是汉语信息处理的前提,词典是汉语自动分词的基础,分词词典机制的优劣直接影响到中文分词的速度和效率.本文首先分析了分词词典机制在中文分词中的重要性及已有的三种典型词典机制,并在此基础上根据汉语中双字词语较多的特点提出了一种新的分词词典机制--双字哈希机制,在不提升已有典型词典机制空间复杂度与维护复杂度的情况下,提高了中文分词的速度和效率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	孙家广	清华大学计算机系	99	2729	26.0	50.0
2	陈玉健	清华大学计算机系	13	457	8.0	13.0
3	李庆虎	清华大学计算机系	4	321	3.0	4.0