一种快速中文分词词典机制

• 作者: 吴晶晶 王平建 聂晓峰 荆继武
• 来源期刊: 中国科学院研究生院学报
• 学科: 工学
• 关键词: 文本实时处理 中文分词 词典法分词 双字词-长词哈希机制
• 年，卷（期）: 2009,（5）
• 所属期刊栏目: 论文
• 页码范围: 703-711
• 页数: 9页
• 分类号: TP391.1
• 字数: 6132字
• 语种: 中文

摘要

通过研究目前中文分词领域各类分词机制,注意到中文快速分词机制的关键在于对单双字词的识别,在这一思想下,提出了一种快速中文分词机制:双字词-长词哈希机制,通过提高单双字词的查询效率来实现对中文分词机制的改进.实验证明,该机制提高了中文文本分词的效率.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	荆继武	中国科学院研究生院信息安全国家重点实验室	63	768	16.0	26.0
2	聂晓峰	中国科学院研究生院信息安全国家重点实验室	5	46	3.0	5.0
3	吴晶晶	中国科学技术大学电子工程与信息科学系	5	54	3.0	5.0
7	王平建	中国科学院研究生院信息安全国家重点实验室	6	63	3.0	6.0