基于Lucene的中文分词模块的设计和实现

• 作者: 徐俊刚 罗宁 郭洪韬
• 来源期刊: 电子技术
• 学科: 工学
• 关键词: 搜索引擎 中文分词 Lucene 哈希索引
• 年，卷（期）: 2012,（9）
• 所属期刊栏目: 电子技术设计与应用
• 页码范围: 54-56
• 分类号: TP391.1
• 字数: 3444字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-0755.2012.09.018

摘要

基于当前最流行的全文检索引擎架构Lucene,文章设计并实现了一个中文分词模块.分词模块中的核心算法是基于字符串匹配与统计相结合的中文分词算法,其主要研究目的在于寻找更为有效的中文词汇处理方法,提高全文检索系统的中文处理能力.通过实验发现,该模块的分词准确率较高,分词速度有进一步的提升空间.下一步我们将通过多种改进措施,来完善该分词模块,最终构建出一个高效的中文全文检索系统.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	罗宁		7	76	4.0	7.0
2	徐俊刚		36	499	10.0	22.0
3	郭洪韬		1	19	1.0	1.0