基于数据量的文本分词算法选取的研究

• 作者: 吴英杰 王一蕾
• 来源期刊: 福建电脑
• 学科: 工学
• 关键词: 无词典分词 最大匹配分词 数据量
• 年，卷（期）: 2006,（9）
• 所属期刊栏目: 基金项目论文
• 页码范围: 18-19
• 页数: 2页
• 分类号: TP3
• 字数: 2643字
• 语种: 中文
• DOI: 10.3969/j.issn.1673-2782.2006.09.010

摘要

分析了无词典分词及最大匹配快速分词算法的特点,并针对大数据量和小数据量两类文本,对两种算法进行性能测试.结果表明,两种算法均适用于大数据量的文本分词.此外,对无词典分词算法加以改进,使之也适用于小数据量的文本分词,并通过仿真实验验证改进的有效性.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	吴英杰	福州大学数学与计算机科学学院	66	453	11.0	19.0
2	王一蕾	福州大学数学与计算机科学学院	31	155	7.0	11.0