基于渐进式丰富词典的分词方法研究

• 作者: 杨柳 袁方 霍亮
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 渐进式丰富词典 字符串匹配分词方法 统计分词方法
• 年，卷（期）: 2006,（32）
• 所属期刊栏目: 数据库与信息处理
• 页码范围: 164-166
• 页数: 3页
• 分类号: TP311
• 字数: 3235字
• 语种: 中文
• DOI: 10.3321/j.issn:1002-8331.2006.32.049

摘要

由于现代社会飞速发展,一些新的名词不断出现,在已有的字符串匹配的分词方法中,大部分的词典是固定的,如果出现新的词,那么就不能被正确识别出来.由此该文提出了渐进式丰富词典的分词方法,把那些不能正确分出来的字符串,利用统计词频的方法记录下来,如果词频达到一定阈值,就可以把它认为是新词,可以把它加入到词典中,使得词典动态的增加.实验证明,该方法在保证分词速度不受影响的基础上,可以提高分词的精度.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	袁方	河北大学数学与计算机科学学院	55	1249	17.0	34.0
2	杨柳	河北大学数学与计算机科学学院	44	134	6.0	10.0
6	霍亮	保定金融高等专科学校计算机系	2	9	2.0	2.0