归一化的邻接变化数方法在中文分词中的应用

• 作者: 何赛克 张韬政 王小捷 白雪 董远
• 来源期刊: 中文信息学报
• 学科: 工学
• 关键词: 计算机应用 中文信息处理 无监督分词 条件随机场 归一化的邻接变化数方法
• 年，卷（期）: 2010,（1）
• 页码范围: 15-19
• 页数: 5页
• 分类号: TP391
• 字数: 4560字
• 语种: 中文
• DOI: 10.3969/j.issn.1003-0077.2010.01.003

摘要

该文提出了一种无监督和有监督相结合的中文分词方法: 将邻接变化数(Accessor Variety,AV)引入基于条件随机场的中文分词系统中.针对邻接变化数在处理较少的训练数据时存在的缺陷,提出了一种归一化的改进方法,以减轻计算AV值时产生的波动.基于Bakeoff-4的中文分词实验表明,归一化的邻接变化数方法无论对于封闭测试,还是开放测试,都带来了性能的提升.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王小捷	北京邮电大学计算机科学与技术学院	35	179	8.0	11.0
2	董远	北京邮电大学信息与通信工程学院	2	18	2.0	2.0
4	何赛克	北京邮电大学信息与通信工程学院	1	10	1.0	1.0
7	张韬政	北京邮电大学计算机科学与技术学院	2	10	1.0	2.0
8	白雪	北京邮电大学计算机科学与技术学院	1	10	1.0	1.0