二元语法中文分词数据平滑算法性能研究

• 作者: 刘丹 周泓 方卫国
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 数据平滑 中文分词 二元语法
• 年，卷（期）: 2009,（17）
• 所属期刊栏目: 博士论坛
• 页码范围: 33-36
• 页数: 4页
• 分类号: TP391
• 字数: 3621字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.2009.17.010

摘要

将多种平滑算法应用于基于二元语法的中文分词,在1998年1月人民日报语料库的基础上,讨论了困惑度和实际分词性能之间的关系,对比分析各平滑算法的实际性能,结果表明,简单的加值平滑算法性能最优,封闭精度、召回率分别为99.68%、99.7%,开放精度、召回率为98.64%、98.74%.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	周泓	北京航空航天大学经济管理学院	94	1047	20.0	26.0
2	方卫国	北京航空航天大学经济管理学院	37	324	10.0	17.0
3	刘丹	北京航空航天大学经济管理学院	23	83	6.0	8.0