基于分组的次数与规则剪枝相结合的语言模型压缩方法研究

• 作者: 吴娴 吴晓春 朱巧明 李培峰
• 来源期刊: 计算机工程与科学
• 学科: 工学
• 关键词: 语言模型压缩 次数剪切 规则剪枝 分组 困惑度
• 年，卷（期）: 2008,（11）
• 所属期刊栏目: 研究与实现
• 页码范围: 129-133
• 页数: 5页
• 分类号: TP391.1
• 字数: 5705字
• 语种: 中文
• DOI: 10.3969/j.issn.1007-130X.2008.11.040

摘要

由于庞大的训练语料,统计语言模型的大小往往会超出手持设备的存储能力.随着现阶段资源受限设备的迅速发展,语言模型的压缩研究也就显得更加重要.本文提出了一个语言模型压缩方法,即将次数剪切与规则剪枝方法相结合,并使用分组的方法保证在不减少单元数目的情况下压缩模型.文章对使用新的算法得到的语言模型与次数剪切和规则剪枝方法分别进行困惑度比较.实验结果表明,使用新方法得到的语言模型性能更好.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	朱巧明	苏州大学计算机科学与技术学院	261	2058	25.0	31.0
2	李培峰	苏州大学计算机科学与技术学院	138	995	16.0	24.0
3	吴娴	苏州大学计算机科学与技术学院	14	183	7.0	13.0
4	吴晓春	苏州大学计算机科学与技术学院	3	4	1.0	1.0