面向汉维机器翻译的神经网络语言模型

• 作者: 李晓 李毓 杨雅婷 米成刚 董瑞
• 来源期刊: 厦门大学学报（自然科学版）
• 学科: 文学
• 关键词: 维吾尔语 机器翻译 语言模型 词向量 长短时序记忆网络
• 年，卷（期）: 2019,（2）
• 所属期刊栏目: 民族语言处理
• 页码范围: 189-194
• 页数: 6页
• 分类号: H085
• 字数: 4411字
• 语种: 中文
• DOI: 10.6043/j.issn.0438-0479.201811020

摘要

针对传统神经网络语言模型方法只关注词语之间关系或者词语内部信息而导致维吾尔语语言模型困惑度(PPL)过高的问题,提出了融入词素信息的维吾尔语神经网络语言模型.该方法在传统神经网络语言模型的基础上添加了词内结构建模层及合并层,利用双向长短时序记忆网络来捕捉词内结构信息,并与word2vec训练好的词向量相结合作为神经网络语言模型的输入;同时还采用重构N元语法(N-gram)语言模型的方式将神经网络模型应用到汉维统计机器翻译中.实验表明该模型的PPL降低了19.93,在汉维统计机器翻译任务中机器双语互译评估(BLEU)值提升了0.28个百分点.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	李晓	中国科学院新疆理化技术研究所新疆民族语音语言信息处理实验室	192	3933	35.0	55.0
2	杨雅婷	中国科学院新疆理化技术研究所新疆民族语音语言信息处理实验室	26	79	6.0	8.0
3	米成刚	中国科学院新疆理化技术研究所新疆民族语音语言信息处理实验室	8	44	4.0	6.0
4	李毓	中国科学院新疆理化技术研究所新疆民族语音语言信息处理实验室	1	0	0.0	0.0