融合主题及上下文特征的汉缅双语词汇抽取方法

• 作者: 余正涛 张亚飞 李越 毛存礼 王振晗 高盛祥
• 来源期刊: 小型微型计算机系统
• 学科: 工学
• 关键词: 汉缅双语词汇 主题特征 上下文特征 BERT 双语词向量
• 年，卷（期）: 2021,（1）
• 所属期刊栏目: 人工智能与算法研究
• 页码范围: 91-95
• 页数: 5页
• 分类号: TP311
• 语种: 中文

摘要

缅甸语属于低资源语言,网络中获取大规模的汉-缅双语词汇一定程度上可以缓解汉-缅机器翻译中面临句子级对齐语料匮乏的问题.为此,本文提出了一种融合主题及上下文特征的汉缅双语词汇抽取方法.首先利用LDA主题模型获取汉缅文档主题分布,并通过双语词向量表征将跨语言主题向量映射到共享的语义空间后抽取同一主题下相似度较高的词作为汉-缅双语候选词汇,然后基于BERT获取候选双语词汇相关上下文的词汇语义表征构建上下文向量,最后通过计算候选词的上下文向量的相似度对候选双语词汇进行加权得到质量更高的汉缅互译词汇.实验结果表明,相对于基于双语词典的方法和基于双语LDA+CBW的方法,本文提出的方法准确率上分别提升了11.07％和3.82％.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	余正涛		122	877	17.0	24.0
2	毛存礼		21	85	5.0	8.0
3	高盛祥		21	77	4.0	8.0
4	张亚飞		7	8	2.0	2.0
5	李越		6	8	2.0	2.0
6	王振晗		1	0	0.0	0.0