基于近端策略优化与对抗学习的对话生成

• 作者: 丁家满 游进国 蔡钺
• 来源期刊: 计算机工程与科学
• 学科: 工学
• 关键词: 对话生成 近端策略优化 强化学习 对抗生成网络 序列到序列模型
• 年，卷（期）: 2020,（9）
• 所属期刊栏目: 人工智能与数据挖掘
• 页码范围: 1680-1689
• 页数: 10页
• 分类号: TP391.1
• 语种: 中文
• DOI: 10.3969/j.issn.1007-130X.2020.09.019

摘要

对话生成是自然语言处理的重点研究方向,对抗生成网络GAN最近在对话生成领域得到了较好的应用.为了进一步改善对话生成的质量,并且解决GAN训练过程中判别模型返回奖励重复利用率低从而导致模型训练效率低的问题,提出一种基于近端策略优化PPO的对话生成算法PPO_GAN.该算法通过GAN模型生成对话,通过判别模型区分生成的对话与真实的对话.并采用近端策略优化的方法训练GAN,能处理GAN在对话生成时导致的反向传播不可微分的情况,在保证生成模型单调非减训练的同时,通过限制生成模型迭代的梯度使判别模型得到的奖励可以重复利用.实验结果表明,对比于极大似然估计与Adver-REGS等对话生成算法,PPO_GAN算法提高了对话训练的效率并且改善了对话生成的质量.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	游进国		18	37	4.0	4.0
2	丁家满		39	61	4.0	5.0
3	蔡钺		1	0	0.0	0.0