运营商网络中基于深度强化学习的服务功能链迁移机制

• 作者: 何颖 冯钢 周杨 陈卓
• 来源期刊: 电子与信息学报
• 学科: 工学
• 关键词: 运营商网络 迁移机制 深度强化学习 服务功能链
• 年，卷（期）: 2020,（9）
• 页码范围: 2173-2179
• 页数: 7页
• 分类号: TN915; TP393
• 语种: 中文
• DOI: 10.11999/JEIT190545

摘要

为改善运营商网络提供的移动服务体验，该文研究服务功能链(SFC)的在线迁移问题。首先基于马尔可夫决策过程(MDP)对服务功能链中的多个虚拟网络功能(VNF)在运营商网络中的驻留位置迁移进行模型化分析。通过将强化学习和深度神经网络相结合提出一种基于双深度Q网络(double DQN)的服务功能链迁移机制，该迁移方法能在连续时间下进行服务功能链的在线迁移决策并避免求解过程中的过度估计。实验结果表明，该文所提出的策略相比于固定部署算法和贪心算法在端到端时延和网络系统收益等方面优势明显，有助于运营商改善服务体验和资源的使用效率。