基于Spark的分布式机器人强化学习训练框架

• 作者: 徐建斌 方伟 马新强 黄增强 黄羿
• 来源期刊: 图学学报
• 学科: 工学
• 关键词: 机器人 强化学习 Spark 分布式 数据管道
• 年，卷（期）: 2019,（5）
• 所属期刊栏目: 专论:第16届媒体智能与大数据计算会议(CIDE&DEA 2019大连)
• 页码范围: 852-857
• 页数: 6页
• 分类号: TP242
• 字数: 3625字
• 语种: 中文
• DOI: 10.11996/JG.j.2095-302X.2019050852

摘要

强化学习能够通过自主学习的方式对机器人难以利用控制方法实现的各种任务进行训练完成,有效避免了系统设计人员对系统建模或制定规则.然而,强化学习在机器人开发应用领域中训练成本高昂,需要花费大量时间成本、硬件成本实现学习训练,虽然基于仿真可以一定程度减少硬件成本,但对类似Gazebo这样的复杂机器人训练平台,仿真过程工作效率低,数据采样耗时长.为了有效解决这些问题,针对机器人仿真过程的平台易用性、兼容性等方面进行优化,提出一种基于Spark的分布式强化学习框架,为强化学习的训练与机器人仿真采样提供分布式支持,具有高兼容性、健壮性的特性.通过实验数据分析对比,表明本系统框架不仅可有效提高机器人的强化学习模型训练速度,缩短训练时间花费,且有助于节约硬件成本.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	方伟	浙江大学智能系统与控制研究所	20	16	2.0	3.0
3	黄羿	浙江大学智能系统与控制研究所	28	164	6.0	12.0
7	黄增强	杭州电子科技大学计算机学院	1	0	0.0	0.0
8	徐建斌		2	3	1.0	1.0