一种分布式并行参数优化算法设计及其应用

• 作者: 何洪林 王彦棡 陆忠华 陈呈辉 陈曦
• 来源期刊: 科研信息化技术与应用
• 关键词: 参数优化算法 分布式平台 Spark算法
• 年，卷（期）: 2016,（5）
• 所属期刊栏目: 技术
• 页码范围: 13-20
• 页数: 8页
• 字数: 5253字
• 语种: 中文
• DOI: 10.11871/j.issn.1674-9480.2016.05.002

摘要

并行参数优化算法在科学计算中有广泛应用.随着Spark等分布式平台的快速发展,越来越多并行参数优化算法开始采用分布式平台进行实现.如何在Spark等平台上设计优化算法,避免其运行效率受到框架固定时间开销和网络I/O影响,已经成为亟需解决的问题.本文设计一种分布式与单机多核并行结合的参数优化算法,将其划分为调度部分和独立子问题部分,单机多核并行算法处理子问题,分布式平台负责子问题的跨节点并行.碳通量模型参数优化的实验结果表明,改进的算法能有效节省时间开销,更快地搜索参数空间.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	陈曦	中国科学院新疆生态与地理研究所	248	4761	35.0	57.0
2	何洪林	中国科学院地理科学与资源所	31	693	11.0	26.0
3	陆忠华	中国科学院计算机网络信息中心	55	174	7.0	11.0
4	王彦棡	中国科学院计算机网络信息中心	13	15	2.0	3.0
5	陈呈辉		1	0	0.0	0.0