基于MapReduce模型的分布式天文交叉证认

• 作者: 于策 刘旭 孙济洲 崔辰州 肖健 袁鳌 赵青
• 来源期刊: 计算机应用研究
• 关键词: 天文交叉证认 MapReduce 并行计算 分布式计算
• 年，卷（期）: 2010,（9）
• 页码范围: 3322-3325
• 分类号: TP302
• 语种: 中文
• DOI: 10.3969/j.issn.1001-3695.2010.09.032

摘要

交叉证认是实现多波段数据融合的关键技术,目前还缺乏对其分布式算法的研究.快速增长的数据规模使该问题必须要依赖分布式并行计算技术解决.提出了一种基于MapReduce分布式模型的新方法,根据Map-Reduce的要点,尽量减少了任务间的通信量,并通过合理设置划分粒度保证了效率与存储间的平衡.实验结果表明,该方法对海量数据交叉证认的效率提升明显,在大规模集群上达到了接近线性的加速比.该方法为交叉证认提供了一种快速有效的解决途径.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	孙济洲	天津大学计算机科学与技术学院	157	1707	21.0	34.0
2	肖健	天津大学计算机科学与技术学院	11	93	5.0	9.0
3	于策	天津大学计算机科学与技术学院	24	140	7.0	11.0
4	刘旭	天津大学计算机科学与技术学院	13	141	7.0	11.0
5	赵青	天津大学计算机科学与技术学院	8	53	4.0	7.0
6	袁鳌	天津大学计算机科学与技术学院	1	12	1.0	1.0