基于任务分配和数据集副本的科学工作流数据布局

• 作者: 刘茜萍 尚蕾
• 来源期刊: 计算机工程
• 学科: 工学
• 关键词: 云环境 科学工作流 任务分配 数据集副本 数据布局 传输费用
• 年，卷（期）: 2020,（5）
• 所属期刊栏目: 先进计算与数据处理
• 页码范围: 122-130,138
• 页数: 10页
• 分类号: TP391
• 字数: 8746字
• 语种: 中文
• DOI: 10.19678/j.issn.1000-3428.0055397

摘要

云环境下科学工作流的数据布局成为当前工作流研究中的一个热点问题,对科学工作流中任务和数据之间多对多关系进行分析,可以发现不同数据布局方案在数据传输上的费用各不相同,在很大程度上影响工作流的运行成本.为降低科学工作流数据集传输费用,提出一种基于任务分配和数据集副本的科学工作流数据布局方法.该方法从任务分配开始,在定量计算任务依赖度的基础上进行任务分配,根据分配结果给出一个基于数据集副本的两阶段数据布局方法,以实现科学工作流运行中传输费用的优化.实例结果表明,与工作流层方法相比,该方法可以有效降低科学工作流的运行成本.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	刘茜萍	南京邮电大学计算机学院江苏省大数据安全与智能处理重点实验室	15	22	3.0	3.0
2	尚蕾	南京邮电大学计算机学院江苏省大数据安全与智能处理重点实验室	1	0	0.0	0.0