大数据流计算环境下的低延时高可靠性的资源调度方法

• 作者: 孙怀英 范贵生 虞慧群 陈丽琼
• 来源期刊: 华东理工大学学报（自然科学版）
• 学科: 工学
• 关键词: DSG 高可靠性 低延时 资源熵 响应时间
• 年，卷（期）: 2017,（6）
• 所属期刊栏目: 信息科学与工程
• 页码范围: 855-862
• 页数: 8页
• 分类号: TP391
• 字数: 4402字
• 语种: 中文
• DOI: 10.14135/j.cnki.1006-3080.2017.06.016

摘要

在大数据处理过程中,如何保证流数据处理的可靠性及实时性变得日益重要.本文使用数据流图(DSG)对大数据流应用过程进行描述,并将DSG表示为扩展的Petri网以便对数据流过程进行建模.提出了基于CPU利用率平均变化率的资源熵算法计算资源组可靠性,并根据资源熵算法提出了基于时间和可靠性的资源调度算法(TRS-SCHE)以获得高可靠性、低延时的资源调度方案.通过仿真实验,模拟实现soda交通大数据分析应用并进行资源的调度,验证了TRS-SCHE相比于Storm隔离调度算法在响应时间、请求失败率和算法时间复杂度方面的优势.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	虞慧群	华东理工大学计算机科学与工程系	113	814	14.0	24.0
2	陈丽琼	上海应用技术学院计算机科学与信息工程系	10	115	5.0	10.0
3	范贵生	华东理工大学计算机科学与工程系	47	341	10.0	17.0
4	孙怀英	华东理工大学计算机科学与工程系	3	7	1.0	2.0