面向图计算的运行时系统的消息聚合技术

• 作者: 张鲁飞 孙茹君 秦芳
• 来源期刊: 计算机应用
• 关键词: 图计算 运行时系统 可扩展性 通信模型 消息聚合
• 年，卷（期）: 2021,（4）
• 所属期刊栏目: CCF 第35届中国计算机应用大会(CCF NCCA 2020)|The 35 CCF National Conference of Computer Applications (CCF NCCA 2020)
• 页码范围: 984-989
• 页数: 6页
• 分类号: TP311
• 语种: 中文
• DOI: 10.11772/j.issn.1001-9081.2020081290

摘要

图计算应用的通信模式以时空随机的点对点细粒度通信为主,但现有高性能计算机的网络系统应对大量细粒度通信时表现不佳,进而影响整体性能.虽然在应用层进行通信优化可以有效提升图计算应用性能,但这会给应用开发人员带来很大的负担,因此提出并实现结构动态的消息聚合技术,通过构建虚拟拓扑的方法在通信路径上增加中间点从而提升消息聚合的效果.传统的消息聚合策略一般仅在通信源或者目的地上进行,聚合机会有限,而所提技术通过灵活调整虚拟拓扑的结构和配置适应了不同硬件条件和应用特征.同时,还提出并实现了面向图计算的有消息聚合的运行时系统,这使得在程序迭代执行时可以动态选择参数,从而减少开发人员负担.在256节点规模的系统上实验的结果显示,使用所提消息聚合技术优化后的典型图计算应用的性能可得到100％以上的提升.