非连续数据网络通信实现方法和性能分析

• 作者: 付斌章 安仲奇 安学军 朱泓睿 王展 邵恩 陆钢 马潇潇
• 来源期刊: 计算机学报
• 学科: 工学
• 关键词: 非连续数据通信 远程数据直接访问卸载 SGRS UMR 人工打包拆包
• 年，卷（期）: 2020,（6）
• 所属期刊栏目: 高性能计算
• 页码范围: 1123-1138
• 页数: 16页
• 分类号: TP391
• 字数: 12511字
• 语种: 中文
• DOI: 10.11897/SP.J.1016.2020.01123

摘要

非连续数据通信是指发送端将位于不同地址的多块数据传输到接收端的多个非连续地址.这种通信模式在科学计算应用中十分常见,如求解计算、FFT计算、流体力学模拟等应用均涉及矩阵的转置传输,多维矩阵的子矩阵传输,非结构化数据访问等非连续数据通信.所以,非连续数据的通信性能对众多科学计算应用有重要的影响.目前,有多种实现非连续数据通信的卸载或者非卸载的方法,但是迄今没有工作在同一平台对主流的非连续数据通信实现方法进行评测和分析,也没有工作对每一种实现方式适用的情况进行总结.本文首先总结了目前非连续数据通信的实现方式,然后,本文使用已有的测试集和自己设计的测试集对不同方式的非连续数据通信性能进行了详细的对比测试,细粒度地分析了在不同数据分布的情况下数据拷贝和RDMA通信的开销,尤其对基于RD-MA sg_list(scatter-gather list)和UMR(User-mode Memory Registration)功能的卸载性能进行了分析,并总结了各种非连续数据通信方式的适用情况和存在的问题.最后,本文通过实验验证了分析结果的正确性,并对于该分析结果相关的技术提出了优化的方向.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王展	中国科学院计算技术研究所	18	408	8.0	18.0
2	邵恩	中国科学院计算技术研究所	2	0	0.0	0.0
3	安仲奇	中国科学院计算技术研究所	2	8	1.0	2.0
4	马潇潇	中国科学院计算技术研究所	1	0	0.0	0.0
8	陆钢	华为技术有限公司罗素实验室	1	0	0.0	0.0
9	付斌章	华为技术有限公司罗素实验室	1	0	0.0	0.0
10	朱泓睿	中国科学院计算技术研究所	1	0	0.0	0.0