一种面向CASA的分布式数据存储策略

• 作者: 乐嘉锦 王梅 过汇卿
• 来源期刊: 计算机应用与软件
• 学科: 工学
• 关键词: 分布式 天文 阵列数据
• 年，卷（期）: 2016,（11）
• 所属期刊栏目: 数据工程
• 页码范围: 28-32
• 页数: 5页
• 分类号: TP3
• 字数: 4470字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-386x.2016.11.007

摘要

随着天文设备的进步发展，对海量天文数据处理形成了新的挑战。为使当前主流的天文数据分析软件可以有效处理海量数据，提出一种适用于射电天文处理上层应用的分布式数据存储策略 DDSS（Distributed Data Storage Strategy）。首先，设计分布式数据存储策略的系统框架。其次，设计混合分片列式存储方法，在保留列存储查询优势的同时提升了数据导入的速度。进一步，通过维护基于相对位置映射的元数据来快速读取包含大量数据的天文阵列数据，显著地提升了天文处理应用底层数据读写的吞吐量。最后，通过实验证明了该方法的有效性。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	乐嘉锦	东华大学计算机科学与技术学院	131	1480	20.0	32.0
2	王梅	东华大学计算机科学与技术学院	36	264	9.0	14.0
3	过汇卿	东华大学计算机科学与技术学院	1	4	1.0	1.0