基于HBase的气象结构化数据查询优化

• 作者: 徐熙超 杨铮 马廷淮
• 来源期刊: 计算机工程与应用
• 学科: 工学
• 关键词: 气象数据 HBase 辅助索引 分布式存储
• 年，卷（期）: 2017,（9）
• 所属期刊栏目: 大数据与云计算
• 页码范围: 80-84
• 页数: 5页
• 分类号: TP311.138
• 字数: 4398字
• 语种: 中文
• DOI: 10.3778/j.issn.1002-8331.1601-0040

摘要

海量气象观、探测数据是提高公共气象服务精细化、精准化和个性化水平的关键.日增TB级的海量气象数据在存储、检索、传输、共享方面的时效性要求对构建在传统的IOE技术架构上气象数据管理系统提出了严峻挑战.在HBase基础上,提出了一个基于索引的气象结构化数据查询优化架构HBase4M(HBase for Meteorology).首先,根据HBase存储特性设计表结构;然后,利用协处理器建立和维护辅助索引,将字段查询转化为对索引表的行键查询,使得HBase4M在具备HBase可扩展性、低延迟的特性上可以支持结构化气象数据的灵活查询.实验结果表明,HBase4M的性能可以基本满足气象服务的业务需要.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	马廷淮	南京信息工程大学计算机与软件学院	39	239	7.0	14.0
5	徐熙超	南京信息工程大学计算机与软件学院	1	6	1.0	1.0
9	杨铮	南京信息工程大学计算机与软件学院	1	6	1.0	1.0