基于Hive的水利普查数据仓库

• 作者: 万定生 陈龙 顾昕辰
• 来源期刊: 计算机与现代化
• 学科: 工学
• 关键词: Hive 数据仓库 水利普查 模型优化 大规模数据处理
• 年，卷（期）: 2014,（5）
• 所属期刊栏目: 应用与开发
• 页码范围: 127-130
• 页数: 4页
• 分类号: TP311.13
• 字数: 3496字
• 语种: 中文
• DOI: 10.3969/j.issn.1006-2475.2014.05.028

摘要

针对水利普查数据海量、多维的特点,研究近年来在“大数据”概念下发展迅速的Hadoop与Hive,结合传统数据仓库在多维数据分析方面的成熟技术,提出基于Hive的水利普查数据仓库的构建方法,描述数据仓库系统的架构,并根据Hive的设计特点,通过分桶、消减维度表和冗余事实表的方法来改进传统的多维分析模型,最后搭建集群系统对水利普查数据集进行查询与分析测试.测试结果表明该数据仓库可以满足海量多维水利普查数据的存储与查询要求.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	万定生	河海大学计算机与信息学院	87	634	15.0	20.0
2	陈龙	河海大学计算机与信息学院	50	151	7.0	10.0
3	顾昕辰	河海大学计算机与信息学院	4	31	3.0	4.0