基于Hive的智慧城市数据处理技术研究与实现

• 作者: 刘云峰 艾丽蓉
• 来源期刊: 计算机技术与发展
• 学科: 工学
• 关键词: 智慧城市 Hive 数据采集 数据可视化分析
• 年，卷（期）: 2018,（2）
• 所属期刊栏目: 智能、算法、系统工程
• 页码范围: 9-13
• 页数: 5页
• 分类号: TP311
• 字数: 4274字
• 语种: 中文
• DOI: 10.3969/j.issn.1673-629X.2018.02.003

摘要

对智慧城市系统中产生的大量数据进行有效的采集、合理的存储、高效精准的分析,进而对决策的做出提供合理的支持是在智慧城市建设过程中必须要解决的问题.对此,在充分理解智慧园区数据分析系统功能需求、性能需求的基础上,结合当前比较主流的数据分析方面的技术,提出了Kettle+Hive+Tableau的智慧园区数据分析解决方案.该系统具有较高的可用性、稳定性、效率以及非常高的扩展性、可移植性,不仅适合于对智慧园区的数据分析,还普遍适用于对智能化信息系统数据进行分析,具有较高的普适性、通用性.该系统通过ETL工具、数据可视化工具的应用,尽量减少在数据分析系统开发过程中代码的编写,能够适用于绝大部分有数据分析需求并且数据量较大的信息化系统.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	艾丽蓉	西北工业大学计算机学院	36	357	10.0	18.0
2	刘云峰	西北工业大学计算机学院	1	4	1.0	1.0