轨道交通线网大数据的建模和存储方案

• 作者: 张赛桥 胡波 陈莉莉
• 来源期刊: 计算机应用与软件
• 学科: 工学
• 关键词: 数据建模 数据仓库 城市轨道交通 线网指挥中心
• 年，卷（期）: 2018,（12）
• 所属期刊栏目: 应用技术与研究
• 页码范围: 131-134
• 页数: 4页
• 分类号: TP274
• 字数: 3593字
• 语种: 中文
• DOI: 10.3969/j.issn.1000-386x.2018.12.025

摘要

阐述一种面向轨道交通指挥中心,基于Hadoop架构的线网大数据的数据建模和数据存储方法.将线网大数据中的结构化数据,结合Hadoop平台以及组件特点和轨道交通行业的数据应用情况,选择合理的数据模型,进行数据建模和数据存储.针对逻辑建模作了详细阐述:临时数据文件和基础数据统一建模后存入HBase,中间数据层和数据集市层,以降范式的方法建表存入Hive中.对非结构化数据,采用Hadoop平台按应用和时间分类将小文件存入HBase,并可支持全文检索和分析.搭建的验证平台的实施结果证明,该方案对线网大数据实现了规范和高效的数据存储.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	胡波		5	8	1.0	2.0
2	陈莉莉		3	1	1.0	1.0
3	张赛桥		1	0	0.0	0.0