大数据全生命周期中关键问题研究及应用

• 作者: 刘道新 张健 徐秀敏 胡航海
• 来源期刊: 中国电机工程学报
• 学科: 工学
• 关键词: 大数据 压缩存储 缓存机制 动态配置 统一数据资源库
• 年，卷（期）: 2015,（1）
• 所属期刊栏目: 大数据与电力系统
• 页码范围: 23-28
• 页数: 6页
• 分类号: TP311
• 字数: 5415字
• 语种: 中文
• DOI: 10.13334/j.0258-8013.pcsee.2015.01.003

摘要

随着大数据时代的到来，大数据全生命周期中获取、存储、处理、挖掘等方面的研究逐步展开，成为行业、政府的研究热点。该文以国内外电力行业、金融、经济等数据为研究对象，对大数据的存储、处理、挖掘三大关键问题进行研究。根据大数据特点进行分类；建立基于改进稀疏矩阵、指标维度和指标数据分离方式的大数据压缩存储模型，实现大数据的压缩存储和动态扩展。提出按照指标分类及关联关系建立数据缓存模型的方法，实现大数据的高效访问和灵活转换。在挖掘展现时应用动态可配置的设计方法，解决数据查询海量页面的动态生成问题。该文可为大数据存储、处理、挖掘研究提供有价值的参考，并将研究成果应用到统一资源库的建设中。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	刘道新	华北电力大学经济与管理学院	4	61	3.0	4.0
2	张健		11	91	4.0	9.0
3	胡航海		5	35	2.0	5.0
4	徐秀敏		3	36	2.0	3.0