大数据处理流程及存储模式的改进

• 作者: 孙红 郝泽明
• 来源期刊: 电子科技
• 学科: 工学
• 关键词: 大数据 数据存储 数据分析 Hadoop 标签云
• 年，卷（期）: 2015,（12）
• 所属期刊栏目: 专题综述
• 页码范围: 167-172
• 页数: 6页
• 分类号: TP311
• 字数: 4219字
• 语种: 中文
• DOI: 10.16180/j.cnki.issn1007-7820.2015.12.046

摘要

结合大数据的特点,提出以标签云改进方案来快速识别网络热搜词,同时考虑到传统的数据仓库在查询、存储结构化数据方面的优势,在目前学者提出的数据仓库与Hadoop平台结合的基础上,提出了协作模式中与以往不同的数据迁移方式,即使用数据中间件,并通过相同数量记录导入Hadoop的时间比较,得出文中所提的数据迁移方法较Sqoop方法更具优势的结论.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	孙红	上海理工大学光电信息与计算机工程学院	64	316	10.0	12.0
5	郝泽明	上海理工大学光电信息与计算机工程学院	1	12	1.0	1.0