Hadoop支持下海量出租车轨迹数据预处理技术研究

• 作者: 吕江波 张永忠
• 来源期刊: 城市勘测
• 学科: 地球科学
• 关键词: 轨迹数据 Hadoop 大数据 数据预处理 并行计算
• 年，卷（期）: 2016,（3）
• 页码范围: 46-49
• 页数: 4页
• 分类号: P208.1
• 字数: 4212字
• 语种: 中文

摘要

海量出租车轨迹数据预处理是轨迹数据挖掘和应用的前提。出租车轨迹数据是典型的大数据，传统的数据处理技术无法解决大规模出租车轨迹数据误差分析和处理问题，文章在分析轨迹数据误差来源和误差类型的基础上，提出基于Hadoop的海量出租车轨迹数据预处理模型，使用Hive实现轨迹数据误差统计分析，设计MapReduce并行处理程序实现轨迹数据预处理。实验结果表明，该模型可以有效解决大规模出租车轨迹数据预处理问题，处理方式可靠性较高，大大提高了轨迹数据预处理效率，为后期轨迹数据深入挖掘和分析奠定了基础。

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	张永忠		12	55	5.0	7.0
3	吕江波		2	13	2.0	2.0