基于R+Hadoop的中药材大数据的分析及预测

• 作者: 朱昶胜 王永贤 王莎莎
• 来源期刊: 兰州理工大学学报
• 学科: 工学
• 关键词: 中药材 R语言 数据建模 Hadoop技术 决策树
• 年，卷（期）: 2017,（1）
• 所属期刊栏目: 自动化技术与计算机技术
• 页码范围: 98-103
• 页数: 6页
• 分类号: TP391
• 字数: 4608字
• 语种: 中文

摘要

Hadoop具有海量数据并行存储能力和高效并行计算架构,但缺乏数据建模和数据统计能力.针对Hadoop架构的数据统计分析能力的局限性,结合R语言和Hadoop框架的优点,提出一种基于R+ Hadoop环境的大数据分析及预测方法.以甘肃惠森药业电子商务平台“药材盈”采集的大数据为例,通过采用Hadoop集群并行处理中药材文本数据、RHadoop进行预处理并获取样本数据、R语言对样本数据建模,获得较为可靠的预测中药材市场价格的模型,对中药材市场价格的变化规律及影响因素进行分析和预测.采用线性模型和决策树模型对中药材大数据进行建模,并通过实验验证和比较得到预测中药材市场价格的最佳模型.