大数据Spark技术研究

• 作者: 刘峰波
• 来源期刊: 数字技术与应用
• 学科: 工学
• 关键词: 大数据 Hadoop Spark Spark流
• 年，卷（期）: 2015,（9）
• 所属期刊栏目: 应用研究
• 页码范围: 90,92
• 页数: 2页
• 分类号: TP311
• 字数: 1966字
• 语种: 中文

摘要

文章从技术角度对Spark进行了深入探讨.首先提出了Hadoop的技术缺陷;然后提出了Spark的设计思想和系统架构,分析了Spark在Spark SQL、MLlib、Spark流和GraphX方面技术处理过程.接着重点分析了Spark的六种运行模式的执行过程;最后分析了Spark当前应用现状和未来发展趋势.