基于Hadoop分布式文件系统的分析与研究

• 作者: 王跃
• 来源期刊: 计算机光盘软件与应用
• 学科: 工学
• 关键词: Hadoop Map/Reduce HDFS 云计算
• 年，卷（期）: 2011,（9）
• 所属期刊栏目: 软件设计开发
• 页码范围: 161-162
• 分类号: TP393
• 字数: 2253字
• 语种: 中文

摘要

通过对HDFS(Hadoop的一个分布式文件系统)以及Map/Reduce数据驱编程模型和HBase分布式的、列存储数据库和Hive分布式数据仓库的分析.可以得到Hadoop的优势在于能以批处理模式处理PB级以上的数据集,适合做离线的数据分析,不适合实时响应需求,如股票系统.客户端是打包成JAR文件形式,运行于Hadoop命令行界面,可以定制执行策略,当数据到来的时候运行Map/Reduce程序,可以手动执行也可以定时执行.可以用Map/Reduce作为BI等海量数据分析平台的分布式数据处理引擎,HDFS作为底层存储文件系统.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	王跃		4	19	1.0	4.0