基于Pig Latin语言的海量数据分析

• 作者: 胡黎玮
• 来源期刊: 数字技术与应用
• 学科: 农学
• 关键词: Pig平台 Pig Latin语言 海量数据 并行分析
• 年，卷（期）: 2010,（5）
• 所属期刊栏目: 学术论坛
• 页码范围: 174-176
• 分类号: S181
• 字数: 2271字
• 语种: 中文

摘要

随着互联网的飞速发展,分析海量教据的需求变得十分迫切.针对分布式数据库昂贵及Map-Reduce计算框架中代码难以维护、重用等问题,雅虎研发了自己的海量教据分析平台Pig.Pig平台基于Hadoop的Map-Reduce计算框架并提供类SQL的命令式查询语言Pig Latin,该平台为复杂的海量数据并行计算提供了简易的操作和编程接口.本文对Pig Latin语言四种数据模型,常用表达式及关键操作符进行介绍,并结合实例对Pig Latin脚本程序进行分析.

作者信息

序号	姓名	单位	发文数	被引次数	H指数	G指数
1	胡黎玮		5	38	5.0	5.0