您现在的位置 >> Hadoop教程 >> Hadoop实战 >> 专题  
 

Yahoo Pig

【作者:Hadoop实战专家】【关键词:数据集 集群 并行 提供 处理 】 【点击:55016次】【2013-03-1】
Yahoo Pig 是一个运行在Hadoop(Doug Cutting 在06年3月份加入了Yahoo )上的并行处理架构,有了Pig 使得普通的程序员具有了分析处理gigantic数据集的能力。2、运行在集群的计算架构上,Yahoo Pig 提供了多层抽象,简化并行计算让普通用户使用;  

相关热门搜索:zookeeper 集群 hadoop集群 第2期

大数据标签:hadoop bigdata

Yahoo Pig
关键字: pig

Yahoo Pig 是一个运行在Hadoop(Doug Cutting 在06年3月份加入了Yahoo )上的并行处理架构,有了Pig 使得普通的程序员具有了分析处理gigantic数据集的能力。
Pig目前还是apache的一个孵化器项目,
Pig 主页:http://incubator.apache.org/pig/
Pig wiki:http://wiki.apache.org/pig/
Yahoo Pig 有如下特点:
1、专注于于大量数据集分析(ad-hoc analysis , ad-hoc 代表:a solution that has been custom designed for a specific problem );
2、运行在集群的计算架构上,Yahoo Pig 提供了多层抽象,简化并行计算让普通用户使用;这些抽象完成自动把用户请求queries翻译成有效的并行评估计划,然后在物理集群上执行这些计划;
3、提供类似 SQL 的操作语法;
4、开放源代码;

大数据系列相关文章:

最新评论
势优技术2014-09-10 01:30:37
Execution framework set to Hadoop YARN.
追寻阳光的忍冬草2014-09-09 12:28:35
hadoop2.4 acl https......啥时有时间update一下呢
坏男人2014-09-08 12:05:59
群主给个大方向 大家开始学习
帅哥无声2014-09-07 06:30:48
大家有没有用hbase存储过小文件?
秦烈风2014-09-06 01:57:56
系统多少位的
全球网脑高路高人指路2014-09-06 12:29:10
招资深数据分析师(base杭州,支付宝BI)有意zhang166106@126.com 工作经验三年以上 熟悉hadoop,最好有互联网文本挖掘经验
芸玲2014-09-05 11:24:41
[英文原版]Hadoop in Practice_Holmes 2012 - 数据分析与数据挖掘 - 人大经济论坛 http://t.cn/8sl5AvH
传说2014-09-05 02:29:24
hbase 相关组建,主要实现数据一致性的好像
hebe2014-09-05 01:17:17
Hadoop、Spark、HBase与Redis的适用性讨论(全文) - 数据视野 - 51CTO技术博客 RPamuyX
寻找石头鱼2014-09-04 02:08:21
#求助#我遇到了问题,谁来帮帮我:hadoop读取GBK编码文件,中文乱码问题求助【来自百度知道】http://t.cn/8s2caoA
 
  • Hadoop生态系统资料推荐