apache pig的哲学

www.r66r.net

这个对于pig意味这什么?

pig首先是一个apache的项目,他会帮助pig的开发者阅读本篇,了解pig未来的发展方向。

pigs吃任何东西

pig可以对任何数据进行操作,不管数据是否具备元数据。他可以处理非结构化的,嵌套的以及有联系的数据。他也可以通过扩展处理键值存储的数据,以及数据库中数据等。

pigs可以生活在任何地方

pig的目的是可以并行处理数据的语言。他可以不依赖并行处理框架,虽然他已经再hadoop上面实现相关的功能,但未来会支持在非hadoop环境,对数据进行并行处理。

pigs是家禽

pig可以很好的被用户进行设计与开发。用户可以通过java,python,js等进行自己的扩展,同时,支持用户进行装载(load)与存储(store)的功能,实现实际的函数库。

pig latin更好的帮助用户优化map/reduce的job,并具有更好的效率。

pigs 飞起来

pig可以快速处理数据,但是现在在这方面的权衡做的还不够完善,已pig的重量来说,现在还飞不起来。

 

 


更多 0





评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值