pig
听见下雨的声音hb
一期一会,IT人生
展开
-
vim中设置pig高亮
1、到http://www.vim.org/scripts/script.php?script_id=2186下载pig.vim 2、创建~/.vim/syntax,如果没有~/.vim/syntax,需要自己创建,用mkdir ~/.vim,然后再创建syntax 3、将pig.vim拷贝到~/.vim/syntax中 4、将如下代码拷贝到~/.vimrc中 5、用vim 打开xxx.p原创 2017-06-17 11:31:48 · 398 阅读 · 0 评论 -
Pig、Hive、MapReduce解决分组Top K问题(组内排序)
问题: 有如下数据文件 city.txt (id, city, value) cat city.txt 1 wh 500 2 bj 600 3 wh 100 4 sh 400 5 wh 200 6 bj 100 7 sh 200 8 bj 300 9 sh 900 需要按 city 分组聚合,然后从每组数据中取出前两条value最大的记录。 1、这是实际业务转载 2017-07-06 13:42:48 · 1270 阅读 · 0 评论 -
pig语法学习 FOREACH GENERATE group AS
深入浅出,转一个 转载必须注明出处:http://www.codelast.com/ 转载地址 本文可以让刚接触pig的人对一些基础概念有个初步的了解。 本文大概是互联网上第一篇公开发表的且涵盖大量实际例子的Apache Pig中文教程(由Google搜索可知),文中的大量实例都是作者Darran Zhang(website: codelast.com)在工作、学习转载 2016-11-01 15:39:22 · 802 阅读 · 0 评论