Pig
思潮
这个作者很懒,什么都没留下…
展开
-
写在前面
内容主要为学习到的Pig的相关知识,起到知识记忆及梳理的作用,并按以下方式进行组织。1.知识梳理2.Q&A原创 2015-11-16 13:51:55 · 392 阅读 · 0 评论 -
Pig初识
一. 知识梳理1.Pig不需要安装到Hadoop集群上,运行在提交hadoop任务的机器上,可以设置一些网关机将配置Pig和其他一些工具集,便于升级等;2.Pig由Java语言编写;3.Pig的shell脚本是bash脚本;4.Pig需要Java1.6支持;5.不能自动补全文件名;(通过HDFS连接确定文件是否存在耗时较久)6.在grunt中,pig不会执行用户输入的Pig原创 2015-11-16 14:21:17 · 442 阅读 · 0 评论 -
Pig Latin的基本用法
实例分析1.本地文件/home/data2.使用命令行操作加载数据:A = load '/home/data' using PigStorage(' ') as (name:chararray, age:int, sex:chararray);显示数据:dump A;数据过滤:C = filter A by age == 19;数据存储:store A into '/tmp原创 2015-11-17 10:50:53 · 3270 阅读 · 0 评论