pig脚本记录,对于pig脚本跑批处理

最近用到了一个写pig脚本来批处理统计生成日志文件,具体的来看看吧: /* nohup pig -p INPUT=/staging/tracking/incoming/rtb.BJ.2015082516* -p SEID=9480 CheckIncomingData.pig & */...

2015-12-21 10:16:27

阅读数:1052

评论数:0

sh调取sqoop脚本每天增量跑数据 从hadoop到关系型数据库

sh中调取sqoop每天增量懂啊关系型数据库中,看看吧 #!/bin/bash source ~/.bashrc set -x DAY=`date -d "$1 days ago" +%y-%m-%d` DAYI=`date -d "$1 da...

2015-11-27 09:44:05

阅读数:1030

评论数:0

python调取hive 和sqoop之二

#!/usr/bin/python import time,os USER="wilson.zhou" PWD="YCt452uz" URL="jdbc:postgresql://10.1.1.230:5432/xmo_dw" day...

2015-11-26 16:28:50

阅读数:1748

评论数:1

用python调用hive和sqoop

来新公司了,要做一大坨的脚本调数据,看看用python怎么调这些东西, #!/usr/bin/python import time,os USER="wilson.zhou" PWD="YCt452uz" URL="jdbc:postgresql...

2015-11-26 16:22:34

阅读数:3106

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭