一个搞了一小半个下午的 Shell 脚本

#!/bin/sh

# ==============================
# 填补历史缺失数据
# ==============================

datebeg="20180427"
dateend="20180523"

hour_arr=("00" "01" "02" "03" "04" "05" "06" "07" "08" "09" "10" "11" "12" "13" "14" "15" "16" "17" "18" "19" "20" "21" "22" "23")

beg_date=`date -d "$datebeg" +%s`
end_date=`date -d "$dateend" +%s`

for (( i=${beg_date};i<=${end_date};i=i+86400))
do
    cur_year=`date -d @${i} +"%Y"`;
    cur_month=`date -d @${i} +"%m"`;
    cur_day=`date -d @${i} +"%d"`;

    for var in ${hour_arr[@]};
    do
        cmd="alter table xxx.table_name 
        add partition(year='${cur_year}',month='${cur_month}',day='${cur_day}',hour='${var}') 
        location '/hdp/data/${cur_year}/${cur_month}/${cur_day}/${var}/';"
        echo $cmd >> exe.sql
        hive -e "$cmd"
    done
done

exit 0;

遍历指定日期区间内的所有 日期,小时,拼接 hql 语句,输出到文件


  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值