shell脚本加载数据文件到hive表中

最新推荐文章于 2022-10-21 15:27:37 发布

he745604371

最新推荐文章于 2022-10-21 15:27:37 发布

阅读量2.7k

点赞数

文章标签： shell l

本文链接：https://blog.csdn.net/he745604371/article/details/53945642

版权

如果执行时间允许，还可以增加判断hive表是否存在的。

#!/bin/ksh
#-------------------------------------------------------------------------------------
#---1、shell加载数据
#---2、用hive_sql_handler调用写好的sql脚本
#-------------------------------------------------------------------------------------

DATE_YYYYMMDD=`date +%Y%m%d`
conf_file='/home/xinxinghe/cfg/datafile.properties'
tab_schema='temp'
tab_fo017_reg="${tab_schema}.base_fo017_reg"
tab_fo015_reg="${tab_schema}.base_fo015_reg"
tab_fceso_reg="${tab_schema}.base_fceso_reg"
tab_fo015_daily="${tab_schema}.base_fo015_active_daily"
tab_fo015_monthly="${tab_schema}.base_fo015_active_monthly"
dir_logfile="/home/xinxinghe/log/$(date +F)"

###load_Data_to_Hive datafile tablename
load_Data_to_Hive(){
    datafile=$1
    tabname=$2
    ###判断数据文件是否为有效文件
    if [[ -f $datafile ]]
    the