shell中循环调用hive sql 脚本

hive -S -e 'use logdb; show tables;'>table.txt

while read table

do

echo $table

hive -S -e "use logdb;show create table $table"

done < table.txt

 

脚本tt.sh的内容如下：

#!/bin/bash
params=$1
for param in $params
do
  echo $param
done
 

#运行方式为：
sh tt.sh "1 2 3 4 5"
 

#输出为：
1
2
3
4
5
 

所以参考上面的命令，可以把hql的脚本写为如下方式，就可以循环执行sql：

功能：查找字符串 comments 中的param第一次出现的位置 ,返回的是位置数字

#!/bin/bash
params=$1
for param in $params
do
  hive -e "insert overwrite local directory '/tmp/$param'
  row format delimited fields terminated by '\t'
  select locate('$param',comments) as position from tb_a;"
done

功能：查找评论中出现关键字的内容，没有关键词的内容过滤掉

 
#!/bin/bash
params=$1
for param in $params
do
    hive -e "insert overwrite local directory '/tmp/$param'
    row format delimited fields terminated by '\t'
    select position from 
      (select locate('$param',comments) as position from tb_a  where position  != '0') a 
    where a.position !='0' ;"
done
原文：https://blog.csdn.net/dear_csdn/article/details/69389403