shell读取doris写入目标服务器目录

shell读取doris写入目标服务器目录

shell读取doris写入目标服务器目录

从doris上下载数据并写入另一台目录

#!/bin/bash

MYSQL_HOSTNAME="xx.xx.155.77"
MYSQL_PORT=9030
MYSQL_USER="admin"
MYSQL_PWD="Trtjk@admin!#"
MYSQL_DB="dw"
# 文件的保存路径,路径后要加/
RESULT_PATH1="/root/hptest/"

# ================================执行内容=========================
cur_time=`date +%"Y-%m-%d %H:%M:00"`
file_time=`date +"%Y%m%d%H%M00"`
file_name='dimdate'


select_sql="SELECT * FROM dw.dim_category_info"
echo "$cur_time $select_sql"
export MYSQL_PWD=$MYSQL_PWD
mysql -h${MYSQL_HOSTNAME} -P${MYSQL_PORT} -u${MYSQL_USER} ${MYSQL_DB} -Bse "${select_sql}" > "$RESULT_PATH1$file_time.csv"
# 制表符替换为逗号分隔
sed -i 's/\x09/\,/g' $RESULT_PATH1$file_time".csv"
# 判断是否是空文件
if [ ! -s $RESULT_PATH1$file_time".csv" ];then
  # 删除空文件
  `rm -f $RESULT_PATH1$file_time".csv"`
else
 #将下载文件传输到目标目录
  `scp  $RESULT_PATH1$file_time".csv" root@10.8.154.232:$RESULT_PATH1`
 #在这里还可以删除本地文件
 # `rm -f $RESULT_PATH1$file_time".csv"`
fi