5.23学习文档

最新推荐文章于 2025-04-28 22:16:29 发布

qq_45804668

最新推荐文章于 2025-04-28 22:16:29 发布

阅读量161

点赞数 1

文章标签：学习 linux hive

本文链接：https://blog.csdn.net/qq_45804668/article/details/130832765

版权

本文介绍了通过Beeline连接Hive并使用-hivevar参数传递变量执行SQL脚本的方法，同时也涉及到Kerberos身份验证，包括Kinit和keytab的使用。此外，还讨论了Unix工具sed用于文本编辑的操作，如替换、删除和插入。最后提到了ftp和lftp命令，用于文件的上传、下载以及镜像整个目录。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

beeline -u jdbc:hive2://localhost:10000 -n my_user -p my_password -f /path/to/my_sql_file.sql --hivevar date=2022-04-01
通过beeline的方式进行传参，使用–hivevar选项进行传参 sql脚本中${param_name}引用传递的参数，传参的格式为：param-name=value

Kinit -kt 命令通过keytab文件获取用户的票据信息，进行身份验证。Kerberos这个网络协议，服务主体就是HDFS，hive，yarn这些服务。

Sed -i直接对文件进行修改
S 替换
D 删除
I 插入
A 添加

EOF是一种特殊的分界符，用来表示一个多行文本的开始和结束。
EOF使用的时候需要注意，前后不能有空格，换行等字符。
里面可以放命令，文本之类

ftp文件传输协议
lftp命令

lftp -u username,password ftp.example.com <<EOF
cd remote_dir
get remote_file
exit
EOF
get 获取远程文件

lftp -u username,password ftp.example.com <<EOF
cd remote_dir
put local_file
exit
EOF
Put上传文件

lftp -u username,password ftp.example.com <<EOF
mirror remote_dir local_dir
exit
EOF
mirror 下载整个目录