hive配置永久UDF详解

hive UDF增加
流程:测试环境上线–>运行稳定—>生产上线

1、修改集群hive-site.xml配置hive.aux.jars.path
每个hs2都要执行:在${HIVE_HOME}下创建auxlib目录,将UDF jar包放到该目录中,这样hive在启动时会将其中的jar文件加载到classpath中。

2、hive提交任务到yarn执行,需要同步更新本地和hdfs上的hive.tar.gz (hdfs上hive、tez、spark目录下的hive.tar.gz、tez.tar.gz、spark***yarn-archive.tar.gz)
解压hive.tar.gz,增加jar包后压缩,重新上传。

3、轮询重启hs2,加载auxlib中jar

4、hive命令行执行:create function XXX AS ‘XXXUDF’;

5、测试验证UDF

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值