Hive自定义UDF并在Hive中注册

1、创建一个类继承自UDF,并重写evaluate方法

import org.apache.hadoop.hive.ql.exec.UDF;

import java.util.Arrays;


public class UDFTest extends UDF {

    public static String evaluate(String str) {

        String[] Arr = str.split(",");
        for(int i = 0;i < Arr.length;i++){
            if(Arr[i].equals("铁件")){
                Arr[i] = "A:铁件";
            }else if(Arr[i].equals("铜")) {
                Arr[i] = "B:铜";
            }else if(Arr[i].equals("铝件")) {
                Arr[i] = "C:铝件";
            }else if(Arr[i].equals("金件")) {
                Arr[i] = "D:金件";
            }
        }
        Arrays.sort(Arr);

        String ss = "";
        for(int i = 0;i < Arr.length;i++){
            if(i < Arr.length - 1){
                ss = ss + Arr[i].split(":")[1] + ",";
            }else{
                ss = ss + Arr[i].split(":")[1];
            }
        }

        return ss;
    }
}

2、将程序打包,并将打好的包上传到hive的lib目录下或者上传到hdfs
区别是,如果要将udf注册成临时方法那就上传到lib目录下,而如果要注册成永久方法最好是上传到hdfs,否则在集群中运行的时候,会找不到方法

//1、注册成临时方法
hive> create temporary function selfSort AS 'UDFTest';
//2、删除临时方法
hive> drop temporary function UDFTest;
//3、注册成永久方法
hive> create function selfSort as 'UDFTest' using jar 'hdfs:/jar/HotItemsAnalysis-1.0-SNAPSHOT.jar';

注册完成以后可以hive> show functions;查看方法是否成功注册

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值