IDEA中实现Hive的自定义函数的使用与如何上传至服务器

举例:idea中自定义函数的编写

1.继承UDF函数
import org.apache.hadoop.hive.ql.exec.UDF
2.实现evaluate()方法
public class ParseScore extends UDF{
    //老的接口UDF
    //新的接口GenericUDF
    //老的接口比较简答,只需要实现其中的evaluate方法即可
    //调用函数的时候每一行的数据是通过参数传递进来的
    public String evaluate(int score){
        String ret=null;
        if(score >=90) ret="A";
        else if (score >=80) ret="B";
        else if (score >=70) ret="C";
        else if (score >=60) ret="D";
        else ret="D";
        
        return ret;
        
    }
    /*
    需要打包上传到HDFS,在file中
    */
    //新的接口GenericUDF

}

3.打包上传到HDFS中

 

选择到其中的mvn clean和mvn package

4.完成之后会生成1个jar包

 

5.把这个通过xftp或者华为官方软件传递到服务器中

6.再传递到hdfs中最后导入到hive中生成自己的函数

7.服务器上操作

hive中输入:

ADD JAR hdfs:///home/candle/data/hive_udf-1.0-SNAPSHOT-jar-with-dependencies.jar;

8.Hive创建临时函数

CREATE TEMPORARY FUNCTION myFunction(函数名) AS 'ParseScore'(包绝对路径)

9.show functions;

10.select myfunc(score) from windows;

即可完成本地至服务器端的操作

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值