Hive 自定义函数 UDF UDAF UDTF

最新推荐文章于 2022-08-31 23:38:54 发布

＠假装很文艺的文艺青年

最新推荐文章于 2022-08-31 23:38:54 发布

阅读量137

点赞数

文章标签： hive

本文链接：https://blog.csdn.net/weixin_43513980/article/details/121374849

版权

本文介绍了Hive中的三种自定义函数：UDF（用户定义普通函数），主要针对单行数据操作；UDTF（用户定义表生成函数），用于将一行数据转化为多行；以及UDAF（用户定义聚合函数），可以处理多行数据并返回单个结果。UDTF示例展示了其将一行数据转换为多行的功能，而UDAF则类似于SQL中的SUM()和AVG()，实现多行数据的聚合。

摘要由CSDN通过智能技术生成

Hive 自定义函数 UDF UDTF UDAF

UDF：用户定义（普通）函数，只对单行数值产生作用；

UDF只能实现一进一出的操作。

定义udf 计算两个数最小值

public class Min extends UDF {

        public Double evaluate(Double a, Double b) {

            if (a == null)
                a = 0.0;
            if (b == null)
                b = 0.0;
            if (a >= b) {
                return b;
            } else {
                return a;
            }
        }
    }
    
 
a）把程序打成jar包

b）添加jar包：add jar /run/jar/udf_test.jar;

c）创建临时函数：hive>CREATE TEMPORARY FUNCTION add_example AS 'hive.udf.Add';

d）销毁临时函数：hive> DROP TEMPORARY FUNCTION add_example;

UDTF：User-Defined Table-Generating Functions，用户定义表生成函数

用来解决输入一行输出多行
```
继承org.apache.hadoop.hive.ql.udf.generic.GenericUDTF,
实现initialize, process
```

最低0.47元/天解锁文章

＠假装很文艺的文艺青年

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
打赏
0
评论
Hive 自定义函数 UDF UDAF UDTF

Hive 自定义函数 UDF UDTF UDAFUDF：用户定义（普通）函数，只对单行数值产生作用；UDF只能实现一进一出的操作。定义udf 计算两个数最小值public class Min extends UDF { public Double evaluate(Double a, Double b) { if (a == null) a = 0.0; if (b == null)
复制链接

扫一扫