hive 的udf(user defined function)自定义函数

最新推荐文章于 2023-10-26 17:16:49 发布

zengxianglei

最新推荐文章于 2023-10-26 17:16:49 发布

阅读量1.2k

点赞数 1

分类专栏：大数据文章标签： hive 的udf(user defined function)自定义

本文链接：https://blog.csdn.net/zengxianglei/article/details/89600992

版权

本文介绍了如何在Hive中创建自定义UDF，包括从创建Java Maven项目、编写Java类到打包、添加到Hive classpath的过程。示例包括将字符串转为小写及生成数字范围列表的功能。此外，文章还讨论了UDF的核心——evaluate方法的重要性及其使用注意事项。

摘要由CSDN通过智能技术生成

hive 的udf(user defined function)自定义函数

1.新建java maven 项目
2.pom.xml 中引入

        <dependency>
        <groupId>org.apache.hadoop</groupId>
        <artifactId>hadoop-common</artifactId>
        <version>2.7.4</version>
   	 	</dependency>
   	 	
        <dependency>
        <groupId>org.apache.hive</groupId>
        <artifactId>hive-exec</artifactId>
        <version>1.2.1</version>
    	</dependency>

3.写一个 java 类，继承 UDF，并重载 evaluate 方法【注意：udf类中并没有evaluate（）方法，hive的内部机制会自动调用 evaluate（）方法；同时自己创建的java类中可以定义多个evaluate（）方法如： public Text evaluate(Text s) {} public String evaluate(int end){}】【重写的evaluate（）方法必须有返回值不能用void修饰】
4.需求：定义一个自定义函数将大写转换成小写代码如下：

package cn.hive;
imp