hive自定义函数

函数相关语法

简介：

hive自定义函数根据作用范围分为：临时函数、永久自定义函数。临时函数仅对当前回话有效。而临时函数函数可以注册到元存储，因此可以在查询中引用它们，而不必在每个会话中创建临时函数。

自定义函数语法

• 创建临时函数：CREATE TEMPORARY FUNCTION function_name AS class_name;
• 删除临时函数：DROP TEMPORARY FUNCTION [IF EXISTS] function_name;
• 创建永久自定义函数： CREATE FUNCTION [db_name.]function_name AS class_name [USING JAR|FILE|ARCHIVE 'file_uri' [, JAR|FILE|ARCHIVE 'file_uri'] ];
• 删除永久自定义函数: DROP FUNCTION [IF EXISTS] function_name;
• 重载自定义函数：RELOAD (FUNCTIONS|FUNCTION);

相关函数相关实例

新建普通Java项目，引入相关依赖：

 <dependency>
    <groupId>org.apache.hive</groupId>
    <artifactId>hive-exec</artifactId>
    <version>${hive.version}</version>
</dependency>

 <dependency>
    <groupId>org.apache.hive</groupId>
    <artifactId>hive-common</artifactId>
    <version>${hive.version}</version>
  </dependency>

新建一个类继承org.apache.hadoop.hive.ql.exec.UDF并重写evaluate方法，如：

public class HiveFunction extends UDF {

    public String evaluate(String src) {
        return src.toLowerCase();
    }


    public Integer evaluate(String src,String str1) {
        return src.length() + str1.length();
    }

}

将该项目打包: mvn clean install -Dmaven.skip.test=true -U -X

临时函数注册：
添加的jar是本地路径，而非hdfs路径，如：

 add jar /IdeaProjects/hive-demo/target/hive-demo-1.0-SNAPSHOT.jar;

创建名为hivefunction的临时函数：create temporary function hivefunction as 'cn.nankong.function.HiveFunction';

简单实用示例：

删除临时自定义函数： DROP TEMPORARY FUNCTION hivefunction; 删除后再次使用报错：

创建永久函数：
将自定义开发函数jar上传到hdfs，如：hdfs dfs -put /Users/luchengwen/IdeaProjects/hive-demo/target/hive-demo-1.0-SNAPSHOT.jar /hiveJar

创建永久自定义函数：

create function default.hivefunction as 'cn.nankong.function.HiveFunction' using jar 'hdfs://127.0.0.1:9000/hiveJar/hive-demo-1.0-SNAPSHOT.jar'

执行后永久自定函数信息已保存到元数据中：

删除永久自定义函数：

DROP FUNCTION hivefunction;