Hive 自定义udf/udtf报错FunctionTask (state=08S01,code=1)解决方案

最新推荐文章于 2023-01-12 11:23:01 发布
最新推荐文章于 2023-01-12 11:23:01 发布
阅读量2.7k 收藏 1
点赞数 1
分类专栏： 报错 大数据 文章标签： hive hadoop big data
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wdwfjsw/article/details/124778962
版权
这篇文章讲述了在将自定义用户定义函数(UDF)或用户定义表函数(UDTF)打包并通过Hive的addJar方法导入时遇到'Class not found'错误。博主提供了退出当前会话然后重新启动的方法，以解决这个问题，并分享了遇到此类问题时的常见解决步骤。
摘要由CSDN通过智能技术生成

自定义udf/udtf打包上传到服务器，通过hive add jar方式导入，在create方法时报错

报错如下：

FAILED: Class *** not found

Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.FunctionTask (state=08S01,code=1)

解决方案：退出正在使用的beeline/hive

beeline：!quit
hive: exit;

重新开启即可

wdwfjsw
关注
专栏目录
Hive基本内置函数，自定义函数以及性能优化
May_J_Oldhu的博客
09-23 1308
Hive函数及性能优化一.内置函数1.字符函数2.类型转换函数和数学函数3.日期函数4.集合函数5.条件函数6.聚合函数和表生成函数二.自定义函数1.自定义函数步骤三.Hive事务1.Hive事务基本概念(1).Hive事务的含义(2).Hive事务的ACID特性(3).Hive事务的特点(4).Hive事务的局限(5)Hive事务的开启和设置四.Hive PLSQL五.Hive性能调优1.Hive性能调优工具EXPLAIN（1）EXPLAIN作用（2）语法（3）示例2.Hive性能调优工具 - ANALY
41.使用UDF
大勇若怯任卷舒
09-01 564
41.1 演示环境 集群Kerberos已启用 集群已安装Sentry服务且正常使用 CM和CDH版本为5.11.2 采用sudo权限的ec2-user用户 41.2 操作演示 部署UDF JAR包 将开发好的UDF JAR包上传至HServer2及Metastore服务所在服务器统一目录 注意：/usr/lib/hive-udf-jars目录及目录下文件的属主为hive，确保hive用户能访问 [ec2-user@ip-172-31-22-86 ~]$ sudo mkdir /usr/lib
idea自定义hive函数报错FAILED: Class com.qcj.hive_udf_define_function.MyUDF not found FAILED
qichangjian的博客
10-20 2872
用idea编辑hive自定义函数，上传到linux,hive运行中间遇到错误： FAILED: Class com.qcj.hive_udf_define_function.MyUDF not found FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.FunctionTask 解决方式： 在l...
beeline连接hive server遭遇MapRedTask (state=08S01,code=1)错误
qq_41607306的博客
03-26 2826
转自：https://www.cnblogs.com/bluejoe/p/5115822.html 采用beeline连接hive server是遭遇到如下错误： [java]view plaincopyprint? 5:jdbc:hive2://bluejoe0/default>select*fromhive_tripleswheresubject='&l...
hive踩坑 Unknown primitive type VOID (state=08S01,code=1)
weixin_43247092的博客
01-11 2730
hive踩坑 Unknown primitive type VOID (state=08S01,code=1)
CDH集群数据迁移时报错：org.apache.hadoop.hive.ql.exec.DDLTask (state=08S01,code=1)
sun_luming的博客
04-08 3322
CDH集群中做hive数据迁移，通过hdfs dfs -put将本地数据文件上传到hdfs的路径中，然后通过beeline执行create table命令，在执行msck repair table命令做分区修复时出现如下报错： 报错关键字： FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask Error while processing statement: FAILED: Execution
Hive自定义UDTF函数解析JSON格式数组常见错误
dxy
03-13 380
Hive自定义UDTF函数解析JSON格式数组常见错误报错1报错2 报错1 导包不正确，方法名同名类似，引用错误。 详细：使用IDEA打包把jar包上传hdfs指定目录下，生成永久函数。 在调用时发现类型不能转换等错误。检查对比，源代码写的给他人开发案例一样。仔细检查发现原来包入错误，方法使用错误。对于这种错误很难找，在实际开发中，我们也可能经常遇到。因此我们需要重新打包重新在hive中生成永久函数。 报错2 Maven和IDEA带的BUG。在打包的时候，由于自身原因源代码有问题，不能实现需求，需要我们重新
MapredLocalTask报错
10-28 1217
Hive连接报错Unexpected end of file when reading from HS2 server.
l-jobs的专栏
04-19 9030
启动hiveserver2之后，使用如下命令连接hive：          bin/beeline -u jdbc:hive2://hadoop03:10000 -n hadoop报错：Unexpected end of file when reading from HS2 server. The root cause might be too many concurrent connectio...
Hive实战
qq_15625193的博客
01-21 398
参考：https://cwiki.apache.org/confluence/display/Hive/Design Hive元数据部署模式 Hive的元数据主要存储Hive的表和分区等信息。 嵌入式模式 嵌入式模式通常只用于测试环境。元数据的存储采用Derby数据库，包括数据库和元数据服务都嵌入在HiveServer进程中。这种方式比较便捷，配置少，但是同时只能支持一个用户，因此常用于测试，不适合生产环境。 Hive安装(嵌入式) 说.
在hue创建hive UDAF函数报错，Error while processing statement: FAILED: Execution Error, return code 1 from
大黄_sama
05-26 4261
纯粹是为了记笔记，以防后面遇到类似问题，又要找一遍问题 1、问题：在hue创建hive UDAF函数报错，Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.FunctionTask。 创建语句：CREATE FUNCTION call_tree_pattern AS 'com.ggj.gateway.elastic.udf.CallTre
Hive3自定义UDF函数报错解决： (class file version 55.0), this version of the Java Runtime only recognizes class
邵奈一的博客
01-12 1054
目前我的Win本地SDK版本是11，集群上的JDK版本是8。Hive3自定义UDF函数。
Hive [ 08S01] Could not open client transport with JDBC Uri: jdbc:hive2://hadoop102:10000: java.net
weixin_45532984的博客
06-25 5423
[ 08S01] Could not open client transport with JDBC Uri: jdbc:hive2://hadoop102:10000: java.net
hive 的udf报错：FAILED: Class fwlhive.hiveudfs.docdb.UnionAn not found
my3187617174的博客
12-09 663
场景描述 使用idea+maven编写hive的udf方法。 报错信息 FAILED: Class fwlhive.hiveudfs.docdb.UnionAn not found FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.FunctionTask 问题原因 1.idea工程模板不对 本人的报错原因是使用了idea的springboot模板，导致package之后的jar包的结构不对，安装 packa
function & task的使用
Bronceyang的博客
11-13 496
function 的标准写法： function [<lower>:<upper>] <output_name> ; input <name>; begin <statements> end endfunction // Example of a function declaration: function [9:0] gray_encode; i
Hive数据仓库--HiveUDF异常解析与其中的坑
热门推荐
王洋的专栏
11-11 1万+
使用Hive进行分析的过程中遇到了这个异常的信息，一开始看到比较惊讶，因为感觉代码并没有什么不太合理的地方，不过还是抛出了一堆的异常信息，我把日志信息读了一下，发现导致最终异常的是FastJson在封装的时候找不到无参构造函数，虽然最终原因不是Hive引起的，但是上面的一堆异常也的确是唬人的。异常信息Error: java.lang.RuntimeException: org.apache.had
关于hive执行udf时报出NoClassDefFoundError错误时的解决办法
qq_41774522的博客
07-22 1127
关于hive执行udf时报出NoClassDefFoundError错误时的解决办法 检查报错问题是否由于jar包问题导致 如果你使用的maven构造的udf环境，你在使用外部jar包的时候可能会导致你打包的时候外部jar包没有打包在一起，所以导致你找不到类的情况，可以将maven下边的build文件更换成这个，使用maven提供的maven-compiler-plugin这种方式打包，不妨试试！ <build> <finalName>hive</finalNa
hive报错（2）udf无法找到第三方的类
weixin_33734785的博客
08-20 713
解决方法为使用eclipse插件 fat jar 进行打jar包，就不会报错了。一 fat jar 安装方法（1）下载安装 http://sourceforge.net/projects/fjep下载完解压，将jar拷贝到eclipse的plugins，重启eclipse。 （2） 校验是否安装成功（3）...
hive报错state=08s01，code=2
最新发布
03-16
这个错误通常表示Hive与数据库之间的连接出现了问题，可能是由于网络问题或数据库配置问题导致的。建议检查网络连接和数据库配置，确保它们正常运行。如果问题仍然存在，可以尝试重新启动Hive和数据库服务。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值