Error during job, obtaining debugging information...

最新推荐文章于 2023-05-28 18:45:06 发布
最新推荐文章于 2023-05-28 18:45:06 发布
阅读量5.6k 收藏 18
点赞数 13
分类专栏： hive异常处理 hive sqoop 文章标签： hive hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44902108/article/details/103739786
版权
hive 同时被 3 个专栏收录
8 篇文章 0 订阅
订阅专栏
hive异常处理
2 篇文章 0 订阅
订阅专栏
sqoop
2 篇文章 0 订阅
订阅专栏

今天在插入数据的时候出现错误:Error during job, obtaining debugging information…

Ended Job = job_1575898012755_0005 with errors Error during job, obtaining debugging information... Examining task ID: task_1575898012755_0005_m_000000 (and more) from job job_1575898012755_0005

Task with the most failures(4): 
----- 
Task ID:   task_1575898012755_0005_m_000000

URL:   http://node191:8088/taskdetails.jsp?jobid=job_1575898012755_0005&tipid=task_1575898012755_0005_m_000000
----- 
Diagnostic Messages for this Task: 
Error: Java heap space

FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask MapReduce Jobs Launched:  Stage-Stage-1: Map: 1   Cumulative CPU: 5.67 sec   HDFS Read: 0 HDFS Write: 0 FAIL

查询发现是Javaf堆内存不足,修改为本地模式OK

set hive.exec.mode.local.auto=true;
༺水墨石༻
关注
专栏目录
hive使用count()函数卡在kill command报错：Error during job, obtaining debugging information...
lkx99661014的博客
03-01 2396
本文借鉴：https://blog.csdn.net/qq_41428711/article/details/86169029 Attention： 卡在kill command 百度上有很多 解决的帖子，但是他们的方法解决不了我的问题，所以我仔细观察了一下他们大部分kill command 后面的路径最后都是/bin/hadoop，但我的是/bin/mapred。所以有同样问题的朋友要确认一...
hive提交任务Ended Job = job_1573218357825_0009 with errors Error during job, obtaining debugging inform
乔治大哥的博客
11-09 5268
Query ID = root_20191109201329_35facb5a-75c2-4ab9-b493-abc369c92cc6 Total jobs = 1 Launching Job 1 out of 1 Number of reduce tasks determined at compile time: 1 In order to change the average load...
hive： insert数据时Error during job, obtaining debugging information 以及beyond physical memory limits...
diaomu5377的博客
10-09 459
insert overwrite table canal_amt1...... 2014-10-09 10:40:27,368 Stage-1 map = 100%, reduce = 32%, Cumulative CPU 2772.48 sec 2014-10-09 10:40:28,426 Stage-1 map = 100%, reduce = 32%, Cumulati...
hive实现单词统计
m0_61232019的博客
11-14 1778
一、前期准备 二、操作步骤 1.在hive下创建一个数据库 ​编辑 2. 在wordcount库下创建一个表 3. 在虚拟机上创建一个文件 4. 将在linux上创建的data文件，上传到新建的hive的worltest表中 5. 进入hive, 查询表wordtest信息 6. 新建一个wordtest1表，只有一列值，用来储存wordtest表数据中的内容 7. 将表wordtest中的数据存放进新建的表wordtest1中 ​编辑8. 查询wordtest1表中的信息 9.
hive运行报错Error during job, obtaining debugging information..FAILED: Execution Error, return code 2
lina_999的博客
01-26 2380
hive运行报错Error during job, obtaining debugging information..FAILED: Execution Error, return code 2
error during job, obtaining debugging information... failed: execution error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.mapredtask
03-16
这个错误是在执行Hive任务时出现的，可能是由于MapReduce任务执行失败导致的。具体原因可能是多种多样的，需要查看详细的日志信息才能确定。建议检查Hadoop集群的运行状态，以及Hive任务的配置和参数是否正确。...
Hadoop job information for Stage-1: number of mappers: 0; number of reducers: 0 2023-05-22 22:59:18,366 Stage-1 map = 0%, reduce = 0% Ended Job = job_1684762105058_0005 with errors Error during job, obtaining debugging information... FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask MapReduce Jobs Launched: Stage-Stage-1: HDFS Read: 0 HDFS Write: 0 FAIL Total MapReduce CPU Time Spent: 0 msec hive>
05-23
具体的错误信息可以通过“obtaining debugging information”来获取。最后的“MapReduce Jobs Launched”部分提供了有关Hadoop作业启动和完成的信息，包括读取和写入的数据量，以及CPU使用时间等。 根据这些信息，...
hive中Hql查询时错误
qq_20754935的博客
11-17 1366
查询时错误  hive> select count(*) from student_info; Query ID = hadoop_20170127022626_4c071a70-f0d0-484a-8e29-dbd875356ef9 Total jobs = 1 Launching Job 1 out of 1 Number of reduce tasks determ
Error during job, obtaining debugging information... FAILED: Execution Error, return code 2 from org
微信公众号: 后端码匠
05-24 806
问题 解决 失败原因 经查发现发现/tmp/hadoop/.log提示java.lang.OutOfMemoryError: Java heap space，原因是namenode内存空间不够，jvm不够新job启动导致。 解决方法 将你的hive可以设置成本地模式来执行任务试试： set hive.exec.mode.local.auto=true; 一劳永逸： 在hive-site.xml 文件添加配置 <property> <name>hive.exec.mode.lo
Hive中运行任务报错：Error during job, obtaining debugging information...
敲代码的余文乐的博客
08-11 2023
错误原因： namenode内存空间不够，JVM剩余内存空间不够新job运行所致 解决办法： 将hive设置成本地模式来执行任务 set hive.exec.mode.local.auto=true;
Error during job, obtaining debugging information or java.lang.ClassNotFoundExc
niuzhenxin的博客
03-26 401
Total MapReduce jobs = 1 Launching Job 1 out of 1 Number of reduce tasks determined at compile time: 1 In order to change the average load for a reducer (in bytes): set hive.exec.reducers.bytes....
Hive运行任务报错：Ended Job = job_1685266933359_0001 with errors Error during job, obtaining debugging info
最新发布
weixin_63682399的博客
05-28 1446
Ended Job = job_1685266933359_0001 with errors Error during job, obtaining debugging info 原因是namenode内存空间不够，jvm不够新job启动导致。
hive运行mapreduce任务出现报错Error during job, obtaining debugging information...
2020xyz的博客
10-23 2254
问题描述： hive建表之后进行insert数据插入操作时，出现以下报错： Error during job, obtaining debugging information... 解决步骤： 实际上导致执行hive出现该报错信息的原因非常多，通过网上搜索相关报错信息发现很多人说是namenode或者hive等的jvm内存不足，结果实际测试发现调大内存也不行； 并且此时我实际执行wordcount测试用例又能成功运行；据此也基本可以排除jvm内存不足的问题； 网上不少人提议采用本
Hive报错Error during job, obtaining debugging information...
weixin_46429290的博客
07-15 4300
在hive中执行插入数据时出现错误 注意：其实正常来说在hive中一般是不会插入数据的，这里测试原因使用了插入 这个报错的主要原因就是namenode内存空间不够，JVM剩余内存空间不够新job运行所致 这个错误把hive模式设置为本地模式运行即可 可以通过命令查看hive是否本地运行 set hive.exec.mode.local.auto; 设置为本地模式将其改成true即可 set hive.exec.mmode.local.auto=true; 问题解决，可以正常进行insert into
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值