Hive Job status not available

最新推荐文章于 2022-07-26 17:59:03 发布
最新推荐文章于 2022-07-26 17:59:03 发布
阅读量1.4k 收藏
点赞数
分类专栏： Hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/shrash/article/details/62416844
版权

收到的报警信息：

Caused by: HiveServerException(message:Query returned non-zero code: 1, cause: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask, errorCode:1, SQLState:08S01)


原因：job client请求作业状态时，application master 已经完成对应作业的处理，向job history server请求job的最终状态时报错。

判断结果的信息： 作业请求的APPid=application_1484909935899_200328 ， finalstatus是success, 但是在tracking URL中显示 Not Found: job_1484909935899_200328hive日志中提示：Ended Job = job_1484909935899_200328 with exception 'java.io.IOException(Job status not available )’



因大妖
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Hive使用手册Hive使用手册
05-14
1 Hive 概念与连接使用: 2 2 Hive支持的数据类型： 2 2.1原子数据类型： 2 2.2复杂数据类型： 2 2.3 Hive类型转换： 3 3 Hive创建/删除数据库 3 3.1创建数据库: 3 3.2 删除数据库: 3 4 Hive 表相关语句 3 4.1 Hive ...
Flink：job报错NoResourceAvailableException: Could not acquire the minimum required resources
amadeus_liu2的博客
06-25 7968
flink-conf.yaml中修改下边的参数 taskmanager.network.memory.min:… taskmanager.network.memory.max: …
linux rm 提示io异常,Hadoop异常 java.io.IOException: Job status not available
weixin_32377497的博客
05-14 384
Hadoop集群上跑mapreduce，在job任务执行完成退出时报 java.io.IOException: Job status not available异常。Job client请求job状态时，Application已经完成转而去Job history server请求job状态，就在这里抛出异常。[linuxidc@master conf]$ hadoop jar /usr/lib/h...
hadoop异常 java.io.IOException: Job status not available
xubc的大数据笔记
12-30 5235
Hadoop集群上跑mapreduce，在job任务执行完成退出时报 java.io.IOException: Job status not available异常。Job client请求job状态时，Application Master已经完成转而去Job history server请求job状态，就在这里抛出异常 [xubc@master conf]$ hadoop jar /usr/l
那些年，写hive sql时所踩过的坑
SK_Lavender的博客
09-30 6318
本文记述一些本人在用hive时，所遇到的一些大坑小坑，一是防止自己再次落坑，二是避免旁人也掉入进去。文章会不定时更新。
解决hiveserver2报错：java.io.IOException: Job status not available - Error while processing statement: FA...
weixin_30596343的博客
07-07 442
用户使用的sql: select count( distinct patient_id ) from argus.table_aa000612_641cd8ce_ceff_4ea0_9b27_0a3a743f0fe3; 下面做不同的测试： 1.beeline -u jdbc:hive2://0.0.0.0:10000 -e "select count( distinct patient_id ...
转 How To Stop A Running Job Using DBMS_JOB
weixin_33738578的博客
04-01 86
There is no procedure within the dbms_job package to stop a running job.You will need to determine which Oracle session and process is associated with this running job and then kill it.You can run the...
【Hive】Hive返回码状态含义
fairynini的博客
11-09 298
转载：https://blog.csdn.net/victorzzzz/article/details/100906080 返回码意义： HiveServer Kill job的情况 1.Hive 发生主备切换时，新主主动kill掉原来的job； 2.在一个MR job中所有mappers及reducers创建HDFS文件数目超过文件最大数目时（该最大数目有HiveConf里的hive.exec.max.created.files控制，目前默认值为100,000）； 3.当job提交失败时，HiveSer
seatunnel 支持hive jdbc
07-28
driver = "org.apache.hive.jdbc.HiveDriver" user = "hive" password = "hive" table = ods_wjw_jb_gxy_hz_glk query = "select a,b,c from ods_wjw_jb_gxy_hz_glk" fetch_size = 300 } }
Hive3.1.2编译源码
05-20
使用hive3.1.2和spark3.0.0配置hive on spark的时候，发现官方下载的hive3.1.2和spark3.0.0不兼容，hive3.1.2对应的版本是spark2.3.0，而spark3.0.0对应的hadoop版本是hadoop2.6或hadoop2.7。 所以，如果想要使用高...
hive-jdbc3.1.3
08-22
argodb亲测可是使用hive驱动包，国产argodb的没有什么资料，当时使用的hive的一套语法，我还发布了其他版本的jdbc包，可以查看其他资源
hive执行计划可视化工具
05-31
hive执行计划可视化工具
Error: org.apache.hive.service.cli.HiveSQLException: Error while processing statement: FAILED: Execu
热门推荐
初级程序员
11-15 1万+
hive sql执行join语句报错 Error: org.apache.hive.service.cli.HiveSQLException: Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask. Job ...
LV Status NOT available问题解决
Jian Sun_的博客
07-26 2595
LV Status NOT available问题解决
hadoop异常 java.io.IOException: Job status not available
weixin_34354173的博客
06-08 691
Hadoop集群上跑mapreduce，在job任务执行完成退出时报java.io.IOException: Job status not available异常。Job client请求job状态时，Application已经完成转而去Job history server请求job状态，就在这里抛出异常。[xubc@masterconf]$hadoopjar...
hive报错java.io.IOException: Could not find status of job:job_1470047186803_131111
刘光华的专栏
08-05 7825
环境：hadoop2.7.2 + hive1.2.1         最近集群环境下，有部分hive任务会报报如下错误：         java.io.IOException: Could not find status of job:job_1470047186803_131111 at org.apache.hadoop.hive.ql.exec.mr.HadoopJobExecHelp
Hive Could not find status of job
Shrash的博客
03-19 3142
报警信息： Caused by: HiveServerException(message:Query returned non-zero code: 1, cause: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask, errorCode:1, SQLStat
hive job划分的区别
最新发布
12-12
Hive job的划分通常是根据数据的规模和操作类型来确定的。主要有以下几种区别： 1. 数据规模的划分：Hive job可以根据数据规模的大小来划分。对于小规模的数据，可以选择将其放入单个job中处理。这样可以减少任务之间的通信开销，并且方便监控和调优。而对于大规模的数据，可以将相似的数据划分到同一个job中，以实现分布式处理，提高处理效率。 2. 操作类型的划分：根据Hive的不同操作类型，可以将Hive job划分为不同的类型。对于简单的查询操作，可以将其放入一个独立的job中处理。而对于复杂的操作，例如多表关联、排序、分组等，可能需要多个job来完成。这样可以将任务划分为更小更容易管理和调优的单元，提高任务的执行效率。 3. 任务调度策略的划分：Hive job可以根据调度策略的不同来进行划分。例如，可以将优先级高的任务放入一个job中，优先执行。也可以根据任务的依赖关系来划分job，确保依赖关系的任务先执行，避免出现错误。 总的来说，Hive job的划分主要根据数据规模、操作类型和任务调度策略来确定。通过合理的划分，可以提高任务的执行效率和系统的性能。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值