hive执行集群模式正常本地模式报错Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

最新推荐文章于 2024-01-30 16:23:22 发布
最新推荐文章于 2024-01-30 16:23:22 发布
阅读量455 收藏 11
点赞数 10
分类专栏： hive 文章标签： hadoop hive apache
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_52606060/article/details/135094227
版权

问题：同样的SQL在集群模式执行成功，但是切换到本地模式执行失败出现以下报错

在这里插入图片描述
原因：由于本地模式内存不够导致无法执行任务
解决方法：
将hive-env.sh.template后缀.template去掉
默认HADOOP_HEAPSIZE为256 (MB)，设置成1024M
在这里插入图片描述
把原来的注释去掉：
在这里插入图片描述
重新启动hive
执行成功：
在这里插入图片描述

Appreciate(欣赏)
关注
专栏目录
Hive错误之 Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask错误分析_xiaohu21的博客-CSDN博客.mht
09-04
Hive错误之 Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask错误分析_xiaohu21的博客-CSDN博客.mht
在hive插入数据时出现“Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask”报错
m0_74756715的博客
11-04 8251
运行Tez时检查到用过多内存而被NodeManager杀死进程问题 设置hive的执行引擎
Hive报错FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
qq_45124566的博客
07-05 2015
Hive报错FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
hive报错:FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.tez.TezTask
m0_70220205的博客
08-11 900
yarn.nodemanager.vmem-check-enabled设置value为false表示禁用虚拟内存检查。yarn.nodemanager.vmem-pmem-ratio设置value为5表示虚拟内存是物理内存的5倍。这些参数配置可以用于控制NodeManager组件的行为，例如限制资源使用、调整内存分配等。
hive - return code （数字） from org.apache.hadoop.hive.ql.exec错误系列集合
a123147abc的博客
04-20 6708
hvie - return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. Unable to move source hdfs://XXX to destination hdfs://xxx 原因：执行hive任务的用户对hdfs://xxx没有操作权限 解决：对目录授权 命令：hdfs dfs -chown -R use:group hdfs://xxx ...
hive问题-return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
erainm
09-23 8826
执行hive sql时遇到问题： FAILED:Execution Error,return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask 这个其实一般是个hive内部错误，处理这个问题就需要找日志了； 找日志 hive.log(比较简略) hive.log ===> 缺省情况下 /tmp/root/hive.log (不然就在你hive-site.conf配置的日志路径里) 我这里在/tmp/root目录下 去里面看了日志，没
【hive on spark Error】return code 30041 from org.apache.hadoop.hive.ql.exec.spark.SparkTask.
01-07
ERROR : FAILED: Execution Error, return code 30041 from org.apache.hadoop.hive.ql.exec.spark.SparkTask. 前言报错信息异常分析配置改动后记 前言 在成功消除Cloudare管理界面上那些可恶的警告之后，我又对yarn...
apache-hive-2.1.0-bin.tar.zip
05-04
Apache Hive 是一个基于 Hadoop 的数据仓库工具，用于查询、管理和处理大数据集。Hive 提供了一种结构化的数据模型，使得非结构化的海量数据可以通过SQL-like 的查询语言（HQL，Hive Query Language）进行分析。在...
hive-exec-2.1.1.jar
最新发布
03-14
hive-exec-2.1.1 是 Apache Hive 的一部分，特别是与 Hive 的执行引擎相关的组件。Apache Hive 是一个构建在 Hadoop 之上的数据仓库基础设施，它允许用户以 SQL（结构化查询语言）的形式查询和管理大型数据集。Hive ...
hive.sql执行文件.rar
05-13
hiveSQL执行文件
hive报错,FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
worldair的博客
12-18 827
首先,将hadoop下的yarn-site.xml文件复制到hive目录下的conf目录中,然后检查yarn-site.xml配置。yarn.application.classpath的值使用hadoop classpath命令获取然后复制进去,这个是最主要的。其他文章的方法千篇一律,但是弄了之后都没有用。然后那个select查询命令就能执行陈功了。网上找到的解决方法在我这里都没有用。弄完之后重启hive。
hive报错Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
热门推荐
weixin_48874360的博客
06-28 5万+
hive报错Error: Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask (state=08S01,code=2)
Hive报错__FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
qq_50833617的博客
12-28 1084
增加 Java 堆空间：您可以通过调整 MapReduce 任务的 JVM 参数来增加 Java 堆空间，例如通过 -Xmx 参数来增大最大堆内存，或者通过 -XX:MaxHeapSize 参数来增加最大堆大小。检查语句逻辑和数据：检查您要执行的 Hive 查询的语法和逻辑是否正确，以及涉及的数据是否符合预期，有时候错误的查询语句或者不符合预期的数据会导致任务执行失败。增加集群资源：如果可能的话，增加集群的物理资源，例如增加节点数、增加每个节点的内存等，以便更好地支持大规模数据处理任务。
Hive SQL执行失败问题记录
lonelymanontheway的博客
01-04 7584
Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask； Error while cleaning up the server resources； The query did not generate a result set； No such file or directory；
Hive Tez报错：errorMessage=Cannot recover from this error:java.lang.OutOfMemoryError: Java heap space
周源的专栏
02-26 1586
ERROR : FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.tez.TezTask. Vertex failed, vertexName=Reducer 2, vertexId=vertex_1582200549031_0142_2_02, diagnostics=[Task failed, ...
FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.tez.TezTask
wuzhilon88的专栏
11-13 1万+
hive> select count(1) from customer; Query ID = hive_20151113120000_368645da-6763-4ca3-a774-8961d490c0b0 Total jobs = 1 Launching Job 1 out of 1 Status: Running (Executing on YARN cluster with A
hive错误
不积跬步，无以至千里；不积小流，无以成江海。
11-09 893
SQL 错误 [2] [08S01]: Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.tez.TezTask. Vertex failed, vertexName=Reducer 2, vertexId=vertex_1603165199554_8119_58_05, diagnostics=[Task failed, taskId=ta
二百二十一、Hive——HQL报错：return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
tiantang2renjian的博客
01-30 965
Hive——HQL报错：return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
hive集群栈资源不够
tian31233的专栏
05-15 1024
java.sql.SQLException: Error while processing statement: FAILED: Execution Error, return code 2  from org.apache.hadoop.hive.ql.exec.tez.TezTask. Vertex failed, vertexName=Map 1, vertexId=vertex_1525...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值