FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

最新推荐文章于 2024-10-08 15:15:00 发布
最新推荐文章于 2024-10-08 15:15:00 发布
阅读量2.3k 收藏 7
点赞数 8
分类专栏： 大数据专栏 文章标签： hadoop apache hive select count
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_37647812/article/details/137048526
版权
在运行Hive的`select count(*) from users`语句时遇到了Execution Error，返回代码2，问题源于内存不足。解决方案是在Hadoop的Hadoop-env.sh配置文件中增加`-Xmx2048m`设置，以增大内存分配，然后重启Hadoop服务，问题得到解决。
摘要由CSDN通过智能技术生成

hive在运行select count（*）from users  语句时报如下错误：

Error: Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask (state=08S01,code=2)

原因

        内存不足导致

解决方法

       在Hadoop的配置文件Hadoop-env.sh中修改如下配置：

      export HADOOP_CLIENT_OPTS="-Xmx2048m $HADOOP_CLIENT_OPTS"

修改改后重启hadoop，运行结果如下：

报错：FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask原因查找
weixin_56114243的博客
12-15 7844
报错：FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask原因查找
【Hive报错】FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
debimeng
12-13 2500
【场景】 在hive3.1版本下执行以下语句报错 --加载数据到桶表u_demo_bk中 insert into table u_tab_bk_p select * from u_tab; 可是插入到普通表和分区表的语句是能正常执行的。 【原因】 最后才知道是因为资源不足的问题，可是这数据量又不大，有可能hive的机制有关，本来它的场景就是为了解决大数据的问题。 【解决】 最后在主节点修改了yarn-site.xml文件，添加一个参数，即：关闭虚拟内存的检测，最后完整的内容如下： <co
hive报错FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
m1913843179的博客
11-20 1万+
这里写自定义目录标题新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 问题一： 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下M
hive：beeline提交SQL报错 return code 2
啥也不会的博客
01-21 2104
1.现象 beeline连hive跑任务，报错： Error: Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask (state=08S01,code=2) 除此以外没有其他详细的错误信息。如果直接到 org.apache.hadoop.hive.ql.exec.mr.MapRedTask 这个类里，是找.
Hive中运行任务报错：FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
99滴神
05-06 4097
错误如下： java.lang.IllegalArgumentException: Can not create a Path from an empty string at org.apache.hadoop.fs.Path.checkPathArg(Path.java:126) at org.apache.hadoop.fs.Path.<init>(Path.java:134) at org.apache.hadoop.mapreduce...
Hive查询报错：FAILED:Execution Error，return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
qq_20181263的博客
04-19 1123
在Linux命令行中泡HiveSQL统计行数，但每次统计出来都为0，后来发现是查询语句压根就没执行。
HIVE报错:FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.Map RedTask
m0_56341622的博客
09-23 4452
这些方法可以根据不同的情况尝试，以解决 Hive 执行错误的问题。如果问题依然存在，建议查看 Hive 日志获取更详细的错误信息。这些方法可以根据不同的情况尝试，以解决 Hive 执行错误的问题。： 如果是因为内存溢出，可以在运行 SQL 命令前设置 MapReduce 的内存参数。： 确保插入数据的类型与目标表的列类型匹配，并且表结构是一致的。： 如果是因为分区数量太多，可以设置动态分区的相关参数。： 如果集群资源不足，可以考虑增加资源或者优化资源分配。： 如果是因为版本不兼容，建议查看兼容表确认。
FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.tez.TezTask
yisun123456的博客
10-16 5363
hive&gt; select count(1) from customer; Query ID = hive_20151113120000_368645da-6763-4ca3-a774-8961d490c0b0 Total jobs = 1 Launching Job 1 out of 1 Status: Running (Executing on YARN cluster with App...
Hive错误之 Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask错误分析_xiaohu21的博客-CSDN博客.mht
09-04
Hive错误之 Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask错误分析_xiaohu21的博客-CSDN博客.mht
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
砍柴人的博客
02-25 1527
java.net.ConnectException: Call From hadoop-master/172.18.0.2 to hadoop-master:8 032 failed on connection exception: java.net.ConnectException: Connection refuse d; For more details see: http://wiki.apache.org/hadoop/ConnectionRefused at sun.refl.
Hive报错FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
qq_45124566的博客
07-05 2081
Hive报错FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
在hive插入数据时出现“Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask”报错
m0_74756715的博客
11-04 9166
运行Tez时检查到用过多内存而被NodeManager杀死进程问题 设置hive的执行引擎
Hive：FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
最新发布
凡许真的博客
10-08 349
Java 环境变量配置有问题， hadoop-env.sh里配置的 Java 环境变量没有 export 关键字
hive报错:FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.tez.TezTask
m0_70220205的博客
08-11 1027
yarn.nodemanager.vmem-check-enabled设置value为false表示禁用虚拟内存检查。yarn.nodemanager.vmem-pmem-ratio设置value为5表示虚拟内存是物理内存的5倍。这些参数配置可以用于控制NodeManager组件的行为，例如限制资源使用、调整内存分配等。
hive报错Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
热门推荐
weixin_48874360的博客
06-28 5万+
hive报错Error: Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask (state=08S01,code=2)
FAILED Execution Error, return code 2 from org
yingzi的技术博客
01-22 1992
FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask 解决方案①: hdfs dfsadmin -safemode leave 解决方案②： set hive.exec.mode.local.auto=true; 以上的方法，我用了后成功之后，运行其他的任务又报同样的错误了。无解，上http://hadoop102:19888/jobhistory查看历史任务，查找最终原因！！！
eeror while processing statement:failed:execution error return code 2 from org.apache.hadoop.hive.ql.exec.mr.mapredtask
11-24
这个错误信息表明在执行Hive查询时出现了问题，具体来说是在MapReduce任务中出现了错误。这可能是由于多种原因引起的，例如查询语法错误、数据格式错误、资源不足等等。为了解决这个问题，你可以尝试以下几个步骤： 1.检查查询语法是否正确，特别是在使用关键字、函数和表名时是否有拼写错误。 2.检查数据格式是否正确，例如日期格式、数字格式等等。 3.检查资源是否充足，例如内存、CPU等等。 4.检查Hive配置是否正确，例如Hive版本、Hadoop版本等等。 5.检查Hive日志以获取更多详细信息，以便更好地了解问题的根本原因。 下面是一个例子，展示如何查看Hive日志： ```shell sudo tail -f /var/log/hive/hiveserver2.log ```
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

magic33416563

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值