ERROR : FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.q

最新推荐文章于 2024-09-23 17:07:53 发布
最新推荐文章于 2024-09-23 17:07:53 发布
阅读量4.7k 收藏 3
点赞数 2
分类专栏： hive 文章标签： 大数据 hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Fresh_man888/article/details/109093939
版权

出现这种错的的原因:

当我们在hive中执行sql语句时,在执行一些复杂的语句时,hive会报以上错误,出现这种错误的原因是,我们用hiveserver2 启动服务端,然后用beeline 去链接hiveserver2服务端是,hive默认给beeline 分配的内存只有256m, 分配的内存太小,导致我们无法运行而报错;

解决办法:

修改hadoop环境配置文件,,修改hadoop分配客户端内存的配置:代码如下:

export HADOOP_CLIENT_OPTS="-Xmx1g $HADOOP_CLIENT_OPTS"

晓晓很可爱
关注
专栏目录
FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
qq_37647812的博客
03-26 1813
hive数据迁移过程中遇到的问题和解决方法
Hive任务执行报错：FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
石榴姐yyds
06-29 7430
Hive任务执行报错：FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
hive报错Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
热门推荐
weixin_48874360的博客
06-28 5万+
hive报错Error: Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask (state=08S01,code=2)
FAILED Execution Error, return code 2 from org
yingzi的技术博客
01-22 1839
FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask 解决方案①: hdfs dfsadmin -safemode leave 解决方案②： set hive.exec.mode.local.auto=true; 以上的方法，我用了后成功之后，运行其他的任务又报同样的错误了。无解，上http://hadoop102:19888/jobhistory查看历史任务，查找最终原因！！！
HIVE报错:FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.Map RedTask
最新发布
m0_56341622的博客
09-23 1245
这些方法可以根据不同的情况尝试，以解决 Hive 执行错误的问题。如果问题依然存在，建议查看 Hive 日志获取更详细的错误信息。这些方法可以根据不同的情况尝试，以解决 Hive 执行错误的问题。： 如果是因为内存溢出，可以在运行 SQL 命令前设置 MapReduce 的内存参数。： 确保插入数据的类型与目标表的列类型匹配，并且表结构是一致的。： 如果是因为分区数量太多，可以设置动态分区的相关参数。： 如果集群资源不足，可以考虑增加资源或者优化资源分配。： 如果是因为版本不兼容，建议查看兼容表确认。
【Hive报错】FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
debimeng
12-13 2294
【场景】 在hive3.1版本下执行以下语句报错 --加载数据到桶表u_demo_bk中 insert into table u_tab_bk_p select * from u_tab; 可是插入到普通表和分区表的语句是能正常执行的。 【原因】 最后才知道是因为资源不足的问题，可是这数据量又不大，有可能hive的机制有关，本来它的场景就是为了解决大数据的问题。 【解决】 最后在主节点修改了yarn-site.xml文件，添加一个参数，即：关闭虚拟内存的检测，最后完整的内容如下： <co
hive报错FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
m1913843179的博客
11-20 1万+
这里写自定义目录标题新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 问题一： 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下M
hive报错:FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.tez.TezTask
m0_70220205的博客
08-11 962
yarn.nodemanager.vmem-check-enabled设置value为false表示禁用虚拟内存检查。yarn.nodemanager.vmem-pmem-ratio设置value为5表示虚拟内存是物理内存的5倍。这些参数配置可以用于控制NodeManager组件的行为，例如限制资源使用、调整内存分配等。
报错：FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask原因查找
weixin_56114243的博客
12-15 7693
报错：FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask原因查找
Execution Error,return code 2 from org.apache.haddop.hive.ql.exec.mr.MapRedTask解决办法
chongjiapi1753的博客
10-22 1015
insert overwrite table XX 1.建表后修改过表结构（增删字段等）后，重新加载数据时报return code2错，元数据和数据文件不匹配导致 解决办法：重建一张新表； 2.解决办法：修改表结构时加cascade 3.若排查定位是内存不足，则到资源充足的库新建...
FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.tez.TezTask
yisun123456的博客
10-16 5305
hive&gt; select count(1) from customer; Query ID = hive_20151113120000_368645da-6763-4ca3-a774-8961d490c0b0 Total jobs = 1 Launching Job 1 out of 1 Status: Running (Executing on YARN cluster with App...
ERROR : FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
01-19
根据提供的引用内容，"ERROR: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask" 是Hive执行任务时出现的错误。这个错误通常表示Hive任务在执行过程中遇到了问题，并且返回了错误代码2。 要解决这个问题，可以尝试以下几种方法： 1. 检查Hive日志：查看Hive的日志文件，可以提供更详细的错误信息，帮助定位问题所在。你可以使用以下命令来查看Hive日志： ```shell tail -f /path/to/hive/logs/hive.log ``` 2. 检查Hadoop集群状态：确保Hadoop集群正常运行，并且所有的服务都处于正常状态。你可以使用以下命令来检查Hadoop集群的状态： ```shell hadoop dfsadmin -report ``` 3. 检查Hive配置：确保Hive的配置文件正确，并且与Hadoop集群的配置相匹配。特别是检查以下配置项： - hive.exec.mode.local.auto：设置为false，以确保Hive任务在集群模式下运行。 - hive.execution.engine：设置为mr，以使用MapReduce作为执行引擎。 4. 检查Hive查询语句：如果错误是在执行Hive查询语句时发生的，那么请检查查询语句是否正确，并且符合Hive的语法规范。 5. 检查资源限制：如果Hive任务需要大量的资源（例如内存或磁盘空间），请确保集群中有足够的资源可供使用。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值