Hive执行脚本: Return Code 2 from org.apache.hadoop.hive.ql.exec.MapRedTask

最新推荐文章于 2024-10-08 15:15:00 发布
最新推荐文章于 2024-10-08 15:15:00 发布
阅读量1k 收藏
点赞数
分类专栏： Hive 大数据项目 文章标签： hive hadoop 数据仓库
CSDN@WHYBIGDATA
本文链接：https://blog.csdn.net/m0_52735414/article/details/126996891
版权
本文介绍了在使用Hive2.3.7和Hadoop2.9.2时遇到的MapRedTask执行错误，详细分析了Return Code 2的含义，并通过查看系统日志和MapReduce日志定位问题。解决方案包括检查Hive配置，确保日志记录完整，以及避免直接将查询结果插入目标表，改用中间表过渡。最后，分享了一个StackOverFlow上的类似问题解答，提示错误可能源于数据文件不合规。
摘要由CSDN通过智能技术生成

Hive执行脚本: Return Code 2 from org.apache.hadoop.hive.ql.exec.MapRedTask

文章目录

在这里插入图片描述

0. 写在前面

  • Hadoop：Hadoop2.9.2
  • Hive：Hive2.3.7

1. 实验场景

离线数仓之留存会员

1. 留存会员与留存率说明

某段时间的新增会员，经过一段时间后，仍继续使用应用认为是留存会员

这部分会员占当时新增会员的比例为留存率

2. 需求：1日、2日、3日的会员留存数和会员留存率

30 31
了解本专栏 订阅专栏 解锁全文 超级会员免费看
WHYBIGDATA
关注
专栏目录
订阅专栏
return code 1 from org.apache.hadoop.hive.ql.ddl.DDLTask
SunnyRivers
03-20 665
注意：set命令是一次性的，而且无法在shell脚本中使用，否则直接报错：Error: Error while processing statement: Cannot modify hive.msck.path.validation at runtime. It is not in list of params that are allowed to be modified at runtime (state=42000,code=1)
Hive错误之 Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask错误分析
xiaohu21的博客
09-04 4万+
Hive Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask错误分析 1. 背景 使用hive过程中，遇到问题有时候信息不是很足够，这时候就需要去想办法查看错误信息。而这类服务器框架的错误信息一般都存放在日志中 hive的日志不设置的话，默认存放在/tmp下当前用户所在目录，本文演示是root用户，所以文件存放在tmp文件夹下的root目录下/tmp/root 已经按照日期和时间进行存储，查看最
Hive：FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
最新发布
凡许真的博客
10-08 176
Java 环境变量配置有问题， hadoop-env.sh里配置的 Java 环境变量没有 export 关键字
在hive插入数据时出现“Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask”报错
m0_74756715的博客
11-04 8651
运行Tez时检查到用过多内存而被NodeManager杀死进程问题 设置hive的执行引擎
hive -- return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
kismet
11-20 3543
异常： Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask (state=08S01,code=2) 查看日志信息： 原因，没有开启Metastore， 解决方法：开启Metastore，...
hive问题-return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
erainm
09-23 9306
执行hive sql时遇到问题： FAILED:Execution Error,return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask 这个其实一般是个hive内部错误，处理这个问题就需要找日志了； 找日志 hive.log(比较简略) hive.log ===> 缺省情况下 /tmp/root/hive.log (不然就在你hive-site.conf配置的日志路径里) 我这里在/tmp/root目录下 去里面看了日志，没
二百二十一、Hive——HQL报错：return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
tiantang2renjian的博客
01-30 1013
Hive——HQL报错：return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
fairynini的博客
03-22 2万+
oozie跑hive脚本报错： FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask FAILED: Execution Error, return code 3 from org.apache.hadoop.hive.ql.exec.mr.MapredLocalTask 看...
: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
09-09
这个错误通常表示在执行Hive查询期间发生了一个MapReduce任务错误。错误代码2通常与“资源不足”有关，可能是由于以下原因之一造成的： 1. 集群资源不足：检查集群的可用资源，如内存和CPU。如果资源不足，可以尝试...
在hive中有报错,FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
11-23
在Hive中，当出现错误消息"FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask"时，这通常表示在执行MapReduce任务时发生了错误。这可能是由于多种原因引起的，下面是一些...
return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
坐忘峰
08-21 3万+
环境：Hadoop2.8.0、Hive1.2.2，一共三台服务器，master是8G内存，两个slaver是4G内存（很寒酸），在Hive的命令行中执行count(*)和insert的时候总是报错，比如执行select count(*)的时候报“return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask”错误。很显然这个不是...
hive报错return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
一个技术迷的博客
01-04 1883
场景：计算一年中每一天的数据，每一天的取值是前一年或者半年的平均值，所以我有两张临时表，第一张存放主体的一年中每一天的数据，第二张存放主体近两年的每一天对应的数据，第一张表左连接第二张表，这样子进行窗口函数计算即可。 select h1.*,h3.volume,h3.vwap, avg(h3.turnoverval)over(PARTITION by h1.TRADINGITEMID order by h1.natualday asc rows BETWEEN 364 PRECEDING and
hive报错Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
热门推荐
weixin_48874360的博客
06-28 5万+
hive报错Error: Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask (state=08S01,code=2)
hive在操作表时（如insert into table）关于return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask 错误
Therefore的专栏
03-28 6104
1.解决return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask 错误 在启动hive后，使用select查询语句进行查询时，爆出如下错误： INFO: Number of reduce tasks determined at compile time: 1 INFO: In order to change th...
关于return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask 错误
liulang12580的博客
07-25 3万+
1.解决return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask 错误 在启动hive后，使用select查询语句进行查询时，爆出如下错误： INFO  : Number of reduce tasks determined at compile time: 1 INFO  : In order to change
使用hive报 return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask解决方法
小梁
07-24 3005
1.情况 两表join 向新表中插入数据时 导入其他分区的的数据时正常 唯独0701这一天的数据异常 insert overwrite table A partition (log_date= '20210701') select * from employees e left join b where a.log_date= '20210701' and b.log_date= '20210701' 2.分析 3.解决 ...
[Hive]Hive执行脚本的方式以及转义字符
个人技术博客
09-17 3万+
1. hive脚本的执行方式hive脚本的执行方式大致有三种： 1. hive控制台执行； 2. hive -e "SQL"执行； 3. hive -f SQL文件执行；参考hive的用法usage: hive -d,--define <key=value> Variable subsitution to apply to hive
hive 运行复杂sql 报错 Execution Error, return code 2
尤托匹亚的博客
10-13 8006
问题描述 hive 运行复杂sql 报错 Execution Error, return code 2 如下： 0: jdbc:hive2://node01:10000/> select id from tb_user_log t where t.yue="09" group by id ; Query ID = root_20201014053747_ecfd0927-dfb0-4390-8e1f-59c056f01176 Total jobs = 1 Launching Job 1
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值