Hive执行insert语句时一直卡主不动

最新推荐文章于 2024-03-24 18:25:00 发布
最新推荐文章于 2024-03-24 18:25:00 发布
阅读量5.4k 收藏 19
点赞数 2
文章标签： hive hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Championers/article/details/112142470
版权

问题描述：

Hive执行insert语句时一直卡住不动
在这里插入图片描述
执行到这里时就卡住了，等了好久都没反应

解决：

查看Hive.log
在这里插入图片描述
Hive一直在连接重试，看到这里猜想应该是8032端口有问题
百度了解8032端口的作用
在这里插入图片描述

到Hadoop中查看RM日志：hadoop-hadoop-resourcemanager-CNWOKARMS-NODE01.log
在这里插入图片描述
发现8033被占用
使用netstat –anp | grep 8033查看8033端口占用情况
在这里插入图片描述

使用JPS命令查看服务启动的情况
在这里插入图片描述
果然由于端口被占用，RM没有启动起来
kill掉占用端口的进程，重新启动YARN即可

Championers
关注
  • 2
    点赞
  • 踩
  • 19
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
hive insert操作卡死
天天开心
02-21 5767
hive，执行一个简单的insert操作时 卡在了 kill command这里 看了下rm，nm什么都启动起来了，怀疑mp出错了， 随便运行了一个官方案例，果然不对，一直卡在running job这里。 无语，我什么也没动啊，昨天insert还好好的。 查看了一下nodemanager的log，没有什么问题，又查看了resourmanager的log 问题就出在红框这里：...
hive 锁表，导致不能insert ，update 以及drop table 也不行，，解除hive锁表终极 解决方案！！！！
qq_27493503的博客
07-03 6432
    今天遇见hive插入的时候卡死不执行的问题   （直接上图）     起初我以为是hive启动报错，把日志调整到debugger级别查看发现该表被锁了。（PS:找了半天终于找到问题了）起初想着先把表删掉看看，结果表被锁定以后 不能drop卡死不往下执行，无论是drop 还是insert 或者 update于是各种网上搜索 ，hive怎么解除锁表（直接上图）先查看一下 是否锁表（肯定是锁了，...
大数据专栏-Hive插入数据时长时间卡住的问题分析过程及原因
一个探讨python的自留地
04-12 2473
hive insert 长期卡住不动
hive运行insert语句卡死！！
ycy11370的博客
05-15 6079
在使用hive向数据仓库中写入语句时，发现任务提交至yarn时一直都是running状态，也就是卡死了！！ 然后查看日志时发现也没有具体的报错信息，百思不得其解，不停的百度。 后来脑洞一开，是不是我任何案例都无法在yarn上跑了呢？于是就测试了一下官方自带的wordcount案例。。。。。 哦吼？？？果然是不行了。。。看来我的yarn彻底挂了。 不断查看日志，不断看，不断看，，，，发现我他...
hive运行insert卡住
lzp12345677的博客
04-24 1625
hive (default)> insert into ll values(123); Query ID = atguigu_20210424130438_727aed57-78b8-4204-ab6d-deceb076b3b0 Total jobs = 3 Launching Job 1 out of 3 Number of reduce tasks determined at compile time: 1 In order to change the average load for a r..
hive进行insert操作时长时间不成功
Nut_ddddou的博客
11-24 733
我的原因是重复提交，导致有了许多缓存文件。因为刚刚学习hive，卡了半天的时间。重新运行insert指令。
使用Python构造hive insert语句说明
12-17
然而，与传统的关系型数据库如MySQL不同，Hive并不支持直接导出INSERT语句。因此，当需要构建Hive的INSERT语句时，我们通常需要自定义解决方案，例如利用编程语言如Python来实现。 在给定的场景中，描述提到的方法...
hive执行计划可视化工具
05-31
然而，对于复杂的Hive查询，理解其执行计划有时会变得相当困难，这就是Hive执行计划可视化工具的作用。这些工具通过图形化的方式展示查询的执行流程，帮助用户更好地理解性能瓶颈和优化查询。 标题中的“Hive执行...
Hive那些事儿之八-大数据踩过的坑——Hive insert
01-07
Hive那些事儿之八-大数据踩过的坑——Hive insert 我在对Hive表数据清洗后，使用了如下SQL将结果集插入到新表中: insert into db_name.table_name_1 ( col_1,col2,col3 ) with temp_table_1 as ( select id,col_2 ...
hive建表语句
08-19
hive建表语句hive建表语句hive建表语句hive建表语句hive建表语句hive建表语句
Hive 中执行insert 卡在launching Job
zl199612的博客
10-26 1200
Hive 中执行insert 卡在launching Job 记录一下： 在安装hive后试图向数据库中插入一条数据，结果一直卡在launching Job 不动。 原因： 之前写了一个集群群起的脚本，该脚本指定了YARN的Resourcemanager 的地址为 另一台hadoop主机； 脚本启动时resourcemanager其实是没有启动的，所以要么在yarn-site.xml中修改resourcemanager的启动地址，要么在hadoop03上面启动yarn即可解决问题。 .
插入大量insert命令过程太慢，甚至导致程序卡死
敲代码的彭于晏
08-18 4961
在学习中，老师给了省市sql文件，里面有几千条insert命令，直接插入导致plsql直接卡死。 解决办法 （1）新建命令窗口 （2）输入@（文件地址），并敲下回车运行 （3）如果源文件最后没有写commit，那么我们需要手动提交 ...
Hive-执行insert时报错或极其缓慢
Evolving_Vincent的博客
03-08 951
背景：我是新手在跟着某硅谷学习hive的时候遇到这类问题，后来发现有两种方式解决；
Insert Into语句执行特别慢的问题，及解决记录
weixin_41740618的博客
02-26 5931
今天执行了一个insert 语句，但是特别慢，只有1100条记录，但是执行了15分钟，经过努力缩短为0.05秒。 语句如下： Insert Into table1 select * from view1 where view1.period=‘1912’; 我一开始查了table1，看他的各种设置，什么catch，nologging之类的，后来又查了view1里面的table，发现有没什么问题。 ...
HIVE运行卡死没反应的亲测解法
xxhcomputer的博客
09-14 2175
这是一个解决hive操作卡住的方案，希望可以帮到遇到相同问题的同学 In order to change the average load for a reducer (in bytes): set hive.exec.reducers.bytes.per.reducer= In order to limit the maximum number of reducers: set hive.exec.reducers.max=
hive插入数据失败解决方法
热门推荐
小小码农
03-24 1万+
记录一次hive 错误 描述错误： 进入hive客户端插入数据报错 # 报错： hive (default)> insert into javaAndBigdata.student(id,name) values (3,"java页大数据"); Query ID = root_20220323224810_5192a9f4-95ae-4166-b21e-c8e5f1493c32 Total jobs = 3 Launching Job 1 out of 3 Number of reduce task
hbase查看表结构_Hbase完全分布式搭建及Hive整合
weixin_39725365的博客
11-21 182
准备 hbase-1.2.9-bin.tar.gz安装包，搭建好的zookeeper集群，搭建好的hive分布式集群准备工作：1.免秘钥配置：ssh-keygenssh-copy-id -i .ssh/id_rsa.pub node0012.时间同步：yum install ntp -y进行时间同步ntpdate http://ntp1.aliyun.comchkconfig ntpd on 开...
基于 Flink + Hive 构建流批一体准实时数仓
yang灬仔
09-27 2032
基于 Flink + Hive 构建流批一体准实时数仓 基于 Hive 的离线数仓往往是企业大数据生产系统中不可缺少的一环。Hive 数仓有很高的成熟度和稳定性，但由于它是离线的，延时很大。在一些对延时要求比较高的场景，需要另外搭建基于 Flink 的实时数仓，将链路延时降低到秒级。但是一套离线数仓加一套实时数仓的架构会带来超过两倍的资源消耗，甚至导致重复开发。 想要搭建流式链路就必须得抛弃现有的 Hive 数仓吗？并不是，借助 Flink 可以实现已有的 Hive 离线数仓准实时化。本文整理自 Apa.
端口占有解决办法 java.net.BindException: Address already in use: bind
07-05 767
通常在开发项目中我们通常遇到端口被占用这个问题，今天到网上搜看到一个快速解决办法：打开命令行：用netstat  -ano 命令查询当前被占用端口的进程    可以看到被进程PID1888占用，再用tastlist命令 查询对应的程序名：    然后再到任务管
【大数据生态】HIVE运行卡死没反应
最新发布
m0_64280569的博客
03-24 1262
其实呢，我最开始就开始尝试打开yarn客户端界面了，但是没有打开，其实我发觉到我用的地址错误了，因为yarn并没有部署在了hadoop102上面，而我发觉之后立马改正，可还是打不开，我不由得觉得我的地址是不是真的输错了，哈哈哈哈，挺逗的，卡了好几分钟，最后在部署yarn的虚拟机(hadoop103)上面jps了一下，发现真的没有启动集群。最后，我发现这位博主写的其实没错，没有解决是因为我没进行前面的操作(1,2,3,4)。我也是直接进行了最后的3条指令，宝贝，结果还是卡着了。等待了几分钟，无果，被迫。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值