Hiveserver2异常退出，导致连接失败的问题。

最新推荐文章于 2023-09-04 15:02:16 发布
最新推荐文章于 2023-09-04 15:02:16 发布
阅读量1.5k 收藏
点赞数
分类专栏： Hadoop hue 文章标签： hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/llddds/article/details/108538709
版权

Could not connect to hadoop02:10000(code THRIFTTRANSPORT):TTransportExportException(‘Could not connect to hadoop02:10000’,)

在这里插入图片描述
解决方法：修改HiveServer2 的 Java 堆栈大小.
默认配置为50MB,比较小,运行时会出现上面的错误以及运行卡顿的情况,建议将值根据自己的系统配置调大.
在这里插入图片描述

面壁者～罗辑
关注
专栏目录
[Spark版本更新]--Spark-2.4.0 发布说明
欢迎来到我的博客，一起探索代码里的世界！
11-09 6545
2018-11-02 Apache Spark 官方发布了 2.4.0版本，以下是 Release Notes，供参考：  Sub-task [ SPARK-6236 ] - 支持大于2G的缓存块 [ SPARK-6237 ] - 支持上传块> 2GB作为流 [ SPARK-10884 ] - 支持针对回归和分类相关模型的单实例预测 [ SPARK-11239 ] - 用于ML线性...
CDH6.3安装问题汇总
weixin_39338423的博客
09-07 8823
CDH 安装/运维报错解决方案
HiveServer2经常异常退出，导致连接失败
蝈蝈
11-17 3889
1 问题描述 在项目中搭建Hive On Spark，在执行查询的数据量比较大时或者查询出来的数据再次插入到DWD层时，经常性的报如下两个错误： 1 ERROR org.apache.parquet.hadoop.ParquetRecordReader: [aafa2e51-4efa-4437-9b07-86b8d55570f0 HiveServer2-Handler-Pool: Thread-47]: Can not initialize counter due to context is not a
CDH HiveServer2异常退出
fansy1990的专栏
07-10 5656
本篇参考：http://blog.csdn.net/gklifg/article/details/50418109、http://blog.csdn.net/levy_cui/article/details/53992402、http://blog.csdn.net/lulynn/article/details/46455097。在使用CDH集群的过程中，出现HiveServer2刚启动没多久，客
hiveserver2总是无故挂掉
m0_74903429的博客
12-01 1773
原因；一般情况下是默认堆空间过小导致 解决措施：将hive(根路径下)/conf/hive-env.xml（也可以是hive-env.sh.template)文件里增加一行配置更改堆大小为512mb或者以上
hiveserver2服务异常停止java.lang.OutOfMemoryError: Java heap space
TURING.DT
01-03 8343
2017-01-02 15:34:04,461 WARN  [IPC Client (188363230) connection to nn01/192.168.1.4:8020 from hive]: ipc.Client (Client.java:run(955)) - Unexpected error reading responses on connection Thread[IPC Cl
hiveserver2经常挂断的原因
最新发布
qq_43688472的博客
09-04 2156
配置问题：不正确的配置可能导致 HiveServer2 发生问题。如果资源不足，可能会导致 HiveServer2 挂断。Hive 版本问题：某些 Hive 版本可能存在已知的问题或 bug，可能会导致 HiveServer2 挂断。确保使用的 Hive 版本是稳定的，最好是已修复了已知问题的最新版本。查询问题：某些查询可能会占用大量资源或导致错误，从而导致 HiveServer2 崩溃。并发连接数量过多：如果 HiveServer2 处理大量并发连接，可能会超过其容量限制，导致崩溃或挂断。
ImpalaD节点服务启动失败分析
wangkuangood3200的专栏
09-16 2229
现象描述： 生产环境老离线集群（CDH5.2）的一台impalaD节点服务异常，CM页面显示该节点的服务并无异常。 然而无论是客户端通过jdbc/odbc方式还是直接在该impala节点通过impala-shell来连接该节点都会报错（该集群impala未使用hiveserver2+haproxy+keepalive方案，客户端直连impalad节点）： hostname:/tmp# imp...
Hive调优及参数优化（详细版）
热门推荐
奇迹虎虎的博客
02-18 1万+
Hive调优及参数优化，涵盖：基础配置优化、压缩配置优化、分桶优化、Map Join、Bucket-Map Join、SMB Join、Hive并行操作、Hive索引、数据清洗转换优化、统计分析优化、Hive优化器等等......
hiveserver2启动运行异常
weixin_54429519的博客
08-30 2226
问题描述: 解决方案：退出hdfs 的安全模式 第一方案:正常退出安全模式 hdfs dfsadmin -safemode leave 如提示Safe mode is OFF，那就说明退出成功，但有时候这个命令也没办法退出安全模式，就需要使用强制退出 第二种：强制退出安全模式 hdfs dfsadmin -safemode forceExit ...
【CDH】CDH集群hiveserver2服务频繁挂掉
Mrerlou的博客
05-27 1599
问题现象： cdh集群 master00节点 hiveserver2服务2小时内挂掉2次，报内存溢出的问题。 错误日志如下： 问题排查： 打印一下堆的gc 信息 jstat -gc pid 1000 5 堆设置了4g的内存，Eden区只有400M, s0 和 s1区 更小，然后剩余的空间都是老年代区，空间配置不合理，重新配置下堆空间。 解决方案： 设置hiveserver2的jvm参数 -Xmn2g -XX:NewRatio=4 -XX:MaxPermSize=512M -XX:+UseParNew
hiveserver2经常挂掉
Radiation_x的博客
03-31 2894
一般是默认堆空间过小导致的 将hive(根路径下)/conf/hive-env.xml文件里增加一行配置更改堆大小为512mb或者以上
报错 【hiveserver2】hive --service hiveserver2 报错 GC overhead limit exceeded
weixin_44484668的博客
02-06 1948
项目场景： hive --service hiveserver2 报错, 导致hiveserver2 服务无法使用 问题描述： Exception in thread "HiveServer2-Handler-Pool: Thread-556" java.lang.OutOfMemoryError: GC overhead limit exceeded 原因分析： hive shell脚本启动的jvm的堆内存 不足 解决方案： cp hive-env.sh.template hive-env.sh vi
hiveserver2掉线修复
weixin_39037208的博客
12-09 2079
使用hive发现hiveserver2有时会挂掉，查看hive.log发现里边没有相关信息， 但在启动hiveserver2的目录下还有一个nohup.out文件，这里边保存有运行信息，打开发现是因为 这种情况是出现在运行了一个错误的查询之后，可以重启或者将值稍微调大一点。 ...
Hiveserver2服务宕机及解决
Realoyou的博客
05-05 3591
描述： 公司内部使用Hue作为数分团队对大数据的分析产出工具，随着数分业务增加和使用人员复杂，不规范SQL，不规范的使用，导致Hue连接Hive的Hiveserver2服务意外宕机，查看服务日志，并无明显报错，只能在CDH管理界面看出是OOM导致的意外退出，想着通过加大内存以及加上万能重启方式，然而并不能解决，服务运行一段时间后，仍然因OOM挂机，因日志没有详细错误信息，只能看到服务在退出时dump出了很大的堆快照文件（-XX:+HeapDumpOnOutOfMemoryError）,分析快照文件相对较为.
解决云服务商hiveserver2服务不稳定的问题
草小诚的博客
03-07 2052
系统对hive
beeline连接hiveserver2 踩坑2小时！！
day day no bug
02-27 2589
beeline连接hiveserver2的经历 首先安装好hive之后启动hiveserver2服务 [hadoop@localhost apache-hive-2.3.6-bin]$ hiveserver2 which: no hbase in (/home/hadoop/app/jdk1.8.0_201/bin:/home/hadoop/app/jdk1.8.0_201/jre/bin:...
HiveServer2 频繁宕机根本原因分析
spark_dev的博客
02-22 4299
问题描述： hiveServer2跑一段时间后, 一般在凌晨就会宕机（凌晨有很多定时任务），宕机比较有规律，就是跑几天就宕一次，分析一下原因。作业没有特别大的任务。 分析方法：jstat, dump 分析结论：hive2的hiveServer本身内存泄漏造成 解决方法：不解决或升级。
[idea]hive server2连接超时 导致idea连接hive频繁挂掉（不好使）
胖胖的博客
01-27 2450
在hive-site.xml中添加: <property> <name>hive.server2.session.check.interval</name> <value>60000</value> </property> <property> <name&gt...
hiveserver2退出
07-28
根据引用\[1\]，你提到Cloudera Manager web界面出现了三个红点，指示了HBase Master、Namenode和ResourceManager的运行状况测试不良，原因是Service Monitor未找到活动的XXX。然而，你确认这些服务都是正常的，HDFS的读写、HBase的建表查询和MapReduce的任务都能正确运行。 根据引用\[2\]，Cloudera Manager执行了通过-失败测试（Pass-fail tests），这些测试用于确保服务正常运行并能响应请求。HDFS（NameNode角色）、HBase和ZooKeeper服务会执行这些测试，也称为“canary”测试。通过-失败测试的结果可能是良好（Good）或不良（Bad）。 根据引用\[3\]，在诊断->事件中，出现了HIVESERVER2_UNEXPECTED_EXITS的异常，描述为该角色在过去的5分钟内遇到了1次意外退出，其中包括1次由于OutOfMemory错误导致的退出。解决方案需要进一步分析。 综上所述，根据提供的信息，HiveServer2退出的问题可能与Cloudera Manager的运行状况测试不良有关。建议进一步检查Cloudera Manager的配置和日志，以确定导致HiveServer2退出的具体原因，并采取相应的解决方案。 #### 引用[.reference_title] - *1* *2* [CentOS7+CDH6.3安装CDH错误排查： HiveServer2 该角色的进程已退出。该角色的预期状态为已启动](https://blog.csdn.net/weixin_43214644/article/details/115741239)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] - *3* [解决CDH HiveServer2 因OutOfMemory errors原因造成异常退出问题](https://blog.csdn.net/ctwy291314/article/details/116191071)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值