如何监控impala的数据_0746-5.16.2-Impala中查询监控状态检查告警解析

最新推荐文章于 2023-07-18 14:57:24 发布
最新推荐文章于 2023-07-18 14:57:24 发布
阅读量601 收藏 1
点赞数 1
文章标签： 如何监控impala的数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_39528467/article/details/111967977
版权
本文探讨了IMPALA DAEMON的QUERY_MONITORING_STATUS告警，该告警在繁忙集群中常见，源于CM检查impala 25000端口超时。通过kill 25000端口进程进行问题复现，并介绍了相关配置参数impala_query_monitoring_failure_window和查询监控超时时间。告警并不意味着服务不可用，而是可能由端口繁忙导致。可以通过调整参数缓解此问题。
摘要由CSDN通过智能技术生成

作者：唐辉

文档说明

在使用impala 的过程中，在CM页面经常能看到IMPALA时， 经常看到IMPALA DAEMON 出现如下告警

The health test result for IMPALAD_QUERY_MONITORING_STATUS has become bad: There are 1 error(s) seen monitoring executing queries, and 0 errors(s) seen monitoring completed queries for this role in the previous 5 minute(s). Critical threshold: any.

本文主要讲述该告警产生的原因

告警重现和说明

首先我们需要知道这个告警产生的原因，通常该告警是在impala服务比较忙的集群上出现， CM会尝试链接impala 25000端口看网页是不是可用的，检查的超时时间默认为5秒，默认报错的次数是一次。检查时间为每5分钟检查一次。超时时间5秒对于比较忙的集群会比较短，所以会报这个问题。基于在这了解这个的基础上，由于测试集群的空间有限，所以这里通过kill 25000 端口进程来进行复现该问题。

通过lsof -i:25000 查找到端口并kill 复现问题后，如果你的浏览器首选语言是中文告警如下图：

相关参数如下：

impala 英文界面中搜索Query Monitoring Timeout

或者impa

最低0.47元/天 解锁文章
weixin_39528467
关注
Python库 | django_impala_backend-0.1.0.tar.gz
05-14
资源分类：Python库 所属语言：Python 资源全名：django_impala_backend-0.1.0.tar.gz 资源来源：官方 安装方法：https://lanzao.blog.csdn.net/article/details/101784059
CDH6.3安装问题汇总
weixin_39338423的博客
09-07 8819
CDH 安装/运维报错解决方案
0746-5.16.2-Impala中查询监控状态检查告警解析
Hadoop_SC的博客
03-07 2443
作者：唐辉 文档说明 在使用impala 的过程中，在CM页面经常能看到IMPALA时， 经常看到IMPALA DAEMON 出现如下告警 The health test result for IMPALAD_QUERY_MONITORING_STATUS has become bad: There are 1 error(s) seen monitoring executing queries,...
CDH5.16.1安装kafka
思亘七险，点落九宫，神游八极，纵横十方。
05-21 3085
CDH5.16.1安装kafka 1.简介: CDH的parcel包中是没有kafka的，需要从新下载parcel包安装。或者在线安装，但是在线安装都很慢，这里使用下载parcel包离线安装的方式。 kafka有很多版本，CDH也有很多版本,所以需要确定自己所需要的对应版本,下面的链接可以查看自己cdh的对应kafka版本: https://www.cloudera.com/documentati...
CDH:cloudera-scm-server dead but pid file exists
weixin_33841722的博客
07-21 425
报错CM HDFS管理界面的报错（由于CM down这个信息是无法通过管理界面查看的，这里是从日志中获得的）：The health test result for HDFS_CANARY_HEALTH has become bad: Canary test failed to create parent directory for /opt/tmp/.cloudera_hea...
遇到问题--hadoop---cdh--SERVICE_MONITOR_LOG_DIRECTORY_FREE_SPACE has become bad
直到世界的尽头
03-22 3120
情况 一开始安装CDHservice服务的的节点报警告如下 The health test result for SERVICE_MONITOR_LOG_DIRECTORY_FREE_SPACE has become bad: This role's Log Directory is on a filesystem with less than 5.0 GiB of its space f...
ClouderaImpala_JDBC-2.6.15.1017.zip
12-18
ClouderaImpala_JDBC-2.6.15.1017.zip,官方文档最新版本The Cloudera JDBC Driver for Hive enables your enterprise users to access Hadoop data through Business Intelligence (BI) applications with JDBC ...
ClouderaImpala_JDBC-2.6.18.1021
10-15
Cloudera Impala JDBC驱动是连接到Impala数据仓库服务的重要组件，用于在Java应用程序中与Impala进行交互。这个压缩包"ClouderaImpala_JDBC-2.6.18.1021"提供了JDBC 3、4.1和4.2这三个版本的驱动，以及相关的文档...
apache-atlas-2.1.0-impala-hook.tar.gz
05-10
在这个版本中，Impala Hook 与 Atlas 的集成意味着用户可以在进行实时分析的同时，享受到 Atlas 提供的数据治理服务，如审计跟踪、访问控制和数据质量检查。 在解压 `apache-atlas-impala-hook-2.1.0` 文件后，你将...
Cloudera-JDBC-Driver-for-Impala-Install-Guide.pdf
03-24
标题《Cloudera-JDBC-Driver-for-Impala-Install-Guide.pdf》涉及的知识点主要包括： 1. Cloudera公司的Impala产品和JDBC驱动程序介绍：文档中提到了Cloudera公司，以及它的主要产品Impala，这是一款由Cloudera开发...
cdh 6.3.2 不良 : 该 Impala Daemon 当前未连接至其 StateStore。
萌兔兔MMQ！！
04-26 2188
The health test result for IMPALAD_CONNECTIVITY has become bad: This Impala Daemon is not connected to its StateStore. 被kill 的impala 25000 端口进程会被自动拉起恢复，这里会出现一个5守护进程意外退出的告警，对于25000 端口超时告警由于被修改过阈值，出现的为一个黄色的警告查询。 监控状态检查出现上述的告警，它并不代表着该节点impala deamon 的服务不可用，
Impala 三大组件：Impala Daemon, Impala Statestore, Impala Catelog
Apache_Jerry的博客
01-15 3397
Impala 三大组件： 1. Impala Daemon: 功能： ​ 负责读写数据文件，接受来自 Impala-shell, ODBC,Hue 和 JDBC 的查询请求，然后与集群中的其他节点分布式并行工作，将本节点的查询结果返回给中心协调者节点。 查询流程： 我们向一个 Impalad 发送一个 SQL，这个Impalad 就要负责解析sql， 生成查询计划树，将执行计划分发给本节点的 ...
Impala（一）：Impala+Kudu+HDFS教程
ai_1046067944的专栏
07-25 6034
本文部分引用其它博客，部分原创，如有不妥之处，欢迎随时留言沟通交流，谢谢~ 1、Impala语法 增删改查 2、Impala常用函数 2.1 、字符串函数 参考链接： https://blog.csdn.net/qq_24699959/article/details/79863664 2.2 、 数值函数 参考链接： https://blog.csdn.net/qq_24699959...
Impala查询报错
jast
09-25 3792
[test:21000] default> select * from tt_user where key like '1%' limit 1; Query: select * from tt_user where key like '1%' limit 1 Query submitted at: 2018-09-25 10:47:53 (Coordinator: http://test:...
CDH5（CDH 5.16.1）安装
あずにゃん梓喵的博客
06-29 7429
CDH 6系列（CDH 6.0.0、CDH 6.1.0、CDH 6.2.0等）安装和使用 CDH5（CDH 5.16.1）安装 linux配置 1.第一种方式：rsa算法加密，非对称加密的方式基于私钥登陆的方式：（ssh连接时无需输入用户密码） 1.ssh-keygen -t rsa 然后四下回车 2./root/.ssh目录下： 私钥：id_rsa 公钥：id_rsa.p...
Impala卡住问题排查
qq_35952353的博客
03-19 4492
现象：Impala卡住时整个集群所有任务都会卡住，最基本的查询都无法返回结果 排查： 1.从调度任务卡住情况判断，预估出问题时间点在8点12分之后。 2.查看catalog server 日志，无导致问题的异常日志。 3.查看statestore日志，在8:14:13 有一个对bshadoop14的impala节点的元数据更新请求，大小为4.13GB。 此处RPC超时。之后一直处于初始化更新元数据状态直到Impala重启。 I0317 08:14:15.408370 6762 statestore.cc:
解决CDH HiveServer2 因OutOfMemory errors原因造成异常退出问题
gmHappy
04-27 2287
问题描述 在诊断->事件中出现如下图异常： 异常描述： The health test result for HIVESERVER2_UNEXPECTED_EXITS has become bad: This role encountered 1 unexpected exit(s) in the previous 5 minute(s).This included 1 exit(s) due to OutOfMemory errors. Critical threshold: any. 解决方
The health test result for HOST_CLOCK_OFFSET has become bad: The host‘s NTP service could not
最新发布
baiyinhai00001的博客
07-18 540
阿里云时钟偏差
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值