![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 67
wangyueshu
信念:打破岗位壁垒,方法和思路比工具和语言更重要。
展开
-
Flink taskmanager因节点宕机失效或进程异常导致的报警处理
flink的taskmanager的端口占用情况是动态分配的,因此在promethues的监控targets配置也采用了脚本动态拉取更新:1. 先连接zookeeper,查看flinkNodes的注册信息,获取ip节点信息2. 登录节点,通过jps获取活跃taskmanager的端口号。3. 生成flink的targets监控目标配置文件。于是:处理节点宕机失效的taskmanager报警:1. 登录zookeeper服务器,进入zookeeper安装目录,执行 sh zkCl.原创 2021-02-03 17:09:20 · 1692 阅读 · 0 评论 -
ZooKeeper&Flink&Hadoop集群单个节点服务器挂掉之后的恢复
背景:小项目用到的服务器老旧,其中一台周末因为总线等硬件原因挂掉了,各种监控报警,运维尝试恢复失败后直接建议更新设备,于是需要服务迁移和恢复。其中ZooKeeper&Flink&Hadoop集群因为单节点连接失败也开始罢工了。组里的架构加运维大牛走了,小白尝试恢复集群服务。所以本文只涉及简单的服务恢复和报错处理。Tips:要学会利用日志、日志、日志排查问题。一、ZooKeeper最初尝试恢复的实际是Flink,恢复失败后发现其日志中关于zooKeeper的报错(.原创 2021-01-14 11:56:35 · 2245 阅读 · 2 评论