Flink on Yarn 模式下定位连接MySql的Flink Job

最新推荐文章于 2022-05-11 16:54:09 发布

axin1995

最新推荐文章于 2022-05-11 16:54:09 发布

阅读量241

点赞数

文章标签： flink mysql linux 服务器

本文链接：https://blog.csdn.net/m0_49826240/article/details/109567942

版权

Flink on Yarn 模式下定位连接MySql的Flink Job

环境说明：

flink 模式：flink on yarn
开发语言：java

遇到的问题

flink开发数据指标join了mysql来补充数据。后续连接的这个mysql需要迁库，这时就需要将连接了这个mysql的flink job找到并且切换db。凭借数据需求开发文档修改了大部分flink job任务。后续运维小姐姐说我们的几台机器没有断开这个mysql，并且将这几台机器的IP给了我们。

找flink job

IP可以定位到具体的机器，但是一个机器上有好几个job的task在运行，要精确找到该flink job还需要花点功夫。

1.在该机器上查找连接该mysql的网络通讯信息，这里需要知道该mysql的IP。使用 netstat 命令，找到通讯信息。（netstat,lsof,ps等命令可以自行百度）

[ops@emr-worker-167 ~]$ netstat -ntu |grep 192.168.55.92
tcp        0      0 192.168.60.167:44922     192.168.55.92:3306       ESTABLISHED
tcp        0      0 192.168.60.167:49380     192.168.55.92:3306       ESTABLISHED

2.找到两个端口在连接该mysql，使用lsof -i:44922命令可以看到谁在占用这个端口。