【极数系列】Flink环境搭建&Docker版本（04）

夏之以寒

已于 2024-01-29 10:45:20 修改

阅读量1.1k

点赞数 5

分类专栏： Flink专栏文章标签： docker flink 容器

于 2024-01-28 09:56:49 首次发布

本文链接：https://blog.csdn.net/weixin_40736233/article/details/135892094

版权

Flink专栏专栏收录该内容

16 篇文章 3 订阅

订阅专栏

文章目录

引言
01 Linux安装Docker
- 1.安装yum-utils软件包
- 2.安装docker
- 3.启动docker
- 4.设置docker自启动
- 5.配置Docker使用systemd作为默认Cgroup驱动
- 6.重启docker
02 docker部署Flink1.18版本
- 1.拉取最新镜像
- 2.检查镜像
- 3.编写dockerFile文件
- 4.执行dockerFile
- 5.检查flink是否启动成功
- 6.检查日志是否正常
- 7.查看端口是否存在
- 8.浏览器访问

引言

Jdk版本： 11
Flink版本： 1.18.0
Docker版本： docker Community 25.0.0
Linux版本：Centos 7.5.6

01 Linux安装Docker

1.安装yum-utils软件包

tips：提供yum-config-manager 实用程序，配置加速源

yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo

2.安装docker

yum install -y docker-ce docker-ce-cli containerd.io

3.启动docker

systemctl start docker

4.设置docker自启动

systemctl enable docker

5.配置Docker使用systemd作为默认Cgroup驱动

cat <<EOF > /etc/docker/daemon.json
{
   "exec-opts": ["native.cgroupdriver=systemd"]
}
EOF

6.重启docker

systemctl restart docker

02 docker部署Flink1.18版本

1.拉取最新镜像

tips：目前最新镜像默认是：flink 1.18.0

docker pull flink

2.检查镜像

docker images

3.编写dockerFile文件

docker-compose.yaml文件内容如下

version: "1.0"
services:
  jobmanager:
    image: flink
    expose:
      - "6123"
    ports:
      - "8081:8081"
    command: jobmanager
    environment:
      - JOB_MANAGER_RPC_ADDRESS=jobmanager
 
  taskmanager:
    image: flink
    expose:
      - "6121"
      - "6122"
    depends_on:
      - jobmanager
    command: taskmanager
    links:
      - "jobmanager:jobmanager"
    environment:
      - JOB_MANAGER_RPC_ADDRESS=jobmanager

4.执行dockerFile

tips：在docker-compose.yaml文件同级目录执行

docker-compose up -d

5.检查flink是否启动成功

docker ps |grep flink

6.检查日志是否正常

docker logs --tail="500" root-jobmanager-1
docker logs -f root-taskmanager-1

7.查看端口是否存在

netstat -anltp|grep 8081

8.浏览器访问

tips：查看FLink页面web UI页面，云服务器查看防火墙是否开启

http://ip:port/8081