Flink on Kubernetes (flink-operator) 部署Flink

JNWsong

已于 2024-03-27 16:42:18 修改

阅读量1.5k

点赞数 9

文章标签： flink kubernetes 大数据

于 2024-03-27 15:01:53 首次发布

本文链接：https://blog.csdn.net/java_creatMylief/article/details/136678233

版权

本文详细介绍了如何在Kubernetes环境中部署ApacheFlink，包括安装FlinkOperator、创建FlinkDeployment、配置session和application模式的区别，以及处理jar包的部署策略。还讨论了YARN与K8s应用的对比和FlinkwebUI的访问方法。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

flink on k8s 官网

https://nightlies.apache.org/flink/flink-kubernetes-operator-docs-release-1.1/docs/try-flink-kubernetes-operator/quick-start/
我的部署脚本和官网不一样，有些地方官网不够详细

部署k8s集群

注意，按照默认配置至少有两台worker

安装helm

https://helm.sh/zh/docs/intro/install/

安装flink opreator

kubectl create -f https://github.com/jetstack/cert-manager/releases/download/v1.8.2/cert-manager.yaml
helm repo add flink-operator-repo https://downloads.apache.org/flink/flink-kubernetes-operator-1.1.0/
helm install flink-kubernetes-operator flink-operator-repo/flink-kubernetes-operator -n flink

安装完成后，资源如下

[root@k8s1 flinkinstall]# helm list -n flink
NAME                            NAMESPACE       REVISION        UPDATED                                 STATUS          CHART                           APP VERSION
flink-kubernetes-operator       flink           1               2024-03-07 16:57:48.374299701 +0800 CST deployed        flink-kubernetes-operator-1.7.0 1.7.0 
[root@k8s1 flinkinstall]# kubectl get all -A
NAMESPACE              NAME                                             READY   STATUS    RESTARTS   AGE
cert-manager           pod/cert-manager-66b646d76-gkw55                 1/1     Running   1          2d2h
cert-manager           pod/cert-manager-cainjector-59dc9659c7-pkgrm     1/1     Running   1          2d2h
cert-manager           pod/cert-manager-webhook-7f778

最低0.47元/天解锁文章