helm部署多环境多k8s集群Apollo(阿里云资源)

最新推荐文章于 2024-08-16 23:11:54 发布
最新推荐文章于 2024-08-16 23:11:54 发布
阅读量2.8k 收藏 8
点赞数 3
分类专栏： Kubernetes 阿里云 文章标签： Apollo kubernetes 分布式 helm 阿里云
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43515220/article/details/113623874
版权

规划

搭建信息

1.利用官方文档提供的helm方式部署
2.部署三个环境: pro dev test
3.各个环境需准备MySQL、Slb，因网络原因，dev和test环境的Slb需有公网ip，生产的vpc与内网连通故无需公网
4.apollo的组件包括apollo-config-server(其中包括apollo-meta-server)、apollo-admin-server和apollo-portal
4.每个环境(开发/测试/生产)都需要安装apollo-config-server和apollo-admin-server，计划将两者部署在对应环境的k8s集群中的ops命名空间下
5.开发、测试、生产三个环境只需要一个apollo-portal，计划将apollo-portal部署在生产k8s集群的ops命名空间下

环境数据库实例用户密码数据库数据库连接地址SLB ip
生产proddbapollomy_apollo_db_passwdProdApolloConfigDBrm-prod-rds-addresss.mysql.rds.aliyuncs.comprod_slb_address
测试testdbapollomy_apollo_db_passwdTestAlphaApolloConfigDBrm-test-rds-addresss.mysql.rds.aliyuncs.comtest_slb_address
开发devdbapollomy_apollo_db_passwdDevApolloConfigDBrm-dev-rds-addresss.mysql.rds.aliyuncs.comdev_slb_address

在这里插入图片描述

部署大致流程

1.使用helm将apollo的chart拉到本地
2.修改chart包中的values.yaml文件，对配置进行自定义
3.在各自集群上部署apollo-config-server和apollo-admin-server
4.在生产集群上部署apollo-portal

准备工作

按照分布式部署指南
1.创建数据库用户apollo
2.创建数据库并授读写权限给apollo用户
3.每个集群各自需一个数据库，apollo-portal单独需要一个数据库

部署

部署生产环境

$ helm version
version.BuildInfo{Version:"v3.5.1", GitCommit:"32c22239423b3b4ba6706d450bd044baffdcf9e6", GitTreeState:"clean", GoVersion:"go1.15.7"}

$ helm repo add apollo http://ctripcorp.github.io/apollo/charts


"apollo" has been added to your repositories

$ cd /tmp/apollo/

$ helm search repo apollo
NAME                 	CHART VERSION	APP VERSION	DESCRIPTION
apollo/apollo-portal 	0.1.2        	1.7.2      	A Helm chart for Apollo Portal
apollo/apollo-service	0.1.2        	1.7.2      	A Helm chart for Apollo Config Service and Apol...

$ helm pull apollo/apollo-service --untar

$ cd /tmp/apollo/apollo-service

修改values.yaml，以下是修改好的版本
若手动修改，注意修改数据库相关信息

configdb:
  name: apollo-configdb
  # apolloconfigdb host
  host: "rm-prod-rds-addresss.mysql.rds.aliyuncs.com"
  port: 3306
  dbName: ProdApolloConfigDB
  # apolloconfigdb user name
  userName: "apollo"
  # apolloconfigdb password
  password: "my_apollo_db_passwd"
  connectionStringProperties: characterEncoding=utf8
  service:
    # whether to create a Service for this host or not
    enabled: true
    fullNameOverride: ""
    port: 3306
    type: ExternalName

configService:
  name: apollo-configservice
  fullNameOverride: ""
  replicaCount: 1
  containerPort: 8080
  image:
    repository: apolloconfig/apollo-configservice
    pullPolicy: IfNotPresent
  imagePullSecrets: []
  service:
    fullNameOverride: ""
    port: 8080
    targetPort: 8080
    type: ClusterIP
  liveness:
    initialDelaySeconds: 100
    periodSeconds: 10
  readiness:
    initialDelaySeconds: 30
    periodSeconds: 5
  config:
    # spring profiles to activate
    profiles: "github,kubernetes"
    # override apollo.config-service.url: config service url to be accessed by apollo-client
    configServiceUrlOverride: ""
    # override apollo.admin-service.url: admin service url to be accessed by apollo-portal
    adminServiceUrlOverride: ""
  # environment variables passed to the container, e.g. JAVA_OPTS
  env: {}
  strategy: {}
  resources: {}
  nodeSelector: {}
  tolerations: []
  affinity: {}

adminService:
  name: apollo-adminservice
  fullNameOverride: ""
  replicaCount: 1
  containerPort: 8090
  image:
    repository: apolloconfig/apollo-adminservice
    pullPolicy: IfNotPresent
  imagePullSecrets: []
  service:
    fullNameOverride: ""
    port: 8090
    targetPort: 8090
    type: ClusterIP
  liveness:
    initialDelaySeconds: 100
    periodSeconds: 10
  readiness:
    initialDelaySeconds: 30
    periodSeconds: 5
  config:
    # spring profiles to activate
    profiles: "github,kubernetes"
  # environment variables passed to the container, e.g. JAVA_OPTS
  env: {}
  strategy: {}
  resources: {}
  nodeSelector: {}
  tolerations: []
  affinity: {}

helm 部署

$ helm install apollo-service -f values.yaml -n ops apollo/apollo-service

$ helm list -n ops
NAME          	NAMESPACE	REVISION	UPDATED                                	STATUS  	CHART               APP VERSION
apollo-service	ops      	1       	2021-02-03 14:17:18.883545338 +0800 CST	deployed	apollo-service-0.1.21.7.2

注：部署过程中镜像拉取速度可能较慢

部署apollo-portal

cd /tmp/apollo
helm pull apollo/apollo-portal --untar
cd apollo-portal

修改values.yaml
注意
1.portal的svc需要一个nodeport，主要是方便内网slb暴露服务
2.config.metaServers是各个环境的config-server访问ip:port，这里dev和test的ip和port是slb的
3.配置环境config.envs

name: apollo-portal
fullNameOverride: ""
replicaCount: 1
containerPort: 8070
image:
  repository: apolloconfig/apollo-portal
  pullPolicy: IfNotPresent
imagePullSecrets: []
service:
  fullNameOverride: ""
  port: 8070
  targetPort: 8070
  type: NodePort
  sessionAffinity: ClientIP
ingress:
  enabled: false
  annotations: {}
  hosts:
    - host: ""
      paths: []
  tls: []
liveness:
  initialDelaySeconds: 100
  periodSeconds: 10
readiness:
  initialDelaySeconds: 30
  periodSeconds: 5
# environment variables passed to the container, e.g. JAVA_OPTS
env: {}
strategy: {}
resources: {}
nodeSelector: {}
tolerations: []
affinity: {}

config:
  # spring profiles to activate
  profiles: "github,auth"
  # specify the env names, e.g. dev,pro
  envs: "pro,dev,test"
  # specify the meta servers, e.g.
  # dev: http://apollo-configservice-dev:8080
  # pro: http://apollo-configservice:8080
  # metaServers: {}
  metaServers:
    pro: http://apollo-service-apollo-configservice.ops:8080
    dev: http://dev_slb_address:30002
    test: http://test_slb_address:30004
  # specify the context path, e.g. /apollo
  contextPath: ""
  # extra config files for apollo-portal, e.g. application-ldap.yml
  files: {}

portaldb:
  name: apollo-portaldb
  # apolloportaldb host
  host: rm-prod-rds-addresss.mysql.rds.aliyuncs.com
  port: 3306
  dbName: ApolloPortalDB
  # apolloportaldb user name
  userName: apollo
  # apolloportaldb password
  password: my_apollo_db_passwd
  connectionStringProperties: characterEncoding=utf8
  service:
    # whether to create a Service for this host or not
    enabled: true
    fullNameOverride: ""
    port: 3306
    type: ExternalName

helm部署

$ helm install apollo-portal -f values.yaml -n  ops apollo/apollo-portal

注：values.yaml配置的svc的nodeport为随机端口，用命令获取

kubectl get svc -n ops | grep apollo-portal

获取nodeport后，在slb上配置监听，将slb的8080端口转发到这个nodeport上
这时访问http://prod_slb_address:8080，则可以看到apollo-portal的界面
账号apollo 密码admin 后期使用注意修改

部署开发环境

helm repo add apollo http://ctripcorp.github.io/apollo/charts
cd /tmp/apollo/
helm pull apollo/apollo-service --untar
cd /tmp/apollo/apollo-service

ops@dev-jump:/tmp/apollo/apollo-service$ helm install apollo-service -f values.yaml -n ops apollo/apollo-service

修改values.yaml
注意：
1.修改数据库相关信息
2.config-server和admin-server的svc各自需要一个nodeport，yaml文件中未指定，k8s将随机分配，这里分别是30002和30001
3.dev、test环境和portal所在的生产环境无法通过内网互通，故config-server和admin-server通过node暴露服务在公网，portal才能连通
4.因注意点3，故需修改configService.config.configServiceUrlOverride和configService.config.adminServiceUrlOverride，参数详情见分布式部署指南

configdb:
  name: apollo-configdb
  # apolloconfigdb host
  host: "rm-dev-rds-addresss.mysql.rds.aliyuncs.com"
  port: 3306
  dbName: DevApolloConfigDB
  # apolloconfigdb user name
  userName: "apollo"
  # apolloconfigdb password
  password: "my_apollo_db_passwd"
  connectionStringProperties: characterEncoding=utf8
  service:
    # whether to create a Service for this host or not
    enabled: true
    fullNameOverride: ""
    port: 3306
    type: ExternalName

configService:
  name: apollo-configservice
  fullNameOverride: ""
  replicaCount: 1
  containerPort: 8080
  image:
    repository: apolloconfig/apollo-configservice
    pullPolicy: IfNotPresent
  imagePullSecrets: []
  service:
    fullNameOverride: ""
    port: 8080
    targetPort: 8080
    type: NodePort
  liveness:
    initialDelaySeconds: 100
    periodSeconds: 10
  readiness:
    initialDelaySeconds: 30
    periodSeconds: 5
  config:
    # spring profiles to activate
    profiles: "github,kubernetes"
    # override apollo.config-service.url: config service url to be accessed by apollo-client
    configServiceUrlOverride: "http://dev_slb_address:30002"
    # override apollo.admin-service.url: admin service url to be accessed by apollo-portal
    adminServiceUrlOverride: "http://dev_slb_address:30001"
  # environment variables passed to the container, e.g. JAVA_OPTS
  env: {}
  strategy: {}
  resources: {}
  nodeSelector: {}
  tolerations: []
  affinity: {}

adminService:
  name: apollo-adminservice
  fullNameOverride: ""
  replicaCount: 1
  containerPort: 8090
  image:
    repository: apolloconfig/apollo-adminservice
    pullPolicy: IfNotPresent
  imagePullSecrets: []
  service:
    fullNameOverride: ""
    port: 8090
    targetPort: 8090
    type: NodePort
  liveness:
    initialDelaySeconds: 100
    periodSeconds: 10
  readiness:
    initialDelaySeconds: 30
    periodSeconds: 5
  config:
    # spring profiles to activate
    profiles: "github,kubernetes"
  # environment variables passed to the container, e.g. JAVA_OPTS
  env: {}
  strategy: {}
  resources: {}
  nodeSelector: {}
  tolerations: []
  affinity: {}

config-server和admin-server的svc被随机分配nodeport，使用以下命令查看，本例分别是30002和30001

kubectl get svc -n ops | grep apollo

在slb上配置监听，将config-server和admin-server暴露在公网，这里用的slb前端端口与svc的nodeport一致，注意加白名单访问控制

部署测试环境

helm repo add apollo http://ctripcorp.github.io/apollo/charts
cd /tmp/apollo/
helm pull apollo/apollo-service --untar
cd /tmp/apollo/apollo-service

类似开发环境，修改values.yaml，需要注意的点和开发环境一样

configdb:
  name: apollo-configdb
  # apolloconfigdb host
  host: "rm-test-rds-addresss.mysql.rds.aliyuncs.com"
  port: 3306
  dbName: TestBetaApolloConfigDB
  # apolloconfigdb user name
  userName: "apollo"
  # apolloconfigdb password
  password: "my_apollo_db_passwd"
  connectionStringProperties: characterEncoding=utf8
  service:
    # whether to create a Service for this host or not
    enabled: true
    fullNameOverride: ""
    port: 3306
    type: ExternalName

configService:
  name: apollo-configservice
  fullNameOverride: ""
  replicaCount: 1
  containerPort: 8080
  image:
    repository: apolloconfig/apollo-configservice
    pullPolicy: IfNotPresent
  imagePullSecrets: []
  service:
    fullNameOverride: ""
    port: 8080
    targetPort: 8080
    type: NodePort
  liveness:
    initialDelaySeconds: 100
    periodSeconds: 10
  readiness:
    initialDelaySeconds: 30
    periodSeconds: 5
  config:
    # spring profiles to activate
    profiles: "github,kubernetes"
    # override apollo.config-service.url: config service url to be accessed by apollo-client
    configServiceUrlOverride: "http://test_slb_address:30004"
    # override apollo.admin-service.url: admin service url to be accessed by apollo-portal
    adminServiceUrlOverride: "http://test_slb_address:30003"
  # environment variables passed to the container, e.g. JAVA_OPTS
  env: {}
  strategy: {}
  resources: {}
  nodeSelector: {}
  tolerations: []
  affinity: {}

adminService:
  name: apollo-adminservice
  fullNameOverride: ""
  replicaCount: 1
  containerPort: 8090
  image:
    repository: apolloconfig/apollo-adminservice
    pullPolicy: IfNotPresent
  imagePullSecrets: []
  service:
    fullNameOverride: ""
    port: 8090
    targetPort: 8090
    type: NodePort
  liveness:
    initialDelaySeconds: 100
    periodSeconds: 10
  readiness:
    initialDelaySeconds: 30
    periodSeconds: 5
  config:
    # spring profiles to activate
    profiles: "github,kubernetes"
  # environment variables passed to the container, e.g. JAVA_OPTS
  env: {}
  strategy: {}
  resources: {}
  nodeSelector: {}
  tolerations: []
  affinity: {}

helm部署之后，也和开发环境一样配置slb监听

helm install apollo-service -f values.yaml -n ops apollo/apollo-service

确认部署

1.访问apollo页面，使用apollo用户登录
2.在界面右上角管理员工具中选择"系统信息"
3.在弹出的系统信息页面中，可以看到在部署portal时定义好的环境
4.分别点击各个环境中的config-server和admin-server的"check"按钮，无报错则部署成功

苏某想吃鱼
关注
专栏目录
helm部署应用到k8s集群（helm+k8s）-详细文档
06-21
helm 部署应用到 k8s 集群详细文档 本文档详细介绍了使用 Helm 部署应用到 Kubernetes 集群的过程。Helm 是一个 Kubernetes 的包管理工具，能够方便地将之前打包好的 YAML 文件部署到 Kubernetes 上。 Helm 有三个...
k8s(kubernetes)、helm、kubectl多环境部署apollo
YFSREAD的博客
03-15 1698
1.数据库使用rds【稳定】【kubernetes内搭建数据库不稳定】 2.初始化数据库 【fat环境】 [ 配置fat环境values.yaml] configdb: name: apollo-configdb # apolloconfigdb host【数据库地址rds的type为ExternalName】 #此处要注意 rds 地址 host: rm-xxx.mysql.rds.aliyuncs.com #此处要注意 port: 3306 #此处要注意 ...
Apollo配置中心部署
lishuailing123的博客
09-25 1043
Apollo（阿波罗）是携程框架部门研发的开源配置管理中心，能够集中化管理应用不同环境、不同集群的配置，配置修改后能够实时推送到应用端，并且具备规范的权限、流程治理等特性。
【Kubernetes】k8s集群之包管理器Helm
最新发布
F12138X的博客
08-16 1086
时间是由分秒积成的，善于利用零星时间的人，才会做出更大的成绩来
Apollo 配置中心的部署与使用经验
我不懂，可我不傻
07-25 1638
Apollo（阿波罗）是携程开源的分布式配置管理中心。本文主要介绍其基于 Docker-Compose 的部署安装和一些使用的经验。
k8s部署Apollo
summer_wqf的博客
05-07 2036
k8s集群内安装MySQL5.7并使数据持久化 1、搭建nfs存储 2、创建PV、PVC 3、确认pv及pvc的状态 4、创建MySQL 5、创建Apollo 6、访问Apollo 7、手动删除MySQL容器，验证sql数据是否还在以及Apollo服务能否正常运行 1.搭建nfs存储 [root@master ~]# yum -y install nfs-utils [root@master ~]# systemctl enable rpcbind [root@master ~]# mkdir -p /n
K8S部署Apollo配置中心
南宫乘风-Linux运维-虚拟化容器-Python编程 ownit.top
12-29 2217
Apollo（阿波罗）是携程框架部门研发的分布式配置中心，能够集中化管理应用不同环境、不同集群的配置，配置修改后能够实时推送到应用端，并且具备规范的权限、流程治理等特性，适用于微服务配置管理场景。服务端基于Spring Boot和Spring Cloud开发，打包后可以直接运行，不需要额外安装Tomcat等应用容器。Java客户端不依赖任何框架，能够运行于所有Java运行时环境，同时对Spring/Spring Boot环境也有较好的支持。
k8s安装部署apollo配置中心
韩帅平的博客
04-20 7678
kubernetes apollo
多 K8s 集群 GitOps 实践- yiheng - 10.16 (1).zip
06-20
在多K8s集群环境下，这种模式能够帮助团队在多个集群之间保持一致性，同时简化跨环境的部署和管理。 首先，我们需要一个Git仓库来存储集群配置，比如使用GitHub或GitLab。这个仓库包含YAML文件，这些文件定义了...
k8s下部署rabbitmq集群部署方式
07-26
包含k8s下部署rabbitmq集群部署方式的说明，有pv.yaml, svc.yaml, statefulset.yaml
k8s安装教程和部署的详细说明
01-24
本文档采用k8s v1.10.0二进制的集群部署方式，主要更改 使用kube-router 代理kube-proxy,使用ingress-nginx做边缘负载,使用haproxy+heartbeat实现高可用 本文档持续更新，后续将继续深入了解prometheus，helm等组件...
k8s-helm-资料笔记-v3版部署k8s集群-超详细，超全面(带文档和相关软件包)
06-22
本资料笔记将详细介绍如何使用Helm v3来部署Kubernetes集群，提供超详细、超全面的指导，包括相关文档和软件包，帮助你深入理解和实践K8s-Helm的集成。 首先，了解Kubernetes（K8s）是至关重要的。K8s是一个开源...
用Helm部署Kubernetes应用，支持多环境部署与版本回滚
南瓜慢说
07-09 1167
1 前言 Helm是优秀的基于Kubernetes的包管理器。利用Helm，可以快速安装常用的Kubernetes应用，可以针对同一个应用快速部署多套环境，还可以实现运维人员与开发人员的职责分离。现在让我们安装并体现一下，如何通过Helm安装MongoDB吧。 Kubernetes环境搭建可参考：Mac上使用Docker Desktop启动Kubernetes，踩坑后终于搞掂 2 Helm相关概念 包管理是一种复用理念，Helm与Kubernetes的关系，就像是yum与CentOS，pip于python，
五分钟带你玩转apollo（八）使用k8s部署，吐血亲验
2301_76278775的博客
03-31 857
小编也是很有感触，如果一直都是在中小公司，没有接触过大型的互联网架构设计的话，只靠自己看书去提升可能一辈子都很难达到高级架构师的技术和认知高度。向厉害的人去学习是最有效减少时间摸索、精力浪费的方式。我们选择的这个行业就一直要持续的学习，又很吃青春饭。虽然大家可能经常见到说程序员年薪几十万，但这样的人毕竟不是大部份，要么是有名校光环，要么是在阿里华为这样的大企业。年龄一大，更有可能被裁。送给每一位想学习Java小伙伴，用来提升自己。
k8s部署apollo
Yuan_xii的博客
03-10 1912
1. 安装helm gitthub下载对应操作系统及处理器架构的helm tar -zxvf helm-v3.8.1-linux-amd64.tar.gz cd linux-adm64 chmod +x helm cp helm /usr/local/bin/helm 2.helm部署k8s 2.1.前置条件 (1)提前准备好数据库 (2) 导入 apollo-portal.sql apollo-configdb.sql 2.2. 部署apollo-config,apollo-admin # 记得修改d
php整合apollo配置中心——k8s从入门到高并发系列教程（十六）
fanghailiang2016的博客
10-09 1145
ApolloClient类负责和apollo上述两个接口打交道，把拉取的apollo配置信息写到本地文件，用到了并发curl请求特性。Config类对 illuminate/config 基础上，把apollo的配置信息整合到自己管理的配置数组中，进行读取和设置。helpers.php封装一个小助手函数来读取apollo配置中心的内容（也有可能是覆盖apollo的环境变量）执行完后可以在控制台看到如下输出，可以看到config service地址是。打开如下地址，可以看到apollo管理界面。
Apollo安装以及K8S中部署Apollo
jacksonary的博客
04-12 9399
1. 基本环境 OS：CentOS7； JDK版本1.8+（java -version）； MySQL5.6.5+（SHOW VARIABLES WHERE Variable_name = 'version';）； Apollo：服务端1.8+，客户端1.7+； 2. Apollo 2.1 必要模块  Apollo中的主要模块如下： Config Service 提供配置获取、配置更新推送的...
k8s 部署 apollo 配置中心
peiyinshi2330的博客
05-25 827
方便线上k8s部署pod 的时候 自动从apollo获取最新的配置 架构图 流程图 部署数据库 1.1 四台mysql部署 mkdir -p /data/apollo/mysql-apollo-prd /data/apollo/mysql-apollo-test /data/apollo/mysql-apollo-dev /data/apollo/mysql-apollo-portal // nfs服务端创建文件夹 kubectl apply -f mysql-apollo-dev.yml # 开发 db
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值