使用Rancher在Kubernetes上部署EMQ X集群

最新推荐文章于 2024-07-15 09:53:28 发布
最新推荐文章于 2024-07-15 09:53:28 发布
阅读量592 收藏 1
点赞数
原文链接：https://my.oschina.net/u/4174826/blog/3082951
版权

本文描述如何通过Rancher2.0部署kubernetes集群，并将EMQ X部署到kubernetes集群上

实验环境：

  • 公有云环境：AWS EC2
  • 操作系统：ubuntu 16.04
  • Docker version：18.09.0

通过Rancher部署kubernetes集群

Rancher的安装以及部署kubernetes集群的步骤推荐直接按照快速入门执行。

创建Rancher Api密钥

EMQ X通过访问kube-apiserver来实现自动集群功能，在Rancher中，Rancher对kube-apiserver做了一层代理，在访问kube-apiserver的时候必须提供用于向Rancher进行身份验证的API密钥。参考用户手册创建并保存API Key。本实验中创建的Access Key为：token-dksbl，Secret Key为：pshhhf5cp8d5v5x7bzjdm82qfrwgx7f2bzksnr748j42xmbvvklbdz，组合成的Token为：token-dksbl:pshhhf5cp8d5v5x7bzjdm82qfrwgx7f2bzksnr748j42xmbvvklbdz

下载并配置kubectl

  1. 下载并安装kubectl
  2. 进入Rancher集群页面，点击Kubeconfig文件。

将kubeconfig文件保存到~/.kube/config

执行kubectl cluster-info验证配置是否成功

$ kubectl cluster-infoKubernetes master is running at https://13.125.244.172/k8s/clusters/c-vvgjq
KubeDNS is running at https://13.125.244.172/k8s/clusters/c-vvgjq/api/v1/namespaces/kube-system/services/kube-dns:dns/proxy

To further debug and diagnose cluster problems, use 'kubectl cluster-info dump'.

访问kube-apiserver

EMQ X通过访问kube-apiserver来实现自动集群，kube-apiserver的地址可以查看~/.ssh/config文件或者执行kubectl cluster-info获取，本实验中kube-apiserver的地址为：https://13.125.244.172/k8s/clusters/c-vvgjq。

直接访问kube-apiserver，可以看到会报错需要认证。

$ curl -k https://13.125.244.172/k8s/clusters/c-vvgjq{"type":"error","status":"401","message":"must authenticate"}

在头部加上Authorization认证则可以正常访问

$ curl -k -H 'Authorization: Bearer token-dksbl:pshhhf5cp8d5v5x7bzjdm82qfrwgx7f2bzksnr748j42xmbvvklbdz' https://13.125.244.172/k8s/clusters/c-vvgjq

编辑emqx.yaml

在Kubernetes 上安装 EMQ X 系列文章之二 ：EMQ X 自动集群一文中分享了EMQ X部署kubernetes集群的yaml文件如下，在Rancher上部署EMQ X集群的话需要稍加改动。

$cat emqx.yaml

apiVersion: v1
kind: Service
metadata:
  name: emqx
spec:
  ports:
  - port: 32333
    nodePort: 32333
    targetPort:  emqx-dashboard
    protocol: TCP
  selector:
    app: emqx
  type: NodePort

---
apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  name: emqx
  labels:
        app: emqx
spec:
  replicas: 2
  template:
    metadata:
      labels:
        app: emqx
    spec:
      containers:
      - name: emqx
        image: emqx/emqx:latest
        ports:
        - name: emqx-dashboard
          containerPort: 18083
        env:
        - name: EMQX_CLUSTER__DISCOVERY
          value: k8s
        - name: EMQX_NAME
          value: emqx
        - name: EMQX_CLUSTER__K8S__APISERVER
          value: http://172.31.19.161:8080
        - name: EMQX_CLUSTER__K8S__NAMESPACE
          value: default
        - name: EMQX_CLUSTER__K8S__SERVICE_NAME
          value: emqx
        - name: EMQX_CLUSTER__K8S__ADDRESS_TYPE
          value: ip
        - name: EMQX_CLUSTER__K8S__APP_NAME
          value: emqx
        tty: true

EMQ X可以读取/var/run/secrets/kubernetes.io/serviceaccount/token文件中的内容组合Authorization认证访问kube-apiserver，所以只需要把Rancher的API Token通过Secret挂载到容器中就可以了。

Secret解决了密码、token、密钥等敏感数据的配置问题，而不需要把这些敏感数据暴露到镜像或者Pod Spec中。Secret可以以Volume或者环境变量的方式使用。

Secret有三种类型：

  • Service Account ：用来访问Kubernetes API，由Kubernetes自动创建，并且会自动挂载到Pod的/run/secrets/kubernetes.io/serviceaccount目录中；
  • Opaque ：base64编码格式的Secret，用来存储密码、密钥等；
  • kubernetes.io/dockerconfigjson ：用来存储私有docker registry的认证信息。

首先对API Token做base64编码

$ echo -n token-dksbl:pshhhf5cp8d5v5x7bzjdm82qfrwgx7f2bzksnr748j42xmbvvklbdz | base64 -w 0dG9rZW4tZGtzYmw6cHNoaGhmNWNwOGQ1djV4N2J6amRtODJxZnJ3Z3g3ZjJiemtzbnI3NDhqNDJ4bWJ2dmtsYmR6

在yaml文件中创建Secret

$vim emqx.yamlapiVersion: v1
kind: Secret
metadata:
  name: emqx-secret
type: Opaque
data:
  token: dG9rZW4tcGI2MjU6eDZ2eGJ0Y2NmdG1waGpseHR3NGNjdGN2d2txdzk5aDJzYmhxNHFtaDh4c2ZnbXd6dzJ0d2Rw
  
---
......

修改Deployment，将环境变量中的EMQX_CLUSTER__K8S__APISERVER改为Rancher的Kube-apiserver的地址，增加volumeMounts

$vim emqx.yaml......
apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  name: emqx
  labels:
        app: emqx
spec:
  replicas: 2
  template:
    metadata:
      labels:
        app: emqx
    spec:
      volumes:
      - name: emqx-secret
        secret:
           secretName: emqx-secret
      containers:
      - name: emqx
        image: emqx/emqx:latest
        ports:
        - name: emqx-dashboard
          containerPort: 18083
        - name: emqx-http
          containerPort: 8083
        - name: emqx-mqtt
          containerPort: 1883
        env:
        - name: EMQX_CLUSTER__DISCOVERY
          value: k8s
        - name: EMQX_NAME
          value: emqx
        - name: EMQX_CLUSTER__K8S__APISERVER
          value: https://13.125.244.172/k8s/clusters/c-vvgjq
        - name: EMQX_CLUSTER__K8S__NAMESPACE
          value: default
        - name: EMQX_CLUSTER__K8S__SERVICE_NAME
          value: emqx
        - name: EMQX_CLUSTER__K8S__ADDRESS_TYPE
          value: ip
        - name: EMQX_CLUSTER__K8S__APP_NAME
          value: emqx
        tty: true
        volumeMounts:
          - name: emqx-secret
            mountPath: "/var/run/secrets/kubernetes.io/serviceaccount"
            readOnly: true

部署EMQ X

查看修改后的emqx.yaml

$cat emqx.yamlapiVersion: v1
kind: Secret
metadata:
  name: emqx-secret
type: Opaque
data:
  token: dG9rZW4tcGI2MjU6eDZ2eGJ0Y2NmdG1waGpseHR3NGNjdGN2d2txdzk5aDJzYmhxNHFtaDh4c2ZnbXd6dzJ0d2Rw

---
apiVersion: v1
kind: Service
metadata:
  name: emqx
spec:
  ports:
  - port: 32333
    nodePort: 32333
    targetPort:  emqx-dashboard
    protocol: TCP
  selector:
    app: emqx
  type: NodePort

---
apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  name: emqx
  labels:
        app: emqx
spec:
  replicas: 2
  template:
    metadata:
      labels:
        app: emqx
    spec:
      volumes:
      - name: emqx-secret
        secret:
           secretName: emqx-secret
      containers:
      - name: emqx
        image: emqx/emqx:latest
        ports:
        - name: emqx-dashboard
          containerPort: 18083
        - name: emqx-http
          containerPort: 8083
        - name: emqx-mqtt
          containerPort: 1883
        env:
        - name: EMQX_CLUSTER__DISCOVERY
          value: k8s
        - name: EMQX_NAME
          value: emqx
        - name: EMQX_CLUSTER__K8S__APISERVER
          value: https://13.125.244.172/k8s/clusters/c-vvgjq
        - name: EMQX_CLUSTER__K8S__NAMESPACE
          value: default
        - name: EMQX_CLUSTER__K8S__SERVICE_NAME
          value: emqx
        - name: EMQX_CLUSTER__K8S__ADDRESS_TYPE
          value: ip
        - name: EMQX_CLUSTER__K8S__APP_NAME
          value: emqx
        tty: true
        volumeMounts:
          - name: emqx-secret
            mountPath: "/var/run/secrets/kubernetes.io/serviceaccount"
            readOnly: true

部署EMQ X

$ kubectl create -f emqx.yamlsecret/emqx-secret created
service/emqx created
deployment.extensions/emqx created

查看状态

$ kubectl get podsNAME                       READY   STATUS    RESTARTS   AGE
emqx-67b5fcf4d-gwzfn       1/1     Running   0          36s
emqx-67b5fcf4d-rb7m6       1/1     Running   0          36s

集群成功

$ kubectl exec emqx-67b5fcf4d-gwzfn /opt/emqx/bin/emqx_ctl cluster statusCluster status: [{running_nodes,['emqx@10.42.1.24','emqx@10.42.2.19']}]

使用Rancher Dashboard部署EMQ X（可选）

删除刚刚部署的EMQ X

$ kubectl delete -f emqx.yamlsecret "emqx-secret" deleted
service "emqx" deleted
deployment.extensions "emqx" deleted

进入Rancher集群工作负载页面，点击导入YAML

在导入页面将emqx.yaml文件的内容复制进去

点击导入，等待导入成功。

更多信息请访问我们的官网 emqx.io，或关注我们的开源项目 github.com/emqx/emqx ，详细文档请访问 官方文档。

转载于:https://my.oschina.net/u/4174826/blog/3082951

chengyuchan9575
关注
EMQ X 集群部署
weixin_42023748的博客
07-28 1447
EMQ X消息服务器集群基于Erlang/OTPMQTT客户端订阅主题时，所在节点订阅成功后广播通知其他节点：某个主题(Topic)被本节点订阅。MQTT客户端发布消息时，所在节点会根据消息主题(Topic)，检索订阅并路由消息到相关节点。
通过rancher快速部署Kubernetes集群
山东梅长苏
08-27 1650
概述 What’s Rancher？ Rancher是一套容器管理平台，它可以帮助组织在生产环境中轻松快捷的部署和管理容器。 Rancher可以轻松地管理各种环境的Kubernetes，满足IT需求并为DevOps团队提供支持。 Kubernetes不仅已经成为的容器编排标准，它也正在迅速成为各类云和虚拟化厂商提供的标准基础架构。Rancher用户可以选择使用Rancher Kubernetes ...
EMQX:基于Rancher 搭建集群
qq_36393991的博客
08-24 483
EMQX:基于Rancher 搭建集群前提相关资料集群搭建配置集群链接文件查看apiserver配置 emqx.yaml配置rbac.yaml执行步骤 前提 1.需要有一个高可用的rancher集群 2.其中一台主机需要kubectl 相关资料 1.EMQX官方集群部署 https://www.emqx.io/cn/blog/emqx-mqtt-broker-k8s-cluster 2.其他博客 https://www.jianshu.com/p/8c01e37819aa https://my.oschin
在树莓派上通过K3S部署EMQ X edge集群
chengyuchan9575的博客
08-02 548
环境 k3s需要raspberrypi可以正常访问google，如果没有条件的话推荐在AWS上尝试部署。 Hostname IP 角色 硬件 raspberrypi 192.168.1.99 server 树莓派3 emqx1 192.168.1.100 agent 树莓派3...
通过 NGINX Ingress Controller 访问 Kubernetes 集群中的 EMQ X
emqx_broker的博客
12-11 618
Ingress 介绍 Ingress 公开了从集群外部到集群内 服务 的 HTTP 和 HTTPS 路由。 流量路由由 Ingress 资源上定义的规则控制。官网的一个简单示例如下： Ingress 为服务提供了供外部访问的 URL，负载均衡流量，TLS/SSL 终止的能力。Ingress 可以简单理解为服务的服务，通过独立的 Ingress 对象来指定请求转发的规则，将请求路由到对应的服务中。 为了让 Ingress 资源工作，集群必须有一个正在运行的 Ingress 控制器。 NGINX Ingres
使用Rancher在Kubernetes上进行微服务部署
02-25
大多数人在生产环境中运行Docker，是把它作为构建和移动部署配置的一种方式。然而，他们的部署模型要么...在Kubernetes官方文档中可以找到如何在不同环境下创建Kubernetes集群，本文中我主要讲解使用Rancher容器管理平
使用Rancher搭建Kubernetes集群
CycloneKid的博客
12-22 1290
Kubernetes是一个由Google退出的非常优秀的容器管理平台，但是它复杂的搭建过程让很多人望而生畏。由于搭建过程太复杂，而且容易出错，很多刚开始学习Kubernetes的新手常常需要花几天时间才能搭建好一个能够正常使用的Kubernetes集群，非常浪费时间。 Rancher是一个企业级Kubernetes集群管理平台，它有完善的Kubernetes集群管理功能和精美的交互界面，同时它还提...
rancheros-k8s-vagrant:使用 VagrantVirtualBox 在 RancherOS 上部署 Kubernetes 集群
06-09
使用 Vagrant/VirtualBox 在 RancherOS 上运行本地 Kubernetes 集群。 重要的！ 每次重新创建集群时，请运行以下命令： ./scripts/etcd-discovery 它生成提供给集群节点的.etcd-discovery-url文件。 警告：如果...
K8S - 集群中部署EMQX
迦南的专栏
02-11 2251
1、Add helm repository $ helm repo add emqx https://repos.emqx.io/charts $ helm repo update 2、Check EMQ X helm search repo emqx NAME CHART VERSION APP VERSION DESCRIPTION emqx/emqx v4.0.0 v4.0.0 A Helm chart for EMQ X emqx/
Docker中Dockerfile之容器中运行MyEclipse搭建的JavaWeb项目
01-10
这篇文章将讲述如何将上一篇文章中的Javaweb项目制作成Docker的镜像。小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧 应用程序在Docker容器中运行和在物理机运行的原理是一样的，所以我们部署这个Javaweb项目到Docker中的步骤应该如下： 服务器支持（这里选择Centos7） 安装Java环境 安装Tomcat环境 将Tomcat根目录下的webapps/ROOT目录下的所有文件（夹）删除 将自己开发的web项目的WebRoot目录下的所有文件（夹）复制到Tomcat的webapps/ROOT下 启动Tomcat服务 步骤已经
解密HTTP错误码401 Unauthorized：探索身份验证的奥秘
热门推荐
博客
08-15 1万+
HTTP身份验证是Web应用程序中常用的一种安全机制，用于验证用户的身份并控制对资源的访问。它通过在客户端和服务器之间传递身份验证凭证来完成身份验证过程。摘要身份验证是一种更安全的身份验证方法。它使用摘要算法对用户名、密码和其他参数进行加密，以确保身份验证凭证的安全性。HTTP错误码401 Unauthorized是一种常见的错误码，表示客户端请求未经身份验证或身份验证失败。
详解K8S与Rancher 2.0内的身份认证与授权
weixin_33967071的博客
05-16 231
2019独角兽企业重金招聘Python工程师标准>>> ...
【修改源码】hadoop 3.3.1 failed with status code 401 Response message: Authentication required
hiliang521的博客
09-19 1331
本文主要通过修改源码解决hadoop内部通讯鉴权的问题。
K8S 上部署 Emqx
最新发布
小强签名设计 的博客
07-15 638
访问 Kubernetes 的任意一台节点 IP 的 32717 端口，输入默认用户名：admin，默认密码：public，登陆 EMQX dashboard。可以看到 my-emqx 的 18083 端口对应的宿主机的 32717 端口。（NodePort 在每次部署的时候都会变化，以实际部署时为准。启动 EMQX 集群，设置。
k8s 安装emqttx
u013595395的博客
03-09 1089
一、官方文档、docker安装 https://docs.emqx.cn/broker/latest/getting-started/install.html#%E9%80%9A%E8%BF%87-docker-%E8%BF%90%E8%A1%8C-%E5%8C%85%E5%90%AB%E7%AE%80%E5%8D%95%E7%9A%84-docker-compose-%E9%9B%86%E7%BE%A4 二、原始k8s安装 （1）创建命名空间 kubectl create namesp..
搭建docker和rancher的挖坑、踩坑以及填坑
weixin_30587927的博客
12-11 3533
服务器环境 服务器版本：CentOS Linux release 7.2.1511 (Core) 内核版本：3.10.0-327.el7.x86_64 1、搭建docker （1）编辑/etc/sysctl.conf，添加如下内容 net.bridge.bridge-nf-call-ip6tables = 1 net.bridge.bridge-nf-call-iptables =...
k8s 搭建 mqtt 集群
qq_34156173的博客
03-23 2276
标题 k8s 搭建 emqx mqtt EMQ X 是基于 Erlang/OTP 平台开发的开源物联网 MQTT 消息服务器，重点是专业支持MQTT协议，（MQTT 是轻量的 (Lightweight)、发布订阅模式 (PubSub) 的物联网消息协议），在物联网领域非常适合。 创建emqx-comfigmap.yaml kubectl create -f emqx-comfigmap.yaml apiVersion: v1 kind: ConfigMap metadata: name: emqx-
开发中遇到的：401 Unauthorized
yuanlanjun
07-16 4693
今天访问http://localhost:8080/的时候都要求输入XDB的用户和口令，显示 "401 Unauthorized"错误。 上网查了下,原因是jboss或tomcat的8080端口号与XDB数据库选项的端口冲突， 解决方法：在安装jboss或Tomcat时设置其端口号为8081或其他，也可以在安装后找到conf目录下的server.xml文件，修改其端口号 or...
Rancher助力：在Kubernetes上轻松部署微服务
"这篇文章主要介绍了如何使用Rancher在Kubernetes上进行微服务部署，强调了Kubernetes作为成熟容器编排系统的地位，并提供了通过Rancher简化Kubernetes集群的搭建和管理的方法。" 在现代IT环境中，微服务架构已经...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值