KubeEdge环境搭建-实现原理-官方计数器示例运行成功_Counter Demo

运行KubeEdge官方示例_Counter Demo 计数器
KubeEdge Counter Demo 计数器是一个伪设备，用户无需任何额外的物理设备即可运行此演示。计数器在边缘侧运行，用户可以从云侧在 Web 中对其进行控制，也可以从云侧在 Web 中获得计数器值,原理图如下:

计数器架构图

kubeEdge架构图

参考链接：https://blog.csdn.net/qingdao666666/article/details/104539002

kubeEdge架构解释图

kubeEdge环境部署

先安装好kubeedge

Linux安装kubeedge

kubeedge边缘节点安装

⚠️ 注意：1，这里k8s最好是安装1.19.2以上版本，kubeedge安装1.6.1以上版本,会相对稳定一点
2，确保kubernetes apiserver开启了以下配置：

 --insecuret-port=8080
 --insecure-bind-address=0.0.0.0

可以通过修改/etc/kubernetes/manifests/kube-apiserver.yaml文件，并重启k8s-apiserver组件的pod来进行更改。

在云端安装好 go1.15.6 linux/amd64 以上版本，配置好环境变量

#(自行百度，教程简单)
在 etc/profile 文件配置：
export PATH=$PATH:/usr/local/go/bin

go version 查看版本

在k8s-master 上执行,查看节点

#在k8s-master 上执行,查看节点
kubectl get node

NAME         STATUS   ROLES        AGE   VERSION
k8s-master   Ready    master       34h   v1.19.2
k8s-node-1   Ready    agent,edge   79m   v1.19.3-kubeedge-v1.5.0

云端操作 在k8s-master 上执行

#下载示例代码
git clone https://github.com/kubeedge/examples.git $GOPATH/src/github.com/kubeedge/examples

⚠️ **亲测官网目前是最新版本，可以下载zip上传到服务器使用**
windows 可使用rz 和unzip 上传和解压
yum install -y lrzsz
yum install -y unzip zip

mac 安装unzip 命令 sudo apt install unzip
———————————————————————————————————————————————————————————————

#使用官方的示例仓库github会比较慢，这里可以使用《beyond阿亮》的加速仓库
git clone https://gitee.com/iot-kubeedge/kubeedge-examples.git $GOPATH/src/github.com/kubeedge/examples



1，#创建 device model
cd $GOPATH/src/github.com/kubeedge/examples/kubeedge-counter-demo/crds

#创建model
kubectl create -f kubeedge-counter-model.yaml

# 备注：如果报已创建可以用下面命令删除（其他类似文件照仿）：
# kubectl delete -f kubeedge-counter-model.yaml



2，#创建device
cd $GOPATH/src/github.com/kubeedge/examples/kubeedge-counter-demo/crds
#根据你的实际情况修改matchExpressions：
vim kubeedge-counter-instance.yaml
#主要修改的地方
- key: 'kubernetes.io/hostname'
  values:
    - k8s-node-1 #这里是节点名称，kubectl get node 命令查看边缘节点名
#注意：这里的节点名要配置对，不然到后边缘节点查看容器日志是看不到的

#运行yaml
kubectl create -f kubeedge-counter-instance.yaml



3，#部署云端应用
#云端应用web-controller-app用来控制边缘端的pi-counter-app应用，该程序默认监听的端口号为80，此处修改为8089
cd $GOPATH/src/github.com/kubeedge/examples/kubeedge-counter-demo/web-controller-app
vim main.go
beego.Run(":8089")

#构建镜像
make all
make docker



4，#部署web-controller-app
cd $GOPATH/src/github.com/kubeedge/examples/kubeedge-counter-demo/crds
kubectl apply -f kubeedge-web-controller-app.yaml


5，#部署边缘端应用
#边缘端的pi-counter-app应用受云端应用控制，主要与mqtt服务器通信，进行简单的计数功能。
#修改代码与构建镜像
#需要将Makefile中的GOARCH修改为amd64才能运行该容器。默认是arm架构的
cd $GOPATH/src/github.com/kubeedge/examples/kubeedge-counter-demo/counter-mapper
vim Makefile
GOARCH=amd64 go build -o pi-counter-app main.go

#构建镜像
make all
make docker



6，#部署Pi Counter App
cd $GOPATH/src/github.com/kubeedge/examples/kubeedge-counter-demo/crds
#注意，如果下面打包镜像走方式二，这里先不执行这条
kubectl apply -f kubeedge-pi-counter-app.yaml

#说明：为了防止Pod的部署卡在`ContainerCreating`，这里直接通过docker save、scp和docker load命令将镜像发布到边缘端
#因为边缘端没有这个镜像,只能手动弄过去,或者先上传到私有镜像仓库, 边缘端配置私有仓库地址,就可以直接从私有仓库下载

#方式一、这里就手动弄到边缘端
docker save -o kubeedge-pi-counter.tar kubeedge/kubeedge-pi-counter:v1.0.0

#传到边缘端，在边端根目录下创建data文件夹，有就不管（mkdir data）
scp kubeedge-pi-counter.tar root@172.16.72.142:/data/
#在边缘端执行
docker load -i kubeedge-pi-counter.tar

#在边缘端查看容器启动日志,有没有报错
docker logs -f counter-container-id
docker logs -f 8e2359446752

#方式二、上传到私有镜像仓库
cd $GOPATH/src/github.com/kubeedge/examples/kubeedge-counter-demo/counter-mapper
##先打包镜像，执行，注意命令后面有个点,1498134333为docker hub账号
docker build -t  1498134333/kubeedge-pi-counter:v1.0.0 .

#登陆docker hub 账号14981343333，输入密码
docker login --username 14981343333

#上传共有库或者在生产环境可以搭自己的私有库
docker push   14981343333/kubeedge-pi-counter:v1.0.0

#编辑kubeedge-pi-counter-app.yaml 中的镜像路径
 image: 14981343333/kubeedge-pi-counter:v1.0.0
 
#再发布程序，如果上面发布过了，先删除，重新发
 kubectl apply -f kubeedge-pi-counter-app.yaml

#在边缘端查看容器启动日志,有没有报错
docker logs -f counter-container-id
docker logs -f 8e2359446752

体验demo

KubeEdge Demo的云端部分和边缘端的部分都已经部署完毕

kubectl get pods -o wide
NAME                                    READY   STATUS    RESTARTS   AGE   IP            NODE           NOMINATED NODE   READINESS GATES
kubeedge-counter-app-6984dcb4dd-jz5nh   1/1     Running   0          32m   172.16.72.143   k8s-master   <none>           <none>
kubeedge-pi-counter-784d57c5d4-27v5g    1/1     Running   0          30m   <none>        k8s-node-1        <none>           <none>

浏览器访问: http://172.16.72.143:8089/

在web页面上选择ON，并点击Execute，可以在edge边缘节点上通过以下命令查看执行结果
docker logs -f counter-container-id
docker logs -f 8e2359446752

注意⚠️： 此处如果在边缘节点上查看日志没有，那就有以下几种可能。
1，kubeedge-counter-instance.yaml 文件中的边缘节点名配置错误
2，边缘节点的kubeedge-pi-counter.tar 文件 load 完，云端未apply kubeedge-pi-counter-app.yaml

可能遇到的一些情况：

1. kubeedge 版本太低，报错资源找不到，是devices.kubeedge.io/v1alpha2 这个包缺失了，可以通过
   查看当前Kubernetes所有Api版本：kubectl api-versions 命令查看，如果没有那就需要安装高版本的了。
   
   2，当云端的架构和边端树莓派的架构不一致时，可能导致云端构建的镜像，边端无法使用，这时候可以通过安装docker的bulidx来构建镜像，
   ⚠️安装需要在contos 内核4.0以上才能安装。

#安装docker buildx

#1,开启 buildx 
export DOCKER_CLI_EXPERIMENTAL=enabled

#2,检查版本来验证: 
docker buildx versiongithub.com/docker/buildx v0.3.1-tp-docker 6db68d029599c6710a32aa7adcba8e5a344795a7

#3,开启 binfmt_misc 来运行非本地架构 Docker 镜像
docker run --rm --privileged docker/binfmt:66f9012c56a8316f9244ffd7622d7c21c1f6f28d

#4,通过检查 QEMU 处理程序来验证 binfmt_misc 设置是否正确：
ls -al /proc/sys/fs/binfmt_misc/

#5,使用 buildx 来构建一个支持 arm、arm64 和 amd64 架构的多架构镜像，并一次性推送到 Docker Hub：
#需要先登陆docker hub 再执行
#登陆docker hub 账号14981343333，输入密码
docker login --username 14981343333

#执行构建推送命令,如果执行失败，再执行一遍
# export DOCKER_CLI_EXPERIMENTAL=enabled

docker buildx build -t 1498134333/kubeedge-pi-counter-app --platform=linux/arm,linux/arm64,linux/amd64  .  --push

⚠️下图是运行ls -al /proc/sys/fs/binfmt_misc/ 看到的架构版本

————————————————

参考原文链接：https://blog.csdn.net/yinjl123456/article/details/119300034
另外一个温度的kubeedge-temperature-demo 示例：https://blog.csdn.net/w13657909078/article/details/120342636