kubernetes1.8版本heapster部署

最新推荐文章于 2023-06-24 10:40:06 发布
最新推荐文章于 2023-06-24 10:40:06 发布
阅读量575 收藏
点赞数
分类专栏： 运维 kubernetes
kubernetes 同时被 2 个专栏收录
282 篇文章 20 订阅
订阅专栏
运维
121 篇文章 2 订阅
订阅专栏

1. heapster介绍

Heapster是容器集群监控和性能分析工具，天然的支持Kubernetes和CoreOS。Kubernetes有个出名的监控agent—cAdvisor。在每个kubernetes Node上都会运行cAdvisor，它会收集本机以及容器的监控数据(cpu,memory,filesystem,network,uptime)。在较新的版本中，K8S已经将cAdvisor功能集成到kubelet组件中。每个Node节点可以直接进行web访问。

Heapster是一个收集者，Heapster可以收集Node节点上的cAdvisor数据，将每个Node上的cAdvisor的数据进行汇总，还可以按照kubernetes的资源类型来集合资源，比如Pod、Namespace域，可以分别获取它们的CPU、内存、网络和磁盘的metric。默认的metric数据聚合时间间隔是1分钟。还可以把数据导入到第三方工具(如InfluxDB)。

Kubernetes原生dashboard的监控图表信息来自heapster。在Horizontal Pod Autoscaling中也用到了Heapster，HPA将Heapster作为Resource Metrics API，向其获取metric，做法是在kube-controller-manager 中配置–api-server指向kube-aggregator，也可以使用heapster来实现，通过在启动heapster的时候指定–api-server=true。 
架构图： 
这里写图片描述
框架图： 
这里写图片描述 
Heapster首先从K8S Master获取集群中所有Node的信息，然后通过这些Node上的kubelet获取有用数据，而kubelet本身的数据则是从cAdvisor得到。所有获取到的数据都被推到Heapster配置的后端存储中，并还支持数据的可视化。现在后端存储 + 可视化的方法，如InfluxDB + grafana。

说明：本实验采用influxdb作为heapster后端

2.Heapster部署

2.1 获取最新版heapster（v1.5.0-beta.2)

到 heapster release 页面（https://github.com/kubernetes/heapster/releases）下载最新版本的 heapster：

wget https://github.com/kubernetes/heapster/archive/v1.5.0-beta.2.zip
unzip v1.5.0-beta.2.zip
cd heapster-1.5.0-beta.2/deploy/kube-config/influxdb
  • 1
  • 2
  • 3

2.2 修改配置文件

2.2.1 heapster配置

修改heapster.yml配置文件

deployment:
        image: daocloud.io/liukuan73/heapster-amd64:v1.5.0-beta.2
        imagePullPolicy: IfNotPresent
      nodeSelector:
        kubernetes.io/hostname: k8smaster02
service:
  type: NodePort
    nodePort: 30003
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8

部署好后可以打开kubernetes-dashboard看效果，看是否显示各 Nodes、Pods 的 CPU、内存、负载等利用率曲线图；

2.2.2 grafana配置

修改grafana.yaml配置文件：

deployment:
        image: daocloud.io/liukuan73/heapster-grafana:v4.4.3
        imagePullPolicy: IfNotPresent
          # If you're only using the API Server proxy, set this value instead:
          value: /api/v1/namespaces/kube-system/services/monitoring-grafana/proxy
          #value: /
      nodeSelector:
        kubernetes.io/hostname: k8smaster02
service:
  type: NodePort
    nodePort: 30002
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11

备注： 
如果后续使用 kube-apiserver 或者 kubectl proxy 访问 grafana dashboard，则必须将 GF_SERVER_ROOT_URL 设置为 /api/v1/proxy/namespaces/kube-system/services/monitoring-grafana/，否则后续访问grafana时访问时提示找不到http://172.20.0.113:8086/api/v1/proxy/namespaces/kube-system/services/monitoring-grafana/api/dashboards/home 页面；

2.2.3 influxdb配置

2.2.3.1 开启admin UI

说明： 
influxdb 官方建议使用命令行或 HTTP API 接口来查询数据库，从 v1.1.0 版本开始默认关闭 admin UI，将在后续版本中移除 admin UI 插件。开启镜像中 admin UI的办法如下： 
先导出镜像中的 influxdb 配置文件，开启 admin 插件后，再将配置文件内容写入 ConfigMap，最后挂载到镜像中，达到覆盖原始配置的目的：

docker run --rm --entrypoint 'cat'  -ti daocloud.io/liukuan73/heapster-influxdb-amd64:v1.3.3 /etc/config.toml > config.toml
  • 1

修改config.toml，启用 admin 接口:

[[graphite]]
  enabled = true
  • 1
  • 2

使用修改后的配置文件创建configmap：

kubectl create configmap influxdb-config --from-file=config.toml  -n kube-system
  • 1

修改influxdb.yaml，将 ConfigMap 中的配置文件挂载到 Pod 中，达到覆盖原始配置的目的:

 deployment:
        - mountPath: /etc/
          name: influxdb-config
      - name: influxdb-config
        configMap:
          name: influxdb-config
service:
spec:
  type: NodePort
  ports:
  - port: 8086
    targetPort: 8086
    nodePort: 30004
    name: http
  - port: 8083
    targetPort: 8083
    nodePort: 30005
    name: admin
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18

说明： 
service中额外增加了 admin 端口映射，用于后续浏览器访问 influxdb 的 admin UI 界面；

2.2.3.2 修改influxdb.yaml中其他配置
deployment:
        image: daocloud.io/liukuan73/heapster-influxdb-amd64:v1.3.3
        imagePullPolicy: IfNotPresent
      nodeSelector:
        kubernetes.io/hostname: k8smaster02
  • 1
  • 2
  • 3
  • 4
  • 5

3.界面访问

3.1 grafana

  • 通过 kube-apiserver 访问： 
    获取 monitoring-grafana 服务 URL
# kubectl cluster-info
Kubernetes master is running at http://localhost:8080
dnsmasq is running at http://localhost:8080/api/v1/proxy/namespaces/kube-system/services/dnsmasq
Heapster is running at http://localhost:8080/api/v1/proxy/namespaces/kube-system/services/heapster
kubedns is running at http://localhost:8080/api/v1/proxy/namespaces/kube-system/services/kubedns
monitoring-grafana is running at http://localhost:8080/api/v1/proxy/namespaces/kube-system/services/monitoring-grafana
monitoring-influxdb is running at http://localhost:8080/api/v1/proxy/namespaces/kube-system/services/monitoring-influxdb

To further debug and diagnose cluster problems, use 'kubectl cluster-info dump'.
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9

浏览器访问 URL： https://10.142.21.22:6443/api/v1/proxy/namespaces/kube-system/services/monitoring-grafana

  • 通过 kubectl proxy 访问： 
    创建代理
kubectl proxy --address='10.142.21.21' --port=8086 --accept-hosts='^*$'
 Starting to serve on 10.142.21.21:8086
  • 1
  • 2

浏览器访问 URL：http://10.142.21.21:8086/api/v1/proxy/namespaces/kube-system/services/monitoring-grafana

可我打开咋是这个页面呢: 
这里写图片描述 
一些js和css元素找不到…留作以后处理…

3.2 访问 influxdb admin UI

通过 kube-apiserver 的非安全端口访问 influxdb 的 admin UI 界面： http://10.142.21.21:8080/api/v1/proxy/namespaces/kube-system/services/monitoring-influxdb:8087/ 
备注：我的api_server只向localhost开放了非安全的8080端口，所以我只能通过安全端口访问：https://10.142.21.21:6443/api/v1/proxy/namespaces/kube-system/services/monitoring-influxdb:8087/

在页面的 “Connection Settings” 的 Host 中输入 node IP， Port 中输入 8086 映射的 nodePort 如上面的 30004，点击 “Save” 即可

注意

在安装好 Grafana 之后我们使用的是默认的 template 配置，页面上的 namespace 选择里只有 default 和 kube-system，并不是说其他的 namespace 里的指标没有得到监控，只是我们没有在 Grafana 中开启他它们的显示而已。见 Cannot see other namespaces except, kube-system and default #1279。

修改grafana模板 
这里写图片描述
将 Templating 中的 namespace 的 Data source 设置为 influxdb-datasource，Refresh 设置为 on Dashboard Load 保存设置，刷新浏览器，即可看到其他 namespace 选项。

6.Heapster使用

这里主要介绍Heapster的API使用，及可获取的Metrics。 
The Heapster Model is a structured representation of metrics for Kubernetes clusters, which is exposed through a set of REST API endpoints. It allows the extraction of up to 15 minutes of historical data for any Container, Pod, Node or Namespace in the cluster, as well as the cluster itself (depending on the metric).

API文档及可用Metrics在官方文档中都介绍的比较齐全。下面用几条测试命令来解释API使用：

  • 获取支持的metrics:
curl -L http://10.142.21.21:30003/api/v1/model/metrics
    [
    "cpu/limit",
    "memory/request",
    "memory/limit",
    "cpu/usage_rate",
    "memory/usage",
    "cpu/request"
    ]
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 列出某一个Node支持的metrics
curl -L http://10.142.21.21:30003/api/v1/model/nodes/k8smaster01/metrics
  • 1
  • 查看对应Pod的cpu使用率
curl -L http://10.142.21.21:30003/api/v1/model/namespaces/<namespace-name>/pods/<pod-name>/metrics/cpu-usag
  • 1

参考：

1.https://jimmysong.io/kubernetes-handbook/practice/heapster-addon-installation.html 
2.https://www.kubernetes.org.cn/932.html

参考资料：

hxpjava1
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Kubernetes安装系列之heapster安装
知行合一 止于至善
04-02 5608
虽然heapster已经即将退休，为了纪念一下，这篇文章整理一下heapster+grafana+Influxdb组合对于kubernetes的node与资源进行监控的插件安装与设定方法，本文以脚本的方式进行固化，内容仍然放在github的easypack上。
k8s监控 heapster部署实践
zhd930818的博客
04-21 5394
更多kubernetes文章：k8s专栏目录使用 https://github.com/kubernetes/heapster github上的配置启动heapster目录位置 deploy/kube-config/influxdb/，创建里面3个文件再创建 deploy/kube-config/rbac/heapster-rbac.yaml安装失败时[root@tensorflow1 ~]# k...
kubernetes下heapster的部署案例
weixin_33738555的博客
08-07 121
注：本案例在我的部署环境下是可行的，但不保证在所有环境下都可行。我尽可能讲得直白而详细，因为我自己也才刚开始接触，已经做过深入研究的可以浏览，若有什么错误，烦请指正，感激不尽！ 我的环境： K8S1.0.0+flannel+docker1.6的分布式集群。 这里先不赘述flannel的部署了，以后有时间再写相关的文档。 1. Ser...
kubernetes之部署dashboard 和heapster
weixin_33860722的博客
05-23 385
部署dashboard之前，先确保traefik https方式部署成功，这样就可以通过 https 域名的方式访问dashboard，无需kube-proxy转发了。假设traefik-ingress https部署完成。 下载dashboard yaml文件 wget https://raw.githubusercontent.com/kubernetes/dashboard/mas...
HeapSter部署
weixin_30535167的博客
08-14 165
pod资源需求，资源限制 Requests:需求，最低保障； Limits: 限制，硬限制； Limits >= request CPU: 1颗虚拟CPU=1000 毫核心 millicores 0.5cpu=500m 内存: E,P,T,G,M,K Ei,Pi 资源需求计算:根据request来计算 资源定义 kubectl ...
安装配置heapster（包含influxdb，grafana）
weixin_30563917的博客
06-08 389
前提：已搭建好kubernetes集群、安装完dashboard 默认安装的dashboard无法展示集群的度量指标信息，此时就需要安装heapster插件 Heapster 插件使用包含三部分内容： Heapster：显示各 Nodes、Pods 的 CPU、内存、负载等利用率曲线图。 InfluxDB：存储 Pod 信息相关的数据库, Heapster 获取数据之后, ...
Kubernetes监控：Metrics Server部署方法
知行合一 止于至善
02-02 8159
从kubernetes 1.8的版本开始，随着横向扩缩容功能的稳定和提升，HPA支持自定义指标，Cluster Autoscaler提升了性能与错误报告能力； 支持新版的HPA API，相关的API和组件升至稳定版本，比如： resource Metrics API、custom metrics API和metrics-server等。这意味着Metrics Server已经开始使用了。这篇文章介绍一下Metrics Server在Kubernetes上的部署方法。
基于Kubeadm部署Kubernetes1.13.3 HA 高可用集群
nsydgs的博客
08-05 1万+
k8s部署
使用kubeadm部署kubernetes
热门推荐
Andriy_dangli
02-06 2万+
Kubertenes集群部署 Kubertenes集群部署系统环境系统环境初始化安装软件源配置安装docker 1.12.6安装kubernetes下载相关镜像初始化kubernetes集群初始化成功输出：查看集群节点信息：初始化集群报错及问题解决：安装网络插件：一、weave网络模式二、flannel网络模式添加节点安装dashboard安装heapster插件 本文档是使用ku...
kubernetes 1.6版以上1.8版以下弹性伸缩HPA-Memory
ximenghappy的专栏
12-04 2720
一：前言在kubernetes中，Pod是最基础的调度单位，多个pod 可以组成一个集合，这个集合向外提供服务。这时候，我们需要以下两种情形需要关注：1）集合中的Pod可能会由于某种原因Fail，这时候需要某种机制能够创建新的Pod以确保有足够数量的Pod在运行。2）Pod 的个数由访问请求决定。即当前实例个数不足以满足访问请求时，需要增加实例个数，反之，需要通过某种策略减少实例数。如果人工来实时监
Kubernetes 1.8.4 手动安装教程-安装Heapster（八）
weixin_33937913的博客
01-08 144
2019独角兽企业重金招聘Python工程师标准>>> ...
Kubernetes监控Heapster介绍
Less Is More
08-19 1911
什么是Heapster？ Heapster是容器集群监控和性能分析工具，天然的支持Kubernetes和CoreOS。 Kubernetes有个出名的监控agent—cAdvisor。在每个kubernetes Node上都会运行cAdvisor，它会收集本机以及容器的监控数据(cpu,memory,filesystem,network,uptime)。 在较新的版本中，K8S已经将cAdvisor功能集成到kubelet组件中。每个Node节点可以直接进行web访问。 cAdvisor web界面访
每天5分钟玩转Kubernetes | Heapster
最新发布
COCO_gsta的博客
06-24 244
书籍来源：cloudman《每天5分钟玩转Kubernetes》一边学习一边整理老师的课程内容及试验笔记，并与大家分享，侵权即删，谢谢支持！附上汇总贴：每天5分钟玩转Kubernetes | 汇总_COCOgsta的博客-CSDN博客Heapster是Kubernetes原生的集群监控方案。Heapster以Pod的形式运行，它会自动发现集群节点，从节点上的Kubelet获取监控数据。Kubelet则是从节点上的cAdvisor收集数据。Heapster将数据按照Pod进行分组，将它们存储到预先配置的bac
Kubernetes/K8s企业运维实战（1）（新版本）
10-04
     毫无疑问，Kubernetes已经成为容器编排事实标准。除了已经拥抱Kubernetes的Google、BAT、京东、奇虎360等巨头大厂外，更多的企业也都在向Kubernetes迁移。容器技术大势所趋，是互联网企业目前急需的技术人才之一，已成为运维工程师、架构师的必备技能之一。机会总是留给有准备的人，现在就让我们一起开启这次充满挑战的容器之旅吧！ 上完这门课程会获得什么？ 首先从零开始教你搭建Kubernetes企业级容器云平台。接下来，学习Kubernetes核心功能，例如Pod、Deployment、Service、Ingress、Volume、PersistentVolume等知识点，再教你如何将公司项目部署到集群中，然后对集群资源监控和应用日志统一管理。贴近企业生产环境讲解，即学即用，确保实用性，实战性！
kubernetes1.6 安装Heapster+dashboard（五）
柳清风的专栏
05-05 6153
heapster是kubernetes默认的监控系统，它通过kubelet里面的cadvisor获取容器的监控信息。 上面的图显示了heapster监控流程，采集的数据放到influxdb中，influxdb支持rest的方式存储数据，熟悉openstb的人对此很容易上手。 通过yaml文件的方式就可以完成安装：heapster-deployment.yaml apiVersion: ext
<总结> 部署 Kubernetes+Heapster+InfluxDB+Grafana 详解
yang.zhou欢迎各位
10-25 1万+
1. 部署 Kubernetes 一 、安装步骤 准备工作 关闭防火墙 为了避免和Docker的iptables产生冲突，我们需要关闭node上的防火墙： 1 2 $ systemctl stop firewalld $ systemctl disable firewalld 安装NTP 为了让各个服务器的时间
k8s监控 heapster部署
zhd930818的博客
04-09 2319
更多kubernetes文章：k8s专栏目录使用 https://github.com/kubernetes/heapster github上的配置启动heapster目录位置 heapster/deploy/kube-config/influxdb/E1118 07:05:45.339132 1 reflector.go:203] k8s.io/heapster/metrics/sources/...
Kubernetes用户指南（四）--应用检查和调试
weixin_30471065的博客
10-25 460
一、调试 当你的应用开始运行，那么DEBUG是不可避免的问题。 早些时候，我们在描述的是如何通过kubectl get pods来获得Pod的简单状态信息。 但是现在，这里有更多的方式来获得关于你的应用的更多信息。 1、使用kubectl describe pod来获得Pod的详细信息 在这个例子中，我们将会像之前的例子一样使用RC来创建两个Pod： ...
kubernetes+docker监控之简介
weixin_34375054的博客
07-19 182
2019独角兽企业重金招聘Python工程师标准>>> ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值