监控Docker容器– Docker统计信息，cAdvisor，通用控制平面

最新推荐文章于 2023-04-11 14:49:42 发布
最新推荐文章于 2023-04-11 14:49:42 发布
阅读量839 收藏 3
点赞数 1
文章标签： 网络 java docker linux python

有多种方法可以监视Docker容器。 该博客将介绍一些简单易用的选项：

  1. docker stats命令
  2. Docker远程API
  3. 顾问
    1. 普罗米修斯
    2. InfluxDB
  4. Docker通用控制平面

让我们看看它们中的每一个。

我们将使用Couchbase服务器来收集监视数据。

让我们以以下方式启动服务器： 

docker run -d -p 8091-8093:8091-8093 -p 11210:11210 --name couchbase arungupta/couchbase

在github.com/arun-gupta/docker-images/tree/master/couchbase中解释了arungupta arungupta/couchbase图像。 它执行：

  • 设置索引和数据服务的内存
  • 为Couchbase服务器配置索引，数据和查询服务
  • 设置用户名和密码凭证

现在让我们收集监视数据。

码头工人统计

docker stats显示以下容器资源使用情况统计docker stats的实时流：

  • CPU使用率
  • 内存使用率，限制，使用率百分比
  • 网络I / O
  • 磁盘I / O

统计信息每秒更新一次。

这是一个示例输出： 

CONTAINER           CPU %               MEM USAGE / LIMIT     MEM %               NET I/O               BLOCK I/O
4827f0139b1f        10.94%              706.2 MB / 1.045 GB   67.61%              299.7 kB / 2.473 MB   456 MB / 327.3 MB

默认情况下，此命令显示所有正在运行的容器的统计信息。 可以指定容器名称或ID的列表，以空格分隔，以将流限制为正在运行的容器的子集。

例如，仅可将Couchbase容器的统计信息视为： 

docker stats couchbase

其中couchbase是容器名称。

输出看起来像： 

CONTAINER           CPU %               MEM USAGE / LIMIT     MEM %               NET I/O             BLOCK I/O
couchbase           12.50%              708.2 MB / 1.045 GB   67.80%              301 kB / 2.477 MB   456 MB / 327.6 MB

可以指定--no-stream选项，其中仅显示第一个快照，并且不传输结果。

Docker Logentries容器可用于收集此数据。

Docker远程API

Docker守护程序提供了远程REST API。 客户端使用此API与引擎进行通信。 该API也可以由其他工具（例如curl或Chrome Postman REST Client）调用。 如果要在OSX Mavericks上使用Docker Machine创建Docker守护程序，那么使此API正常工作会有些棘手。

如果您使用的是Mac，请按照Enable Docker Remote API中的说明进行操作，以确保curl可以调用此REST API。

提供有关容器统计信息的API是/containers/{id}/stats或/containers/{name}/stats.

然后可以获得有关该容器的更多统计信息： 

~ > curl https://192.168.99.100:2376/containers/42d1414883af/stats --cert $DOCKER_CERT_PATH/cert2.p12 --pass mypass --key $DOCKER_CERT_PATH/key.pem --cacert $DOCKER_CERT_PATH/ca.pem

显示以下结果（格式化）： 

{
    "read": "2016-02-07T13:26:56.142981314Z",
    "precpu_stats": {
        "cpu_usage": {
            "total_usage": 0,
            "percpu_usage": null,
            "usage_in_kernelmode": 0,
            "usage_in_usermode": 0
        },
        "system_cpu_usage": 0,
        "throttling_data": {
            "periods": 0,
            "throttled_periods": 0,
            "throttled_time": 0
        }
    },
    "cpu_stats": {
        "cpu_usage": {
            "total_usage": 242581854769,
            "percpu_usage": [242581854769],
            "usage_in_kernelmode": 33910000000,
            "usage_in_usermode": 123040000000
        },
        "system_cpu_usage": 3367860000000,
        "throttling_data": {
            "periods": 0,
            "throttled_periods": 0,
            "throttled_time": 0
        }
    },
    "memory_stats": {
        "usage": 693821440,
        "max_usage": 818733056,
        "stats": {
            "active_anon": 282038272,
            "active_file": 28938240,
            "cache": 82534400,
            "hierarchical_memory_limit": 9223372036854771712,
            "hierarchical_memsw_limit": 9223372036854771712,
            "inactive_anon": 329543680,
            "inactive_file": 53284864,
            "mapped_file": 26558464,
            "pgfault": 809513,
            "pgmajfault": 2559,
            "pgpgin": 1015608,
            "pgpgout": 940757,
            "rss": 611270656,
            "rss_huge": 136314880,
            "swap": 249049088,
            "total_active_anon": 282038272,
            "total_active_file": 28938240,
            "total_cache": 82534400,
            "total_inactive_anon": 329543680,
            "total_inactive_file": 53284864,
            "total_mapped_file": 26558464,
            "total_pgfault": 809513,
            "total_pgmajfault": 2559,
            "total_pgpgin": 1015608,
            "total_pgpgout": 940757,
            "total_rss": 611270656,
            "total_rss_huge": 136314880,
            "total_swap": 249049088,
            "total_unevictable": 0,
            "total_writeback": 0,
            "unevictable": 0,
            "writeback": 0
        },
        "failcnt": 0,
        "limit": 1044574208
    },
    "blkio_stats": {
        "io_service_bytes_recursive": [{
                "major": 8,
                "minor": 0,
                "op": "Read",
                "value": 301649920
            }, {
                "major": 8,
                "minor": 0,
                "op": "Write",
                "value": 248315904
            }, {
                "major": 8,
                "minor": 0,
                "op": "Sync",
                "value": 201003008
            }, {
                "major": 8,
                "minor": 0,
                "op": "Async",
                "value": 348962816
            }, {
                "major": 8,
                "minor": 0,
                "op": "Total",
                "value": 549965824
            }],
        "io_serviced_recursive": [{
                "major": 8,
                "minor": 0,
                "op": "Read",
                "value": 41771
            }, {
                "major": 8,
                "minor": 0,
                "op": "Write",
                "value": 72796
            }, {
                "major": 8,
                "minor": 0,
                "op": "Sync",
                "value": 61246
            }, {
                "major": 8,
                "minor": 0,
                "op": "Async",
                "value": 53321
            }, {
                "major": 8,
                "minor": 0,
                "op": "Total",
                "value": 114567
            }],
        "io_queue_recursive": [],
        "io_service_time_recursive": [],
        "io_wait_time_recursive": [],
        "io_merged_recursive": [],
        "io_time_recursive": [],
        "sectors_recursive": []
    },
    "pids_stats": {},
    "networks": {
        "eth0": {
            "rx_bytes": 40192,
            "rx_packets": 285,
            "rx_errors": 0,
            "rx_dropped": 0,
            "tx_bytes": 222138,
            "tx_packets": 150,
            "tx_errors": 0,
            "tx_dropped": 0
        }
    }
}

有关内存，磁盘和网络的更多详细信息。 每秒推送一组新的指标。

顾问

cAdvisor或Container Advisor提供主机和容器指标。 它是一个正在运行的守护程序，用于收集，聚合，处理和导出有关正在运行的容器的信息。

让我们启动cAdvisor容器： 

docker run -d --name=cadvisor -p 8080:8080 --volume=/var/run:/var/run:rw --volume=/sys:/sys:ro --volume=/var/lib/docker/:/var/lib/docker:ro google/cadvisor:latest

cAdvisor仪表板仅显示最近60秒的数据。 但是，支持多个后端，例如Prometheus和InfluxDB ，可以长期存储，检索和分析。

使用Couchbase查询工具连接Couchbase服务器： 

~ > docker run -it --link couchbase:db arungupta/couchbase cbq --engine http://db:8093
Couchbase query shell connected to http://db:8093/ . Type Ctrl-D to exit.
cbq>

调用N1QL查询 ： 

cbq> select * from `travel-sample` limit 1;
{
"requestID": "7af2d1b1-c37e-4c75-a913-cfaa99dcabdd",
"signature": {
"*": "*"
},
"results": [
{
"travel-sample": {
"callsign": "MILE-AIR",
"country": "United States",
"iata": "Q5",
"icao": "MLA",
"id": 10,
"name": "40-Mile Air",
"type": "airline"
}
}
],
"status": "success",
"metrics": {
"elapsedTime": "10.292951ms",
"executionTime": "10.232921ms",
"resultCount": 1,
"resultSize": 300
}
}

cAdvisor仅存储一分钟的数据，这是仪表板的捕获内容：

cadvisor-cpu-用法-1024x701

和备忘录用法：

cadvisor-总内存使用量-1024x429

有很多工具可以使用cAdvisor生成的数据并将其显示在漂亮的仪表板上。

有关更多详细信息，请访问github.com/google/cadvisor/tree/master/docs 。

Docker通用控制平面

Docker Universal Control Plane（DUCP）允许从防火墙内部管理和部署Dockerized分布式应用程序。 它与LDAP / AD等关键系统集成以管理用户，并为IT运营团队提供部署和管理界面。 RBAC，与Docker Trusted Registry的SSO集成，简单易用的Web UI是一些关键功能。 阅读产品概述以获取完整的功能集。

使用Docker Machine进行Docker通用控制计划是在本地计算机上体验此操作的最简单方法。 这些说明非常详细，可以直接使用。 这是部署Couchbase映像后的一些映像。

DUCP安装由DUCP控制器和一个或多个主机组成。 这些是在Docker Swarm集群中配置的。 然后在这些集群上启动容器：

ducp图像1024x397

端口映射很容易定义：

ducp端口映射1024x459

容器运行后，可以看到监视状态：

ducp-stats-1024x593

最后是漂亮的仪表板：

ducp-dashboard-1024x724

提供了一个客户端软件包 ，该软件包将有关Docker Swarm集群的信息显示为： 

Containers: 10
 Running: 10
 Paused: 0
 Stopped: 0
Images: 15
Server Version: swarm/1.1.3
Role: primary
Strategy: spread
Filters: health, port, dependency, affinity, constraint
Nodes: 2
 node1: 192.168.99.101:12376
  └ Status: Healthy
  └ Containers: 7
  └ Reserved CPUs: 0 / 1
  └ Reserved Memory: 0 B / 2.004 GiB
  └ Labels: executiondriver=native-0.2, kernelversion=4.1.19-boot2docker, operatingsystem=Boot2Docker 1.10.3 (TCL 6.4.1); master : 625117e - Thu Mar 10 22:09:02 UTC 2016, provider=virtualbox, storagedriver=aufs
  └ Error: (none)
  └ UpdatedAt: 2016-04-09T00:12:53Z
 node2: 192.168.99.102:12376
  └ Status: Healthy
  └ Containers: 3
  └ Reserved CPUs: 0 / 1
  └ Reserved Memory: 0 B / 2.004 GiB
  └ Labels: executiondriver=native-0.2, kernelversion=4.1.19-boot2docker, operatingsystem=Boot2Docker 1.10.3 (TCL 6.4.1); master : 625117e - Thu Mar 10 22:09:02 UTC 2016, provider=virtualbox, storagedriver=aufs
  └ Error: (none)
  └ UpdatedAt: 2016-04-09T00:12:48Z
Cluster Managers: 1
 192.168.99.101: Healthy
  └ Orca Controller: https://192.168.99.101:443
  └ Swarm Manager: tcp://192.168.99.101:3376
  └ KV: etcd://192.168.99.101:12379
Plugins: 
 Volume: 
 Network: 
Kernel Version: 4.1.19-boot2docker
Operating System: linux
Architecture: amd64
CPUs: 2
Total Memory: 4.008 GiB
Name: ucp-controller-node1
ID: 6LTO:GVZJ:2M6Z:DONM:ZAKR:2JIL:ZWJG:KY7R:G3EL:AS2Y:X22F:RXM3
Labels:
 com.docker.ucp.license_key=XXXXXXXXXXXXXXXXXXXXXXXX
 com.docker.ucp.license_max_engines=1
 com.docker.ucp.license_expires=XXXXXXXXXXXXXXXXXXXXXXXX

有很多工具可提供监视数据：

docker stats和Docker Remote API当然是最简单的监视数据快照。 从那里开始，它才变得有趣！

翻译自: https://www.javacodegeeks.com/2016/04/monitoring-docker-containers-docker-stats-cadvisor-universal-control-plane.html

danpob13624
关注
Docker（九）：Docker轻量级可视化工具Portainer与容器监控3剑客CAdvisor+InfluxDB+Granfana
✨ 欢迎来到【Seal ^_^ 的CSDN博客】！这里是我记录技术心得、分享经验的地方。✨
09-14 4万+
🟢 Docker（九）：Docker轻量级可视化工具Portainer与容器监控3剑客CAdvisor+InfluxDB+Granfana
【云原生】Prometheus监控Docker指标并接入Grafana
最新发布
congge_study的博客
07-07 8545
Prometheus监控Docker指标
dockerstats:轻松刮取Docker Stats API
05-07
Dockerstats Dockerstats是一个简单的容器，用于从 API收集指标并将其发送到其他地方。 它支持用于配置度量标准发送位置的适配器。 它深受启发和大体与但更简单。 当前，提供了以下适配器： 日志：将统计信息记录到标准输出的适配器。 如果您已经使用了诸如类的来从容器中收集日志，那么该适配器将非常有用。 可以通过STAT_TEMPLATE环境变量配置格式。 默认模板是将以格式记录统计信息的模板。 这是带有默认模板的一组指标。 统计：待办事项 天秤座： TODO 用法 只需运行容器并安装docker套接字即可： $ docker run --name= " dockerstats " \ --volume=/var/run/docker.sock:/tmp/docker.sock \ remind101/dockerstats 指标 将创建以下指标：
Docker的数据管理
wmc995620的博客
07-12 562
管理Docker 容器中数据主要有两种方式:数据卷(Data Volumes)和数据卷容器( DataVolumes Containers) 。数据卷是一个供容器使用的特殊目录，位于容器中。可将宿主机的目录挂载到数据卷上，对数据卷的修改操作立刻可见，并且更新数据不会影响镜像，从而实现数据在宿主机与容器之间的迁移。数据卷的使用类似于Linux下对目录进行的mount操作。需求：宿主机目录/var/www挂载到容器中的/data1。 如果需要在容器之间共享一些数据，最简单的方法就是使用数据卷容器。数据卷容器
统计启动了多少个docker容器
小生测试的博客
11-26 3004
统计当前正在运行的docker容器 docker ps |wc -l 统计当前有多少个docker容器，包括exited，created状态的 docker ps -a |wc -l 统计当前有多少个退出的docker容器 docker ps -f status=exited | wc -l wc会统计标题，所以以上数据最终要减去1。 ...
通过dockerAPI接口获取stats数据并处理
xqx_Zi_yu
12-30 978
docker的stats数据处理
手把手部署Cadvisor监控单节点的容器负载
mlx212的专栏
09-13 1113
  Cadviosr是Google用来监测单节点的资源信息的监控工具。虽然Docker提供了一些CLI的命令行的功能，如docker stats，但是在一个看图的时代，基本的功能是很难满足人民群众日益增长的物质文化需求，Cadvisor提供了一目了然的单节点多容器的资源监控功能。Google的Kubernetes中也缺省地将其作为单节点的资源监控工具，各个节点缺省会被安装上Cadvisor。在...
Docker 容器监控原理及 cAdvisor的安装与使用说明
01-08
生产环境中监控容器的运行状况十分重要，通过监控我们可以随时掌握容器的运行状态，做到线上隐患和问题早发现，早解决。...Docker 容器的监控方案有很多，除了 Docker 自带的docker stats命令，还有很多开源的解决
Prometheus 使用cadvisor采集docker容器监控数据
极致，细节
11-23 1086
cadvisor_exporter 是一个用于将 cAdvisor 监控数据暴露给 Prometheus 的开源软件。它充当一个代理，运行在与 cAdvisor 相同的主机上，并通过查询 cAdvisor 提供的 API 来获取容器的性能指标和状态信息。cadvisor_exporter 从 cAdvisor 收集各种容器的资源使用情况，如 CPU 利用率、内存使用量、文件系统使用情况、网络流量等，并将这些指标数据转换成 Prometheus 可以理解的格式。
【异常】记一次，排查docker容器的微服务，CPU飙高问题
thlzjfefe的博客
11-30 1114
项目时 以docker为容器的 微服务项目。 其中一个docker容器，CPU很高。所以需要排查一下问题。 [root@service-slave2 ~]# docker stats CONTAINER ID NAME CPU % MEM USAGE / LIMIT MEM % NET I/O BLOCK I/O PIDS NAMES fa4b3663ece4 keda6-slave2-information-plan 733.45% 919MiB / 1.5GiB 59.
docker stats 命令详解
weixin_40293999的博客
04-11 3004
docker stats : 显示容器资源的使用情况，包括：CPU、内存、网络 I/O 等。MEM USAGE / LIMIT: 容器正在使用的总内存，以及允许使用的内存总量。CPU % 与 MEM %: 容器使用的 CPU 和内存的百分比。BLOCK I/O: 容器从主机上的块设备读取和写入的数据量。NET I/O: 容器通过其网络接口发送和接收的数据量。–all , -a :显示所有的容器，包括未运行的。–format :指定返回值的模板文件。–no-trunc :不截断输出。
【云原生】监视Docker桌面的容器内存和CPU使用情况
qq_57756904的博客
12-13 6537
但是这个命令只能给你当前的时刻。如果希望看到资源随着时间的推移而演变，那么该怎么办？或者查看 DockerCompose 项目使用了多少 CPU 和内存？或者根据 CPU 密集程度最高的容器进行排序，然后根据超过80% 的 CPU 使用情况进行筛选？
docker容器cpu高问题排查_Docker容器CPU使用率
weixin_36305686的博客
12-24 1922
I am using the docker remote API to retrieve stats of my running containers. For CPU usage I get for example this:"cpu_stats": {"cpu_usage": {"total_usage": 13039191340,"percpu_usage": [13039191340],"...
如何正确计算 Kubernetes 容器 CPU 使用率
easylife206的专栏
07-23 1779
公众号关注「奇妙的 Linux 世界」设为「星标」，每天带你玩转 Linux ！本文转自博客园，原文：https://www.cnblogs.com/apink/p/15767687.html，版权归原作者所有。参数解释使用 Prometheus 配置 kubernetes 环境中 Container 的 CPU 使用率时，会经常遇到 CPU 使用超出 100%，下面就...
docker查看运行容器详细信息
热门推荐
极客神殿
05-06 4万+
使用docker ps命令可以查看所有正在运行中的容器列表， 使用docker inspect命令我们可以查看更详细的关于某一个容器的信息。 $ docker inspect 容器id/image 查看Docker容器的信息 对于运行在Docker环境的容器，有时我们想查询它们的一些基本信息，例如环境变量、hostname、ip地址等，接下来我们以一个tomcat容器为例，看看有哪些方式来取得这些信息； 创建tomcat容器 在docker环境下执行如下命令，即可创建一个名为tomcat001的to
docker cpu和内存限制
李习的博客
08-21 471
docker cpu和内存限制参考文档docker stats ID CPU显示不正确docker的内存和cpu限制 参考文档 https://blog.51cto.com/xujpxm/1961072 Linux的Linux MemFree与MemAvailable的区别 https://blog.csdn.net/csdn_immortal/article/details/86671705 linux的cpu和内存命令解析 docker 内存和cpu限制1 docker 内存和cpu限制2 docker
在宿主机查看docker使用cpu、内存、网络、io情况
xiaomin1991222的专栏
10-31 1063
在宿主机查看docker使用cpu、内存、网络、io情况   docker stats 容器名 或 docker stats 容器id   动态显示下列数据： CONTAINER           CPU %               MEM USAGE/LIMIT       MEM %               NET I/O hello_world2        0...
Docker系列四：容器(Container)介绍与常用命令汇总
wester的博客
10-08 4041
目录 一：什么是容器 二：容器常用操作命令 2.1容器列表 2.2：启动新容器 2.3：启动已终止容器 2.4：重启容器 2.5：停止容器 2.6：强制停止容器 2.7：删除容器 2.8：进入容器 2.9：查看容器日志 2.10：查看容器内运行的进程 2.11：查看容器详细信息 2.12：复制容器内部的文件或文件夹(不推荐) 2.13： 查看所有容器资源使用情况 2.14： 查看所有容器明细(比较实用) 2.15： 容器其他操作 三：容器run参数解读 一：什么是容器
Docker容器监控：搭建可视化监控中心实战
然后，我们部署cAdvisor服务，这是一个由谷歌开发的监控工具，专门用于收集Docker容器的时序信息。cAdvisor通过与influxdb集成，将收集到的数据存储到之前创建的数据库中。我们同样使用`docker run`命令启动cAdvisor...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值