Centos7.9版本安装collectd并开启写入rrd文件功能

最新推荐文章于 2024-03-16 09:37:30 发布
最新推荐文章于 2024-03-16 09:37:30 发布
阅读量335 收藏
点赞数
分类专栏： Collectd 文章标签： 安装collectd collectd Centos安collectd 开启写入rrd文件功能 Centos7
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/a924382407/article/details/131867027
版权

在这里插入图片描述

文章目录

一、背景介绍

Collectd官网：https://collectd.org/

在这里插入图片描述
Collectd是一款开源的系统统计守护进程，用于收集、处理和存储各种系统性能指标。它可以在多个操作系统上运行，并且支持许多不同类型的插件来收集各种数据。

Collectd的主要功能包括：

数据收集：Collectd可以定期地从系统和应用程序中收集各种性能指标，如CPU使用率、内存使用情况、磁盘IO、网络流量等。

插件系统：Collectd提供了一个可插拔的架构，可以通过各种插件来收集不同类型的数据。这些插件可以用于监控硬件、操作系统和各种应用程序。

数据处理和存储：Collectd可以对收集到的数据进行处理和转换，如数据聚合、过滤和格式化。它还可以将数据存储到各种后端，如RRD文件、数据库或远程服务器。

监控和告警：Collectd可以通过与其他监控工具（如Grafana、Prometheus等）的集成来实现实时监控和告警功能。它可以根据预定义的规则触发警报，以便及时采取措施解决问题。

可视化：Collectd可以与各种可视化工具集成，以创建漂亮的图表和仪表板，帮助用户更直观地了解系统性能和趋势。

总的来说，Collectd是一个强大的系统监控工具，可以提供实时、准确的系统性能指标，并帮助管理员及时发现和解决潜在问题。它在大型分布式环境和云计算环境中广泛应用，并被认为是一种可靠的解决方案。

二、为什么用这个

需求：我们项目向监控操作系统的CPU、内存、网络、磁盘等到信息。
我之前用过Sigar，一个jar包，引入就可以直接用，之所以不用它原因是，它于2010年停止维护了，所以显得有点老，就没使用它，于是做了Collectd调研，想用它，但是前提是先安装环境。
在这里插入图片描述

三、安装Collectd

3.1 尝试docker安装

  1. 先搜索collectd镜像，结果如图。
docker search collectd

在这里插入图片描述
2. 从dockerHub上看collectd/ci镜像应该是咱们需要的，下载它。

docker pull collectd/ci
  1. 查看镜像是否已经下载好，执行命令，结果如图。
docker images

在这里插入图片描述
4. 执行命令运行它：

docker run  --name my-collectd -v /var/collectd/collectd.conf:/etc/collectd/collectd.conf -v /var/collectd/rrd:/var/lib/collectd/rrd -d collectd/ci:fedora38_x86_64

在这里插入图片描述

5.结果是：显示启动就停止了，我尝试了好几次发现都不行，不知道为啥，所以只能放弃该方式安装部署了。

在这里插入图片描述

3.2尝试执行linux命令一步一步安装

我是参照的这个博主的博客进行尝试安装的 → ：CentOS7下collectd简单安装使用

安装collectd

  1. 安装collectd和epel：
yum -y install epel*
yum -y install collectd
  1. 开启服务并设置开机启动
systemctl start collectd
systemctl enable collectd
  1. 设置配置文件，默认的配置文件/etc/collectd.conf，收集的数据通过不同的收集插件定义，默认collectd收集的数据有。
LoadPlugin cpu
LoadPlugin interface
LoadPlugin load
LoadPlugin memory

无注释表示启用了该插件。
#表示该插件开发完毕，可以使用（需要下载相应的插件包，然后取消注释）
##表示该插件还未完成，无法使用。
默认收集间隔是 10s一次
每个插件都有单独的配置，不设置就使用插件的默认配置。

  1. 设置将日志写入单独的日志文件，编辑配置文件。
vim /etc/collectd.conf 

#LoadPlugin syslog
LoadPlugin logfile

<Plugin logfile>
        LogLevel info
        File "/var/log/collectd.log"
        Timestamp true
        PrintSeverity false
</Plugin>
  1. 重启collectd
systemctl restart collectd
  1. 查看日志
tail -f /var/log/collectd.log 

[root@client2 ~]# tail -f /var/log/collectd.log 
Jan  4 14:24:24 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:24 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:24 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:24 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:24 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:24 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:24 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:24 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:24 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:24 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:34 client2 collectd[10794]: Filter subsystem: Built-in target `write': Dispatching value to all write plugins failed with status 2 (ENOENT). Most likely this means you didn't load any write plugins.
Jan  4 14:24:34 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:34 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:34 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:34 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:34 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:34 client2 collectd[10794]: Available write targets: [none]
Jan  4 14:24:34 client2 collectd[10794]: Available write targets: [none]

注意：collectd必须要设置一个write pulgin 写插件，可以将收集的数据写入日志、rdd文件、server端、influxdb数据库。总之必须设置一个，不然collectd无用。

设置将数据写入日志文件

  1. 一般是不会写入日志文件当作write pulgin的。只是用来测试数据收集是否成功。编辑配置文件。
vim /etc/collectd.conf 

LoadPlugin write_log
  1. 重启collectd
systemctl restart collectd
  1. 查看日志
[root@server ~]# tail -f /var/log/collectd.log 

[2021-01-04 14:39:37] write_log values:
server.memory.memory-free 248778752 1609742377

[2021-01-04 14:39:37] write_log values:
server.memory.memory-slab_unrecl 41025536 1609742377

[2021-01-04 14:39:37] write_log values:
server.memory.memory-slab_recl 39510016 1609742377

[2021-01-04 14:39:47] write_log values:
server.cpu-0.cpu-user 2452 1609742387

[2021-01-04 14:39:47] write_log values:
server.cpu-0.cpu-system 2868 1609742387

[2021-01-04 14:39:47] write_log values:
server.cpu-0.cpu-wait 2547 1609742387

[2021-01-04 14:39:47] write_log values:
server.cpu-0.cpu-nice 153 1609742387

[2021-01-04 14:39:47] write_log values:
server.cpu-0.cpu-interrupt 0 1609742387

[2021-01-04 14:39:47] write_log values:
server.cpu-0.cpu-softirq 77 1609742387

[2021-01-04 14:39:47] write_log values:
server.cpu-0.cpu-steal 0 1609742387

[2021-01-04 14:39:47] write_log values:
server.cpu-0.cpu-idle 241882 1609742387

[2021-01-04 14:39:47] write_log values:
server.interface-lo.if_packets.rx 0 1609742387
server.interface-lo.if_packets.tx 0 1609742387

可以看到数据成功写入日志文件了。

注意：到这里之前基本很多人都能按照博客执行成功，而后面开始安装rrd插件开始就会出现各种问题了。

设置将数据写入rrd文件。

collectd将数据以rrd文件形式保存，需要相应的rrdtool包。除了基本的几个，其余的collectd插件基本都需要单独安装插件包才能使用。

先介绍下rrd是干啥用的，如图，所以有必要开启

在这里插入图片描述

  1. 我试过执行命令：yum -y install collectd-rrdtool，这一步我就不成功，报错如图
[root@repository var]# yum -y install collectd-rrdtool.x86_64
已加载插件：fastestmirror, langpacks
Loading mirror speeds from cached hostfile
 * epel: mirrors.tuna.tsinghua.edu.cn
正在解决依赖关系
--> 正在检查事务
---> 软件包 collectd-rrdtool.x86_64.0.5.8.1-1.el7 将被 安装
--> 正在处理依赖关系 librrd_th.so.4()(64bit)，它被软件包 collectd-rrdtool-5.8.1-1.el7.x86_64 需要
--> 解决依赖关系完成
错误：软件包：collectd-rrdtool-5.8.1-1.el7.x86_64 (epel)
          需要：librrd_th.so.4()(64bit)
 您可以尝试添加 --skip-broken 选项来解决该问题
** 发现 21 个已存在的 RPM 数据库问题， 'yum check' 输出如下：
7:device-mapper-1.02.170-6.el7.x86_64 是 7:device-mapper-1.02.158-2.el7.x86_64 的副本
7:device-mapper-event-1.02.170-6.el7.x86_64 是 7:device-mapper-event-1.02.158-2.el7.x86_64 的副本
7:device-mapper-event-libs-1.02.170-6.el7.x86_64 是 7:device-mapper-event-libs-1.02.158-2.el7.x86_64 的副本
7:device-mapper-libs-1.02.170-6.el7.x86_64 是 7:device-mapper-libs-1.02.158-2.el7.x86_64 的副本
device-mapper-persistent-data-0.8.5-3.el7.x86_64 是 device-mapper-persistent-data-0.8.5-1.el7.x86_64 的副本
ipvsadm-1.27-8.el7.x86_64 是 ipvsadm-1.27-7.el7.x86_64 的副本
kubeadm-1.15.3-0.x86_64 有缺少的需求 kubectl >= ('0', '1.13.0', None)
libseccomp-2.4.3-alt1.x86_64 是 libseccomp-2.3.1-4.el7.x86_64 的副本
libselinux-2.5-15.el7.x86_64 是 libselinux-2.5-14.1.el7.x86_64 的副本
libselinux-python-2.5-15.el7.x86_64 是 libselinux-python-2.5-14.1.el7.x86_64 的副本
libselinux-utils-2.5-15.el7.x86_64 是 libselinux-utils-2.5-14.1.el7.x86_64 的副本
7:lvm2-2.02.187-6.el7.x86_64 是 7:lvm2-2.02.185-2.el7.x86_64 的副本
7:lvm2-libs-2.02.187-6.el7.x86_64 是 7:lvm2-libs-2.02.185-2.el7.x86_64 的副本
ntp-4.2.6p5-29.el7.centos.2.x86_64 是 ntp-4.2.6p5-29.el7.centos.x86_64 的副本
ntpdate-4.2.6p5-29.el7.centos.2.x86_64 是 ntpdate-4.2.6p5-29.el7.centos.x86_64 的副本
policycoreutils-2.5-34.el7.x86_64 是 policycoreutils-2.5-33.el7.x86_64 的副本
policycoreutils-python-2.5-34.el7.x86_64 是 policycoreutils-python-2.5-33.el7.x86_64 的副本
selinux-policy-3.13.1-268.el7.noarch 是 selinux-policy-3.13.1-252.el7.1.noarch 的副本
selinux-policy-targeted-3.13.1-268.el7.noarch 是 selinux-policy-targeted-3.13.1-252.el7.1.noarch 的副本
sysstat-10.1.5-19.el7.x86_64 是 sysstat-10.1.5-18.el7.x86_64 的副本
yum-utils-1.1.31-54.el7_8.noarch 是 yum-utils-1.1.31-52.el7.noarch 的副本

报错显示：错误：软件包：collectd-rrdtool-5.8.1-1.el7.x86_64 (epel)需要：librrd_th.so.4()(64bit)，然后查询这个“librrd_th.so.4()(64bit)”是啥，如下图：
在这里插入图片描述
2. 于是我尝试执行：sudo yum install rrdtool 和 sudo yum install rrdtool-devel，报错如图

[root@repository var]# yum install rrdtool-devel
已加载插件：fastestmirror, langpacks
Loading mirror speeds from cached hostfile
 * epel: mirrors.tuna.tsinghua.edu.cn
没有可用软件包 rrdtool-devel。
错误：无须任何处理

错误显示：没有rrdtool包或者rrdtool-devel包，说明自己软库中压根没有叫这个名字的包
3. 因此不能采用yum方式安装rrdtool，只能考虑其他方式，比如自己手动下载包安装方式，如下

wget http://mirror.centos.org/centos/7/os/x86_64/Packages/rrdtool-1.4.8-9.el7.x86_64.rpm
  1. 安装rrdtool包
sudo yum install rrdtool-1.4.8-9.el7.x86_64.rpm
  1. 再执行安装collectd-rrdtool
yum -y install collectd-rrdtool
  1. 验证安装是否成功，如图就代表安装成功了
rrdtool --version

在这里插入图片描述
7. 修改配置文件，插件rrdtool设置使用默认的即可

vim /etc/collectd.conf 

LoadPlugin rrdtool

#<Plugin rrdtool>
#       DataDir "/var/lib/collectd/rrd"
#       CreateFilesAsync false
#       CacheTimeout 120
#       CacheFlush   900
#       WritesPerSecond 50
#</Plugin>
  1. 重启服务
systemctl restart collectd
  1. rrd数据保存位置/var/lib/collectd/rrd，查看是否有写入rrd文件，发现确实写入了，只不过文件是二进制的编译乱码而已。

在这里插入图片描述

到这里就说明Collectd服务已经开启了，且能写入rrd文件了，这个rrd文件就是供其他软件查询使用的，比如grafana、influxdb、Prometheus等等使用。

补充：本来想尝试安装collectd-web插件，也就是可视化的collectd的，结果碰到各种安装问题，比如缺少依赖模块等等，导致最终安装不成功，所以就没写。官网的这个图其实就是可视化插件展示的效果。
在这里插入图片描述

刘大猫.
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
CentOS7下collectd简单安装使用
dandanfengyun的博客
01-04 1778
CentOS7安装collected rrd存储数据 前端数据展示。 collection3 设置server client 端。 client 端将数据传输到 server端 直接将数据传输到influxdb数据库 设置virt插件记录kvm虚拟机数据
性能测试——基本性能监控系统使用
python全栈
05-29 490
Collectd 是一个守护(daemon)进程，用来定期收集系统和应用程序的性能指标，同时提供。了以不同的方式来存储这些指标值的机制；InfluxDB 开源的、高性能的时序型数据库。Grafana一个非常酷的数据可视化平台，常常应用于显示监控数据，支持多种数据源。默认用户名核密码：admin、admin。Grafana 中配置Dashboard。容器名字固定叫：influxdb。我新设置的密码为：123456。利用 Docker 部署环境。类型:InfluxDB。
collectd简介
ldw220817的专栏
11-28 3748
collectd是一个守护进程，用来收集系统统计信息通过多种方式使其可用（文件、网络等）。守护进程本身只有给插件载入、查询和提交的功能，除此之外没做其他事情。
系统性能监控利器-collectd详解
第27号专栏
12-17 6774
系统监控是作为网站运维、网站性能优化必不可少的工具，目前比较常用的有Nagios、Cacti以及Zabbix，笔者用过后两个，其中Zabbix确实很强大，web界面操作也比较不错。不过这几个工具安装起来那可并不简单，其中Nagios的复杂那可是出了名的。 插播：关于服务器端监控命令请参考前文《Linux服务器性能追踪以及服务器监控常用命令》 笔者近期一直在尝试用Collectd，一款性
Collectd基本使用
dcldz5007的博客
10-14 630
基本用法 基础环境 操作系统 硬件配置 CentOS 7 Server 磁盘:40GB 内存:8GB 网卡:ens3(外网) 网络配置 # vim ifcfg-ens3 TYPE=Ethernet BOOTPROTO=static DEFROUTE=yes PEERDNS=yes PEERROUTES=yes NAME=ens3 DEVICE=ens3 ONBOOT=...
centos+docker的Calibre-web 个人图书库搭建
更多内容查看博客描述。
12-20 5287
下载镜像 docker pull linuxserver/calibre-web 创建容器 docker create \ --name=calibre-web \ -e PUID=1000 \ -e PGID=1000 \ -e TZ=Europe/London \ -p 8088:8083 \ -e DOCKER_MODS=linuxserve...
centos7.9离线安装PHP环境依赖
03-22
这篇文章将详细讲解如何在CentOS 7.9上离线安装PHP环境，以及所需的依赖文件。 首先，PHP（Hypertext Preprocessor）是一种广泛使用的开源服务器端脚本语言，主要用于Web开发，可以嵌入到HTML中。在CentOS 7.9上...
Centos7.9安装部署Zabbix6
06-21
Centos7.9安装部署Zabbix6，需要安装包的发邮箱，文件里面包含邮箱地址
Centos7.9安装配置vsftpd
09-28
CentOS 7.9 安装配置 vsftpd 在本文中，我们将详细介绍如何在 CentOS 7.9 上安装和配置 vsftpd，以实现匿名用户的上传和下载操作。 一、关闭防火墙 在配置 vsftpd 之前，需要关闭防火墙，以免防火墙的限制导致-...
centos7.9 自动安装mysql8.0.33，附带脚本
08-09
centos7.9 自动安装mysql8.0.33，附带脚本
Centos7.9安装zabbix6.0LTS版
02-25
CentOS 7.9 安装 Zabbix 6.0 LTS 版 Zabbix 是一个基于 Web 的网络监控系统，能够实时监控服务器、网络设备和应用程序的状态。下面是 CentOS 7.9 安装 Zabbix 6.0 LTS 版的详细步骤。 安装 Nginx 首先，需要安装 ...
Centos系统下安装collectd
qq_29859617的博客
11-12 1566
一、本机配置： Linux version 2.6.32-504.el6.x86_64   CentOS release 6.6 (Final) Kernel \r on an \m 二、下载collectd最新安装包 访问官网：https://collectd.org/documentation.shtml，最左边Download，下载最新版本压缩包collectd-5.8.1.tar...
centos7 安装Calibre搭建一个家用电子图书馆
xjlincoln的博客
01-05 3924
centos7 安装Calibre Binary install calibre has a binary install that includes private versions of all its dependencies. It runs on 32-bit and 64-bit Intel compatible machines. To install or upgrade, simply copy paste the following command into a termina.
kolla部署collectd，telegraf，influxdb，grafana监控openstack虚拟机和宿主机状态
dandanfengyun的博客
04-23 1768
之前使用collectd+influxdb+grafana监控虚拟的状态。设置collectd直接将数据传入influxdb。 需要自己找collectd的types.db文件格式供influxdb使用。且需要将types.db文件手动写入influxdb容器内，influxdb容器才能成功运行。 https://blog.csdn.net/dandanfengyun/article/details/113510416 https://blog.csdn.net/dandanfengyun/article/
CollectD: 监控系统性能数据的强大工具
最新发布
gitblog_00082的博客
03-16 398
CollectD: 监控系统性能数据的强大工具 CollectD 是一款开源的监控系统性能数据的工具。它能够收集并记录各种系统的性能指标，包括CPU、内存、磁盘I/O、网络流量等，并将这些数据存储在数据库中供后续分析。 功能与应用场景 数据收集 CollectD 支持多种插件，可以对各类系统资源进行监控，包括 CPU 使用率、内存使用量、磁盘 I/O 操作、网络流量等。你可以根据需求安装相应的插件...
collectd mysql_Grafana & Graphite & Collectd：监控系统
weixin_35648005的博客
03-03 164
简介监控是运维工作中的一个重要组成部分，今天介绍一套新的监控工具，方便好用，扩展性强，这套工具有三个组件，Grafana & Graphite & Collectd；Grafana 是一个开源的强有力的数据展示、量化分析工具，数据源包括 graphite、prometheus、mysql、influxdb 等等，可以直接在页面上组装语句，另外还可以对资源实现可用性和性能监控报警，同...
CentOS7使用软件包安装collectd收集libvirt管理的OpenStack虚拟机信息
dandanfengyun的博客
04-13 467
使用kolla部署openstack虚拟机的监控组件collectd influxdb prometheus等时，不知道什么原因，无法收集虚拟机的内存使用信息，只能获取到分配给虚拟机的总内存。 https://blog.csdn.net/dandanfengyun/article/details/114540296 docker exec -it influxdb bash influx -host 192.168.199.90 > use collectd Using database coll
rrdtool读rrdfile和collectd写rrdfile并发处理策略
06-06 309
1. 问题： 当用collectd去监控Application的时候，collectd会周期性的生成rrdfile，这些生成的rrdfile可以使用rrdtool xport来解析，但是在高并发的情况下，有可能出现collectd写rrdfile的同时，rrdtool xport来读这些rrdfile，这些时候就会出现如下异常： Premature end of file 2.解
使用collectd与visage收集kvm虚拟机性能实时图形
weixin_33693070的博客
02-24 152
软件功能： 通过collectd软件来监控收集kvm虚拟机的性能数据，包含cpu，memory、磁盘IO、网络流量等 通过visage软件将收集到的数据绘制图形。 安装： 系统环境：ubuntu12.04 collectd 首先、在collectd官网下载collectd包collectd-5.4.0 安装collectd依赖包 apt-get install ...
安装centos7.9服务器版本
02-02
安装 CentOS 7.9 服务器版本的步骤如下： 1. 首先，从 CentOS 官方网站下载 CentOS 7.9 的 ISO 镜像文件。你可以在官方网站的下载页面找到适合你的服务器架构的镜像文件。 2. 将下载好的 ISO 镜像文件写入到一个可...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

刘大猫.

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值