logrotate测试_「测试」 - 测试环境接入netdata监控

最新推荐文章于 2021-07-08 15:29:49 发布
最新推荐文章于 2021-07-08 15:29:49 发布
阅读量176 收藏 1
点赞数
文章标签： logrotate测试
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_28716181/article/details/112238578
版权

一、netdata概述

由于今年的大环境原因，公司也是开源节流，不再增加测试服务器的审批，要物尽其用。所以对机器资源的利用率得提高，还是需要把机器资源监控起来。

之前在测试环境搭建过zabbix，但是因为服务器物理硬件损坏，这个监控就不了了之了。相比起搭建PHP的Zabbix，找了一款更为方便的监控工具Netdata。

Netdata是一款秒级数据收集与可视化呈现的Linux服务器性能监测工具，对优化应用性能，保证服务器健康运行有着极为重要的作用。

Netdata特点：

  • 高实时性，Netdata及插件为C编写，资源占用及效率都符合要求
  • 不占系统IO，除日志系统，Netdata不使用任何磁盘的IO资源，也可以通过配置文件禁用日志系统
  • 不需要root权限
  • 自带Web服务
  • 安装便捷、开箱即用，不需要额外写任何配置
  • 动态图表化显示
  • 告警系统，通过配置文件，可以配置Netdata在某些指标达到阀值时进行告警

具体参考Netdata的GitHub以及官方文档。

二、安装

A、公网安装（168环境）

# 安装依赖
yum install -y autoconf automake curl gcc git libmnl-devel libuuid-devel lm_sensors make MySQL-python nc pkgconfig python python-psycopg2 PyYAML zlib-devel

# 拉取git仓库
git clone https://github.com/netdata/netdata.git --depth=1

# 执行安装脚本
./netdata-installer.sh

# 执行中提示
It will be installed at these locations:

   - the daemon     at /usr/sbin/netdata
   - config files   in /etc/netdata
   - web files      in /usr/share/netdata
   - plugins        in /usr/libexec/netdata
   - cache files    in /var/cache/netdata
   - db files       in /var/lib/netdata
   - log files      in /var/log/netdata
   - pid file       at /var/run/netdata.pid
   - logrotate file at /etc/logrotate.d/netdata

B、内网安装（132环境）

# 132机器内网拷贝
scp -r root@10.255.242.168:/var/www/netdata /data01/soft/

# 内网环境，需要在内网部署以下文件，修改启动脚本HOST
go.d.plugin-v0.4.0.linux-amd64
config.tar.gz

# 修改ngxix.conf
server {
    listen       8001;
    server_name  10.255.242.135;
    charset utf-8;               # 避免中文乱码
    location / {
        root /data01/app/;       # 存放文件的目录
        autoindex on; # 索引
        autoindex_exact_size on; # 显示文件大小
        autoindex_localtime on;  # 显示文件时间
    }
}

vim netdata-installer.sh
http://10.255.242.135:8001/netdata/go.d.plugin/releases/download/v0.4.0/go.d.plugin-v0.4.0.linux-amd64
http://10.255.242.135:8001/netdata/go.d.plugin/releases/download/v0.4.0/config.tar.gz

# 同公网执行后续

三、集群

Netdata本身不存在主从服务，搭建集群需要在每一个节点上完整部署Netdata，流数据汇总到一台主服务器上。数据处理全部在主服务器上进行，各个节点服务器不打开19999端口供查看，只是把收集到的数据发送到主服务器上，具体参考官网文档。

A、从节点服务器

1、修改netdata.conf

vim netdata.conf

[global]
    memory mode = none
    hostname = slave-132
[web]
    mode = none
[health]
    enabled = no

关闭web，增加主机名。

2、新增stream.conf

vim stream.conf  

[stream]
    enabled = yes
    destination = 10.255.242.168:19999
    api key = 23f03114-33e9-43ed-9881-a590b8b91b6e

destination为主服务器的IP地址和netdata端口（默认19999）；api key是一个uuid格式的字符串，可以使用uuidgen命令生成，主服务器需要使用。

B、主服务器

1、修改netdata.conf

vim netdata.conf
[global]
     hostname = Master

2、新增stream.conf

vim stream.conf

[23f03114-33e9-43ed-9881-a590b8b91b6e]
    enabled = yes
    default history = 3600
    default memory mode = save
    health enabled by default = auto
    allow from = *

API_KEY对应节点服务器的api key（uuid）。

C、重启主从服务

# CentOS 6
service netdata restart

# CentOS 7
systemctl restart netdata

访问http://IP:19999/访问即可，看到监控数据，在左上角可以对集群机器进行切换。

4977ff305ede3583d5c8a885be752e5f.png

四、Grafana接入

Netdata的内容太全了，以至于不好确认重点，但是不会js，所以也没法定制开发dashboard。

在官方文档看上下图，可以接入Grafana，上手搞起。

4fcc2cb150aee639be188797bb5a9548.png

A、安装InfluxDB

sudo vi  /etc/yum.repos.d/influxdb.repo
[influxdb]
name = InfluxDB Repository
baseurl = https://repos.influxdata.com/rhel/7/x86_64/stable/
enabled = 1
gpgcheck = 1
gpgkey = https://repos.influxdata.com/influxdb.key

yum makecache

yum -y install influxdb

B、修改netdata.conf配置

vim /etc/netdata/netdata.conf
[backend]
enabled = yes
type = opentsdb
destination = localhost:4242

C、修改influxdb.conf配置

vim /etc/influxdb/influxdb.conf
[[opentsdb]]
enabled = true
bind-address = ":4242"
database = "opentsdb"

D、重启Netdata和InfluxDB

systemctl restart influxdb
systemctl restart netdata

E、登录InfluxDB查看是否成功建库

influx

Connected to http://localhost:8086 version 1.7.6
InfluxDB shell version: 1.7.6
Enter an InfluxQL query

> SHOW DATABASES
name: databases
name
----
_internal
opentsdb

> USE opentsdb
Using database opentsdb

> SHOW MEASUREMENTS LIMIT 10
name: measurements
name
----
netdata.apps.cpu.apps.plugin
netdata.apps.cpu.build
netdata.apps.cpu.containers
netdata.apps.cpu.cron
netdata.apps.cpu.email
netdata.apps.cpu.go.d.plugin
netdata.apps.cpu.java
netdata.apps.cpu.kernel
netdata.apps.cpu.ksmd
netdata.apps.cpu.logs

78d4f6b842ec3599883621ca4f046e77.png

已经能把数据写入db，后续只要配置Grafana展示数据即可。

工具链接：https://github.com/CymaticLabs/InfluxDBStudio/releases/tag/v0.2.0-beta.1

F、配置Grafana

# grafana 6下载
wget https://dl.grafana.com/oss/release/grafana-6.1.6-1.x86_64.rpm 
sudo yum localinstall grafana-6.1.6-1.x86_64.rpm 

# 重启grafana 
systemctl restart grafana-server

登录http://10.255.242.168:3000，默认密码admin/admin，登陆后修改即可。

后续操作不想截图了，参考文末最后三个URL，里面有详细步骤及截图。

后续有什么调整，再继续补充。

netdata原生：http://10.255.242.168:19999

14d8a628cd41f2da0fe641c0683a6b48.png

Grafana接入：http://10.255.242.168:3000

c277c1ec1941e6cd467c26023164748e.png

五、踩坑

A、Netdata安装文件使用了netstat用户及用户组，如果通过root修改了web目录下的js，需要重新赋予权限。否则会报Cannot load required JS library netdata错误。

/usr/share/netdata/web
localhost netdata/web » chown netdata dashboard_info.js dashboard_info_custom.js
localhost netdata/web » chgrp netdata dashboard_info.js dashboard_info_custom.js

涉及到自定义dashboard，都会尝试修改js，看来不只一个人踩坑。

https://github.com/netdata/netdata/issues/2445

https://github.com/netdata/netdata/issues/3104

B、自定义dashboard

Customizing the standard dashboards

Charts information is stored at /usr/share/netdata/web/dashboard_info.js. This file includes information that is rendered on the dashboard, controls chart colors, section and subsection heading, titles, etc.

If you change that file, your changes will be overwritten when Netdata is updated. You can preserve your settings by creating a new such file (there is /usr/share/netdata/web/dashboard_info_custom.example.js you can use to start with).

You have to copy the example file under a new name, so that it will not be overwritten with Netdata updates.

To configure your info file set in netdata.conf:

[web] 
custom dashboard_info.js = your_file_name.js

参考：

https://docs.netdata.cloud/

https://github.com/netdata/netdata

https://github.com/netdata/netdata/wiki

https://github.com/netdata/netdata/blob/master/docs/Add-more-charts-to-netdata.md#add-more-charts-to-netdata

https://github.com/netdata/netdata/tree/master/health#Health-monitoring

https://kiswo.com/article/1020

https://kmonsoor.github.io/netdata-influx-grafana/

https://computingforgeeks.com/monitor-linux-server-with-netdata-and-grafana/

https://blog.sqdyy.cn/2018/05/13/ops-telegraf-influxdb-grafana/

niudrw
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Ruoyi-Cloud-Plus_使用Docker部署分布式微服务系统_环境准备_001---SpringCloud工作笔记200
添柴程序猿的专栏
03-28 838
可以执行这个去下载docker-compose,下载指定版本的,下载到对应的/usr/local/bin/docker-compose中。这个配置好以后,然后报错了,执行systemctl restart docker的时候,是因为上面的,内容写的不对,缺少左边的{}了。启动后,执行docker run hello-world验证一下试试.去编辑上面的文件,这个文件第一次会不存在,不用管直接编辑就行。二.再去安装docker-compose。如果需要安装自己需要的版本可以。需要安装的东西不少,需要等待。
Centos7使用docker搭建fastdfs及windows 10安装fdfs_client-py-master.zip错误记录
m0_54866636的博客
05-14 614
fastdfs的安装配置比较复杂，不过网上有人做的docker可以直接拿来用，记录下过程。 一、Centos7安装docker 安装步骤参照清华源说明：https://mirrors.tuna.tsinghua.edu.cn/help/docker-ce/ （一）如果之前安装过 docker，请先删掉 sudo yum remove docker docker-client docker-client-latest docker-common docker-latest docker-latest-logr
NetData_Server远程访问ACCESS
11-21
第一步，建立服务器端。 新建一个窗体，引用NetData_Server后，在窗体中放入一个NetDataServer1 1. 在Form_Load事件中加入: NetDataServer1.Start "Provider=Microsoft.Jet.OLEDB.4.0;Data Source=DATA.mdb;", "8080"（8080为端口号，可以随意修改成您需要的） 2. 在Form_Unload事件中加入： NetDataServer1.Down '关闭服务,释放内存... 这样服务端就完成了！！很简单吧。。。。 ———————————————————————————————————————————————————— 第二步，修改客户端。 单机版中的连接字串符： 取消：CONN.OPEN "provider=Microsoft.jet.OLEDB.4.0;data source=D:\sys\data\data.mdb" 改成：NetDataClient1 .Start "192.168.0.1", "8080" 把CONN.Close 改成 NetDataClient1.Down 其他代码保持不变，这样就完成了客服端的升级！！！ ———————————————————————————————————————————————————— 要点： 1.服务器端，把数据库文件MDB放到与服务端程序同一文件夹里。 2.客户端如果有多个窗体，连接时要加窗体名如：Form1.NetDataClient1 .Start "192.168.0.1", "8080" （NetDataClient1 .Start "服务器IP地址", "端口号"）也可放到模块里定义成共用的。 3.开启服务器端后,客户端方可正常工作
netdata监控mysql_精致的系统监控工具-netdata
weixin_30658759的博客
02-07 353
今天在网上瞎逛，偶然发现一款监控工具：netdata，感到一惊，监控工具竟然可以这么漂亮！简单了解一下，这款工具还算比较新，监控系统运行状态的功能非常强大，除了监控cpu，网卡，磁盘，内存，进程等等之外，甚至能监控系统的cpu中断，上下文切换等等非常深入的系统运行状态。新版本还支持监控常用的web服务、比如Nginx、Mysql、Mongodb、Postgres、Redis、memcached、e...
netdata mysql_Netdata Mysql运行情况监控插件
weixin_36330260的博客
01-19 168
#!/bin/bash# http://dev.mysql.com/doc/refman/5.0/en/server-status-variables.html## https://dev.mysql.com/doc/refman/5.1/en/show-status.html# SHOW STATUS provides server status information (see Section...
netdata 监控 mysql_netdata-linux实时监测工具
weixin_39622150的博客
01-21 249
平台：CentOS 7服务器性能指标在平时运维工作中有着很重要的位置，那么一款靠谱好用的监控软件就非常必要了。监控平台中，我们常见的有zabbix、nagios、cacti等等。今天要说的是一个比较新的软件Netdata。目前来看它的轻量化、实时性都非常不错，但由于仍在发展阶段，作为业务部署还有一些需要添加或改进的功能。netdata.gif特点界面优美：使用 Bootstrap 开发框架界面自定...
p31668908_112040_Linux-x86-64
04-28
在应用补丁前，运维人员需要先确认补丁的适用性、依赖关系以及可能的风险，通常通过阅读补丁文档、执行预安装检查，并在测试环境中验证补丁效果。 综上所述，Linux运维是一个多方面且细致入微的工作，涉及到多个...
logrotate测试_logrotate日志切割
weixin_39805851的博客
12-20 123
最近在搭建日志收集平台，将linux的部分日志收集到elasticsearch上通过kibana进行搜索展现，基本上是标准的ELK架构，但是agent端复用了已有的flume。在功能测试的时候，是将本地messages日志备份出来对备份的日志进行了切割测试。经过一周测试终于完成了，当时的内心是：日志的切割，采用了linux自带的logrotate进行日志的切割。配置就不放了，主要就是去切割指定的文...
logrotate测试_logstash 用 logrotate 来做日志切分
weixin_39982017的博客
12-20 297
简介：logrotate 是一个日志切分工具。一般要结合cron一起工作。logstash 是日志集中管理工具，但输出到文件时不能自动按大小切分(目前只能按日期)系统实例：比如系统的messege/cron/secure 都是cron + logrotate(一周跑一次)[root@mreald.comlogstash_conf]#ls/var/log/mess*-1/var/log/me...
netdata, 控制你的服务器 简单有效有效的https ！.zip
10-10
netdata, 控制你的服务器 简单有效有效的https ！ netdata 这是新的这里是一个现场演示：？ http://my-netdata.io收费 netdata 是一个系统，用于为分布式实时性能和运行状况监视服务提供收费。 它为运行在实时运行的系统上的所有内容提供了
dashboard:Netdata 代理的 UI
07-23
Netdata 仪表板和云图的 UI 可用脚本 npm run start:dashboard 在开发模式下启动仪表板。 打开在浏览器中查看。 确保 Netdata 在下运行。 npm run start:node-view 启动仅运行 Node-View 组件的应用程序。 这用于开发用于云目的的组件。 npm run start:tv 使用 tv.html 启动应用程序，作为开发模式下的静态（自定义）仪表板。 npm test 在交互式观察模式下启动测试运行器。 npm run lint 运行短绒检查。 在 GH Actions 管道中运行相同的任务。 npm run build 将用于生产的仪表板构建到build文件夹。 它在生产模式下捆绑 React 并优化构建以获得最佳性能。 构建被缩小，文件名包括哈希值。
vb6远程数据访问控件(netdata)
05-22
使用Netdata控件只需增加两行代码，即可将您的Vb6+Access单机版软件升级为可用于internet的网络版。 注：Netdata提供了VB6在Internet环境下访问远程数据库最高效的实现。
Linux服务器监控的神器：Netdata
热门推荐
ywheel的专栏
03-27 2万+
请访问我的独立博客查看文章： http://blog.ywheel.cn/post/2017/03/26/netdata/ 由于工作的关系，最近在思考如何做集群、服务器的监控。在网上东转转西转转，偶然发现了一个单机监控的2016新秀Netdata，眼前着实为之一亮。 令人印象非常之深刻的个主要特性： 界面酷炫，实时监控 零配置，即装即用 官网地址在这里： https://my-netdata.io/
【Netdata】性能监测工具介绍、安装、使用
仙女肖消乐的博客
07-08 1万+
一、工具介绍 Netdata是一款Linux系统实时性能监测工具，以web的可视化方式展示系统及应用程序的实时运行状态。前端响应快，UI很整洁，操作方面，支持图表重置，缩放。具体优点如下： 界面酷炫：interactive bootstrap dashboards，也可使用简单的HTML代码去自定义控制界面 运行高效：C编写，每秒采集数千个指标，但仅占cpu单核1%，少量MB的内存以及完全没有磁盘IO 零配置：安装即监控 零依赖：有自己的静态网络文件和网络接口拥有自己的网络服务器 可扩展：使用自
netdata 监控（可应用集群）
叫我酋长好吧
08-20 7514
一、natdata 概述： Netdata是一款秒级数据收集与可视化呈现的Linux服务器性能监测工具，对优化应用性能，保证服务器健康运行有着极为重要的作用,它可以监控服务器的健康运行参数及状态，包括CPU,内存，网络，磁盘等常用的监控指标，以及自己配置扩展监控项，如，redis, tomcat, mysql, nginx, elasticsearch等 Netdata特点： 高实时性，Netda...
Netdata安装和使用（Linux 性能实时监测工具）
ww1991ww的博客
04-15 917
Netdata 是一款 Linux 性能实时监测工具.。以web的可视化方式展示系统及应用程序的实时运行状态（包括cpu、内存、硬盘输入/输出、网络等linux性能的数据）。 Netdata文档地址：https://github.com/firehol/netdata/wiki   运行效果图如下：       目前是1.0版本，体积小巧只有1.5M，安装简单，即装即用。   ...
Netdata监控安装（汉化）
Bruce小鬼
07-12 4737
Netdata监控安装（汉化） 文章目录 Netdata安装部署<内网> 软体下载 修改脚本 部署安装 集群配置 监控配置 启动环境 降低CPU占用 Docker数据缺失 本教程主要描述内网环境下netdata汉化版本的安装过程 Netdata安装部署<内网> 软体下载 1、Netdata主程序： https://github.co...
开源运维监控框架Netdata——实时监控系统性能
weixin_44777680的博客
09-23 2270
通常来说，作为一个Linux的SA，很有必要掌握一个专门的系统监控工具，以便能随时了解系统资源的占用情况。下面就介绍下一款Linux性能实时监测工具-Netdata，它是Linux系统实时性能监测工具，以web的可视化方式展示系统及应用程序的实时运行状态（包括cpu、内存、硬盘输入/输出、网络等linux性能的数据）。Netdata的web前端响应很快，而且不需要Flash插件。 UI很整洁，保持着 Netdata 应有的特性。第一眼看上去，你能够看到很多图表，幸运的是绝大多数常用的图表数据（像 CPU，R
logrotate测试_如何检测 logrotate 的错误
最新发布
05-19
使用命令 `tail -f /var/log/messages` 或 `tail -f /var/log/syslog` 可以实时监控日志文件，查看是否有 logrotate 的错误。 2. 手动运行 logrotate：可以手动运行 logrotate，使用命令 `logrotate -d /etc/...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值