rrdtool的使用介绍

最新推荐文章于 2021-02-11 08:30:39 发布
最新推荐文章于 2021-02-11 08:30:39 发布
阅读量318 收藏 1
点赞数
分类专栏： 运维 文章标签： rrdtool
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sifeimeng/article/details/84763415
版权

rrdtool的使用介绍

位于分类 python

rrdtool的介绍

rrdtool (round robin database)工具为环状数据库的存储格式。round robin 是一种处理定量数据以及当前元素指针的技术。rrdtool主要用来跟踪对象的变化情况，生成这些变化的走势图，比如业务的访问流量，系统性能，磁盘利用率等趋势图，很多流行监控平台都使用到了rrdtool,比较有名的有cacti，ganglia，monitorix等。官网：http://oss.oetiker.ch/rrdtool/。本篇文章主要讲解python关于rrdtool的常用方法，包括create，fetch,graph,info,update等。

  • rrdtool的特点
  1. 首先 RRDtool 存储数据，扮演了一个后台工具的角色。但同时 RRDtool 又允许创建图表，这使得RRDtool看起来又像是前端工具。其他的数据库只能存储数据，不能创建图表。
  2. RRDtool 的每个 rrd 文件的大小是固定的，而普通的数据库文件的大小是随着时间而增加的。
  3. 其他数据库只是被动的接受数据， RRDtool 可以对收到的数据进行计算，例如前后两个数据的变化程度（rate of change），并存储该结果。
  4. RRDtool 要求定时获取数据，其他数据库则没有该要求。如果在一个时间间隔内（heartbeat）没有收到值，则会用 UNKN (unknow)代替，其他数据库则不会这样。
  • 安装
  1. 如果是linux，请先安装librrd-dev包，命令apt-get install librrd-dev
  2. 如果是mac，使用homebrew安装，sudo brew upadte,sudo brew install rrdtool 会提醒先让安装Caskroom/cask/xquartz,然后重新执行sudo brew install rrdtool。

  然后可以通过easy_install python-rrdtool或这使用pip install python-rrdtool。

 

rrdtool模块常用方法说明

rrdtool模块常用的方法包括create(创建rrd)，update(更新rrd)，graph（绘图），fetch（查询rrd）。

  • create
rrdtool create filename
[--start|-b start time]
[--step|-s step]
DS:ds-name:DST:dst arguments #最后获取的数据是PDP，更新数据时要考滤DS顺序(*把所有要更新的数据，按照DS定义的顺序用冒号格开*)
RRA:CF:cf arguments #最后获取的数据是CDP,绘图时使用的是这些数据

create是创建RRD数据库

参数详解：

  1. filename:创建的rrdtool数据库文件名，默认后缀为.rrd
  2. --start 表示第一条记录的开始时间，必须是timestamp的格式
  3. --step 表示数据写频率，单位是秒。默认是5分钟
  4. DS：DS 用于定义 Data Soure 。也就是用于存放结果的变量名。DS是用来申明数据源的，也可以理解为申明数据变量，也就是你要检测的端口对应的变量名，这个参数在画图的时候还要使用的。格式：DS:ds-name:GAUGE | COUNTER | DERIVE | ABSOLUTE:heartbeat:min:max
  5. DST 就是DS的类型。有 COUNTER（递增类型）、GUAGE（收到值直接存入RRA）、DERIVE（可递增可递减类型）、ABSOLUTE（假定前一个时间间隔的值为0，在计算平局值）、COMPUTE（定义一个表达式，引用DS并自动计算出某个值） 5种
  6. RRA 用于指定数据如何存放。我们可以把一个RRA 看成一个表，各保存不同 interval 的统计结果，为CF做数据合合并提供依据。RRA的作用就是定义更新的数据是如何记录的。比如我们每5分钟产生一条刷新的数据，那么一个小时就是12条。每天就是288条。这么庞大的数据量，一定不可能都存下来。肯定有一个合并（consolidate）数据的方式，那么这个就是RRA的作用了。格式：RRA:AVERAGE | MIN | MAX | LAST:xff:steps:rows。
  7. PDP：Primary Data Point 。正常情况下每个 interval RRDtool 都会收到一个值；RRDtool 在收到脚本给来的值后会计算出另外一个值（例如平均值），这个 值就是 PDP ；这个值代表的一般是“xxx/秒”的含义
  8. CF：CF 就是 Consolidation Function 的缩写。也就是合并（统计）功能。有 AVERAGE、MAX、MIN、LAST 四种分别表示对多个PDP 进行取平均、取最大值、取最小值、取当前值四种类型。

案例：

#获取当前时间戳，作为rrd的开始时间
cur_time=str(int(time.time()))
#数据写频率 --step 300秒，
rrd=rrdtool.create('Flow.rrd','--step','300','--start',cur_time,
        #DS表示这个为DS表达式:eth0_in 数据域命名：counter是递增模式：600是心跳值，如果600秒没有收到值，用UNKNOWN代替：min 允许存放的最小值，此例允许最小为0：max 允许存放的最大值，U即Unknown，表示不限制
        'DS:eth0_in:COUNTER:600:0:U',
        'DS:eth0_out:COUNTER:600:0:U',
        # AVERAGE表示平均：xff定义为0.5，表示当一个cdp中的pdp值超过一半为unknown，则该cdp的值就被标识为unknown
        'RRA:AVERAGE:0.5:1:600',
	)

 

  • update

用法：

rrdtool update filename [--template|-t ds-name[:dsname]...] N|timestamp:value[:value...]

update是存储一个新值到rrdtool数据库，updatev​和update类似，区别是每次插入后会返回一个状态码，以便了解是否成功（updatev用0表示成功，-1表示失败）

参数说明

  1. filename是指定存储数据到的目标rrd文件名。比如上面实例的Flow.rrd
  2. -t ds-name 指定需要更新的DS名称。比如上面的eth0_in
  3. N|timetamp 表示数据采集的时间戳，N表示当前的时间戳，value表示更新的数据值，多个DS多个值

案例：

rrdtool update Flow.rrd N:60723022:102384

N表示当前时间，后面的值分别对应eth0_in 和 eth0_out的值。

  • graph

用法：

rrdtool graph filename [option ...]

graph是根据指定的rrdtool数据库进行绘图，这个参数比较多,直接在命令行，敲出 rrdtool graph即可。

因为这个参考比较多，在后面的实例来说明。

 

  • fetch

fetch查看rrd文件的数据

用法：

rrdtool fetch filename.rrd CF [-r|--resolution resolution] 
     [-s|--start start] [-e|--end end][--daemon <address>]

 

实践：实现网卡流量图标绘制

  • 创建rrd数据库
# -*- coding: utf-8 -*-
#!/usr/bin/python
import rrdtool
import time

#获取当前时间戳，作为rrd的开始时间
cur_time=str(int(time.time()))
#数据写频率 --step 300秒，
#counter是递增模式

rrd=rrdtool.create('Flow.rrd','--step','300','--start',cur_time,
        'DS:eth0_in:COUNTER:600:0:U',#600是心跳值，如果600秒没有收到值，用UNKNOWN代替
        'DS:eth0_out:COUNTER:600:0:U',#最大值用U代替，表示不确定
        'RRA:AVERAGE:0.5:1:600',
	'RRA:AVERAGE:0.5:6:700',#xff定义为0.5，表示当一个cdp中的pdp值超过一般为unknown，则该cdp的值就被标识为unknown
	'RRA:AVERAGE:0.5:24:775',
	'RRA:AVERAGE:0.5:288:797',
	'RRA:MAX:0.5:1:600',
	'RRA:MAX:0.5:6:700',
	'RRA:MAX:0.5:24:775',
	'RRA:MAX:0.5:444:797',
	'RRA:MIN:0.5:1:600',
	'RRA:MIN:0.5:6:700',
	'RRA:MIN:0.5:24:775',
	'RRA:MIN:0.5:444:797')
if rrd:
    print rrdtool.error()

# AVERAGE:平均值 MAX：最大值 MIN：最小值 LAST：最新值。
#'RRA:AVERAGE:0.5:1:600' 每隔5分钟（1*300秒）存一次数据的平均值，存600笔，即2.0.8天

 

  • 采用updatev方法更新rrd数据库。网卡流量通过psutil模块获取
# -*- coding: utf-8 -*-
#!/usr/bin/python
import rrdtool
import time,psutil
import os

total_input_traffic = psutil.net_io_counters()[1]
total_output_traffic = psutil.net_io_counters()[0]
starttime=int(time.time())

BASE_DIR = os.path.dirname(os.path.abspath(__file__))
print BASE_DIR

update=rrdtool.updatev(BASE_DIR+'/Flow.rrd','%s:%s:%s' % (str(starttime),str(total_input_traffic),str(total_output_traffic)))
print update

将代码加入crontab,并配置5分钟作为采集频率，使用crontab -e来添加

*/5 * * * * /usr/bin/python /Users/zhangxueyuan/Monitor/pyauto-master/3/rrdtool/update.py > /dev/null 2>&1

 

  • 采用graph方法绘制图表
# -*- coding: utf-8 -*-
#!/usr/bin/python
import rrdtool
import time

#定义图标上方大标题
#重点解释 "--x-grid" 
#"MINUTE:12" 表示控制每隔12分钟，HOUR:1 表示控制每隔1小时放置一根主要格线，HOUR：1 表示控制1个小时输出一个label标签
#0:%H 0表示数字对齐格线，%H表示标签以小时显示
title="Server network  traffic flow ("+time.strftime('%Y-%m-%d',time.localtime(time.time()))+")"
rrdtool.graph( "Flow.png", "--start", "-1d","--vertical-label=Bytes/s","--x-grid","MINUTE:12:HOUR:1:HOUR:1:0:%H",\
 "--width","650","--height","230","--title",title,
 "DEF:inoctets=Flow.rrd:eth0_in:AVERAGE",#指定网卡入流量数据源DS及CF
 "DEF:outoctets=Flow.rrd:eth0_out:AVERAGE",#指定网卡出流量数据源DS及CF
 "CDEF:total=inoctets,outoctets,+",#通过CDEF合并网卡出入流量，得出总流量total
 "LINE1:total#FF8833:Total traffic",#以线条方式绘制总流量
 "AREA:inoctets#00FF00:In traffic",#以面积风湿绘制入流量
 "LINE1:outoctets#0000FF:Out traffic",#以线条方式绘制出流量
 "HRULE:6144#FF0000:Alarm value\\r",#绘制水平线，作为警告线，阈值为6.1 K
 "CDEF:inbits=inoctets,8,*",#将入流量换算成bit，即*8，计算结果给inbits
 "CDEF:outbits=outoctets,8,*",#将出流量换算成bit，即*8，计算结果给outbits
 "COMMENT:\\r",#在网格下方输出一个换行符
 "COMMENT:\\r",
 "GPRINT:inbits:AVERAGE:Avg In traffic\: %6.2lf %Sbps",#绘制入流量平均值
 "COMMENT:   ",
 "GPRINT:inbits:MAX:Max In traffic\: %6.2lf %Sbps",#绘制入流量最大值
 "COMMENT:  ",
 "GPRINT:inbits:MIN:MIN In traffic\: %6.2lf %Sbps\\r",#绘制入流量最小值
 "COMMENT: ",
 "GPRINT:outbits:AVERAGE:Avg Out traffic\: %6.2lf %Sbps",#绘制出流量平均值
 "COMMENT: ",
 "GPRINT:outbits:MAX:Max Out traffic\: %6.2lf %Sbps",#绘制出流量最大值
 "COMMENT: ",
 "GPRINT:outbits:MIN:MIN Out traffic\: %6.2lf %Sbps\\r")#绘制出流量最小值

运行一段时间之后，执行上面的代码将生成一个Flow.png文件，如下图

 

参考 1：<<python自动化运维：技术与最佳实践技术>> 中的第3章 定制业务质量报表详解

参考 2 ：http://freeloda.blog.51cto.com/2033581/1307492

 

转载自：  http://qushouxichuan.com/blog/article/60

hongtoushiziyuan
关注
专栏目录
rrdtool-使用小结与实例
03-18
利用rrdtool开发自己的监控系统,在开发rrdtool时，可以很好的结合自己的需要来定制化开发图
rrdtool使用例子
cjllyl654321的博客
10-25 151
******************** rrdtool使用案例 ******************** 1.创建一个rrd文件 [root@OCM home]# rrdtool create test.rrd --s...
RRDTool工具使用详解
weixin_33968104的博客
06-01 1013
目录1、RRDTool简介2、所需了解的术语3、RRDTool工具绘图流程4、软件安装5、RRDTool绘图工作流程6、实战案例7、总结说明：博文中涉及的图片可能不是博主绘制。1、RRDTool简介 RRDTool是一个强大的绘图引擎，它能把以时间序列的数据用图表的的方式直观的表现出来，是由Tobias Oetiker编写的工具，并且是一款开源、自由的软件，早期的MRT...
RRDtool的用法（结合实例）
weixin_33843947的博客
11-11 139
一、简介RRDtool是指Round Robin Database工具，即环状数据库。从功能上说，RRDtool可用于数据存储+数据展示。著名的网络流量绘图软件MRTG和集群监控系统Ganglia都使用的RRDtool。数据存储方面，RRDtool采用“Round Robin”模式存储数据。所谓“Round Robin”是一种存储数据的方式，使用固定大小的空间来存储数据，并有...
使用RRDTOOL进行绘图
漫步
09-24 4236
如果您不熟悉RRDTOOL，可以先参看前面的RRDTOOL入门，简单来说，RRDTOOL不仅仅是数据库工具，它还是一种强大的前端绘图工具，可以直接根据所存的数据绘出复杂的图形。其绘图主要使用graph命令来操作。 一、graph 操作的语法 rrdtool graph filename [option ...]      [data definition ...]     [data ca
RRDTool详解
07-02
以上内容从MRTG的局限性出发，引出了RRDTool的强大功能及其相对于MRTG的优势，接着详细介绍了RRDTool的特点，并简要说明了如何在CentOS系统中安装RRDTool。希望这些信息能够帮助读者更好地理解和掌握RRDTool的相关...
rrdtool-1.2.15-cygwin-1.5.20.zip
01-12
本篇将详细介绍rrdtool 1.2.15版本在Cygwin 1.5.20环境下的应用，以及如何利用其功能进行数据管理和可视化。 Cygwin是一款在Windows操作系统上模拟Linux环境的软件，它提供了一个类似于Linux的命令行界面和许多开源...
p5-Alien-RRDtool:安装RRDs.pm（用于RRDtool的Perl绑定）
05-10
本文档介绍了Alien :: RRDtool版本0.06。 概要 use RRDs; # see RRDtool documentation 描述 此发行版在perls上安装RRDs.pm。 RRDtool软件包会将RRDs.pm安装到系统perl，但是在某些情况下，我们需要将其安装到我们...
rrdtool工具包
09-30
本文将详细介绍RRDTool及其与Cacti的关系，以及如何在Cacti中使用RRDTool。 **RRDTool简介** RRDTool的主要功能是创建和维护一种特殊类型的数据库，称为"圆环形数据库"（Round Robin Database），这种数据库能够...
rrdtool-1.5.5.tar.gz
09-07
nagios监控需要安装的插件，因为pnp绘图是调用的rrdtool，pnp只是展示作用；
RRDTool使用方法简介--Ganglia数据库
JackLiu16的博客
10-19 407
目录 1、RRDTool简介 2、所需了解的术语 3、RRDTool工具绘图流程 4、软件安装 5、RRDTool绘图工作流程 6、实战案例 7、总结 出处：https://blog.csdn.net/zhangtian6691844/article/details/54619172...
RRDtool文档
爱生活没道理的博客
03-01 1244
RRDtool rrdtool 描述 概述 函数RRDtoolrrdtool描述概述从各种事物收集状态信息是相当容易的，从您的办公室的温度到通过您的路由器FDDI接口的八位字节数量。但以有效且系统的方式存储这些数据并不是那么简单。这就是RRDtool派上用场的地方。它可以记录、分析从各种数据源（DS）收集到的数据。RRDtool的数据分析部分基于快速生成图形表示的能力，其中数据在可定义的时间段内获取
Python之——rrdtool模块常用方法说明
冰河的专栏
01-06 1266
rrdtool模块常用的几个方法，包括create（创建rrd）、update（更新rrd）、graph（绘图）、fetch（查询rrd）等。 1. Create方法 create filename [--start|-b start time] [--step|-s step] [DS:ds-name:DST:heartbeat:min:max] [RRA:CF:xff:steps:
RRDtool 命令详解
weixin_34326558的博客
07-30 402
介绍RRDtool:Round Robin Database Tool（轮询的数据库工具） 是一种存储数据的方式，使用固定大小的空间来存储数据，并有一个指针指向最新的数据的位置。我们可以把用于存储数据的数据库的空间看成一个圆，上面有很多 刻度。这些刻度所在的位置就代表用于存储数据的地方。所谓指针，可以认为是从圆心指向这些刻度的一条直线。指针会随着数据的读写自动移动。...
RRDTool（三）--fetch，info
death_kada的博客
07-30 3929
一.rrdtool fetch 1.功能：取出rrd数据； 2.使用 rrdtool fetch file_name CF [--resolution|-r resolution] [--start|-s time] [--end|-e time] 3.选项及参数 file_name：rrd文件名； CF：指定聚合函数，有AVERAGE，MAX，MIN，LAST； --res
rrd文件导入mysql_RRDtool 系列连载-5 ：查询 RRD 数据库信息
weixin_35182625的博客
02-11 226
[root@dns1 bob]# rrdtool info eth0.rrd (由于输出信息较多，截取了一部分)filename = "eth0.rrd"rrd_version = "0003"step = 300 # RRDtool 希望每5分钟收到一个数据last_update = 1163862985...
RRDTool（二）--update，graph
death_kada的博客
07-29 1414
一.rrdtool update|updatev 1.功能：向由rrdtool create所创建的rrd文件提供数据； 2.使用 rrdtool update|updatev file_name [--template|-t ds_name[:ds_name]...] [--] N|timestamp:value[:value...] 3.选项及参数 file_name：指定文
rrdtool 详细说明,create,update方法
weixin_34143774的博客
08-18 509
RRDtool运用一、建立RRD数据库（.rrd文件）[root@d-1701 bin]# ./rrdtoolRRDtool 1.2.12 Copyright 1997-2005 by Tobias Oetiker <tobi@oetiker.ch>Compiled Feb 6 2006 10:33:43Usage: rrdtool [options] comma...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值