Zabbix使用TimescaleDB数据库

一、前言

Zabbix 6.0 已发布很久，下个季度7.0应该会正式发布，但6.0也有许多新功能和新特性，这里介绍 6.0 配置 TimescaleDB，此安装配置方法可基本通用与其他版本。

二、TimescaleDB

TimescaleDB 基于 PostgreSQL 数据库打造的一款时序数据库，插件化的形式部署，随着 PostgreSQL 的版本升级而升级，具备以下特点：

1. 基于时序优化；
2. 自动分片（按时间、空间自动分片(chunk)）；
3. 全 SQL 接口；
4. 支持垂直与横向扩展；
5. 支持时间维度、空间维度自动分区。空间维度指属性字段（例如传感器 ID，用户 ID 等）；
6. 支持多个 SERVER，多个 CHUNK 的并行查询。分区在 TimescaleDB 中被称为 chunk；
7. 自动调整 CHUNK 的大小；
8. 内部写优化（批量提交、内存索引、事务支持、数据倒灌）；
9. 复杂查询优化（根据查询条件自动选择 chunk，最近值获取优化(最小化的扫描,类似递归收敛)，limit 子句 pushdown 到不同的；server,chunks，并行的聚合操作）；
10. 利用已有的 PostgreSQL 特性（支持 GIS，JOIN 等），方便的管理（流复制、PITR）；
11. 支持自动的按时间保留策略（自动删除过旧数据）；

Zabbix 从 5.0 版本开始全面支持 TimescaleDB，并针对其特性做了优化。可自动压缩历史数据存储，节省 50-70%的存储空间，同时具备自动分区功能。通过 Zabbix Housekeeper 清理历史数据时直接清理对应的分区，大大提高了历史数据的清理效率。建议新建系统采用 TimescaleDB 方案。

三、安装及准备

1.初始化

yum update -y
sed -i 's/SELINUX=enforcing/SELINUX=disabled/' /etc/selinux/config
systemctl disable --now firewalld
dnf install chrony wget -y
systemctl enable --now chronyd
setenforce 0

注：zabbix 6.0 目前支持 postgresql 13 不支持最新的 14 版本，本次使用 postgresql 13+Timescaledb

2、安装postgresql

dnf install -y https://download.postgresql.org/pub/repos/yum/reporpms/EL-8-x86_64/pgdg-redhat-repo-latest.noarch.rpm
dnf -qy module disable postgresql
dnf install -y postgresql13-server

 3.安装Timescaledb

添加 Timescaledb 源

tee /etc/yum.repos.d/timescale_timescaledb.repo <<EOL
[timescale_timescaledb]
name=timescale_timescaledb
baseurl=https://packagecloud.io/timescale/timescaledb/el/$(rpm -E %{rhel})/\$basearch
repo_gpgcheck=1
gpgcheck=0
enabled=1
gpgkey=https://packagecloud.io/timescale/timescaledb/gpgkey
sslverify=1
sslcacert=/etc/pki/tls/certs/ca-bundle.crt
metadata_expire=300
EOL

安装 TimescaleDB 包

dnf install timescaledb-2-postgresql-13 -y

4.配置

1).初始化 pgsql

/usr/pgsql-13/bin/postgresql-13-setup initdb

2).启动 pgsql server

systemctl enable --now postgresql-13

3).添加 Timescaledb 并配置参数

timescaledb-tune --pg-config=/usr/pgsql-13/bin/pg_config

出现交互画面，一路 y 即可，此步骤会根据当前机器配置，调整 pgsql 配置参数，并加载 Timescaledb 插件库. 重启 pgsql 生效. 

systemctl restart postgresql-13

4).建立 zabbix 用户及数据库

sudo -u postgres createuser --pwprompt zabbix

此处是需要输入数据库 zabbix 用户的密码，输入二次后确认。此处配置密码为: zabbixpwd_123 后续 zabbix server 连接数据库使用这个密码，用户为 zabbix 创建 zabbix 数据库

sudo -u postgres createdb -O zabbix zabbix

为 zabbix 数据库启用 timescledb 插件

echo "CREATE EXTENSION IF NOT EXISTS timescaledb CASCADE;" | sudo -u postgres psql zabbix
systemctl restart postgresql-13

成功后会出现如下画面，表示配置完成

下载 zabbix 6.0beta1 源码并导入数据库

wget https://cdn.zabbix.com/zabbix/sources/development/6.0/zabbix-6.0.0beta1.tar.gz
tar zxvf zabbix-6.0.0beta1.tar.gz
cd zabbix-6.0.0beta1/database/postgresql/
useradd zabbix

依次按照顺序导入三个 zabbix sql 文件

cat schema.sql |sudo -u zabbix psql zabbix
cat images.sql |sudo -u zabbix psql zabbix
cat data.sql |sudo -u zabbix psql zabbix

导入 timescledb 表配置 sql

cat timescaledb.sql |sudo -u zabbix psql zabbix

导入成功后会后如下提示

 

修改配置允许远程连接

sed -i "s/#listen_addresses = 'localhost'/listen_addresses = '*'/g" /var/lib/pgsql/13/data/postgresql.conf
sed -i 's/#port = 5432/port = 5432/g' /var/lib/pgsql/13/data/postgresql.conf
sed -i 's/max_connections = 100/max_connections = 500/g' /var/lib/pgsql/13/data/postgresql.conf

连接数修改成 500，生产可根据实际情况修改。 配置使用 md5 方式认证

vi /var/lib/pgsql/13/data/pg_hba.conf

添加如下信息到# IPv4 local connections 之后

host    all             all             0.0.0.0/0               md5

重启 pgsql

systemctl restart postgresql-13

 5.安装Zabbix Server

1).初始化

yum update -y
sed -i 's/SELINUX=enforcing/SELINUX=disabled/' /etc/selinux/config
systemctl disable --now firewalld
dnf --enablerepo=powertools install OpenIPMI-devel -y
dnf install make wget chrony gcc curl-devel net-snmp-devel \
libxml2-devel libevent-devel pcre-devel -y
setenforce 0
systemctl enable --now chronyd

2).由于后端采用 pgsql 数据库，因此需要安装 pgsql 的开发包

dnf install -y https://download.postgresql.org/pub/repos/yum/reporpms/EL-8-x86_64/pgdg-redhat-repo-latest.noarch.rpm
dnf -qy module disable postgresql
dnf install -y postgresql13-devel -y

3).编译安装

useradd zabbix
wget https://cdn.zabbix.com/zabbix/sources/development/6.0/zabbix-6.0.0beta1.tar.gz
tar zxvf zabbix-6.0.0beta1.tar.gz
cd zabbix-6.0.0beta1/

编译

./configure --prefix=/usr/local/zabbix --enable-server --enable-agent \
--with-postgresql=/usr/pgsql-13/bin/pg_config  --with-net-snmp \
--with-libcurl --with-libxml2 --with-openipmi

此处会检测各种依赖组件及配置，如果出现 error 根据错误安装对应组件，无误后最终会输出所要安装的内容。

执行 make && make install

 4).配置

安装后，需要修改配置文件里的数据库连接信息

sed -i 's/# DBHost=localhost/DBHost=数据库IP地址/g' /usr/local/zabbix/etc/zabbix_server.conf
sed -i 's/# DBPassword=/DBPassword=数据库密码/g' /usr/local/zabbix/etc/zabbix_server.conf

 Zabbix 6.0 增加了二个关于 HA 的配置参数，建议配置

sed -i 's/# HANodeName=/HANodeName=zbx-node-01/g' /usr/local/zabbix/etc/zabbix_server.conf
sed -i 's/# NodeAddress=localhost:10051/NodeAddress=节点IP地址:10051/g' /usr/local/zabbix/etc/zabbix_server.conf

 HANodeName 可自定义，这里最好配置唯一； NodeAddress 为节点地址，这里配置为实际 ip+默认的 10050 端口； 创建 zabbix server 启动脚本

tee /lib/systemd/system/zabbix-server.service <<EOL
[Unit]
Description=Zabbix Server
After=syslog.target
After=network.target
After=mysql.service
After=mysqld.service
After=mariadb.service
After=postgresql.service

[Service]
Environment="CONFFILE=/usr/local/zabbix/etc/zabbix_server.conf"
EnvironmentFile=-/etc/sysconfig/zabbix-server
Type=forking
Restart=on-failure
PIDFile=/tmp/zabbix_server.pid
KillMode=control-group
ExecStart=/usr/local/zabbix/sbin/zabbix_server -c \$CONFFILE
ExecStop=/bin/kill -SIGTERM $MAINPID
RestartSec=10s
TimeoutSec=0

[Install]
WantedBy=multi-user.target
EOL

创建 zabbix agent 启动脚本

tee /lib/systemd/system/zabbix-agent.service <<EOL
[Unit]
Description=Zabbix Agent
After=syslog.target
After=network.target

[Service]
Environment="CONFFILE=/usr/local/zabbix/etc/zabbix_agentd.conf"
EnvironmentFile=-/etc/sysconfig/zabbix-agent
Type=forking
Restart=on-failure
PIDFile=/tmp/zabbix_agentd.pid
KillMode=control-group
ExecStart=/usr/local/zabbix/sbin/zabbix_agentd -c \$CONFFILE
ExecStop=/bin/kill -SIGTERM $MAINPID
RestartSec=10s
User=zabbix
Group=zabbix

[Install]
WantedBy=multi-user.target
EOL

启动

使用以下命令启动 zabbix server 及 zabbix agent

systemctl enable --now zabbix-server
systemctl enable --now zabbix-agent

如启动异常，查看日志确认异常，日志位置/tmp/zabbix_server.log

6.Zabbix WEB安装

Zabbix 6.0 需要 php 最低版本为 7.2，由于使用 pgsql，因此需要按照 php 的 pgsql 扩展组件。

1).初始化

yum update -y
sed -i 's/SELINUX=enforcing/SELINUX=disabled/' /etc/selinux/config
systemctl disable --now firewalld
dnf install wget chrony httpd php php-pgsql php-xml php-ldap php-json php-gd php-mbstring php-bcmath langpacks-zh_CN.noarch -y
systemctl enable --now chronyd
setenforce 0

2).安装Web

下载 zabbix 源码，并拷贝到对应目录

wget https://cdn.zabbix.com/zabbix/sources/development/6.0/zabbix-6.0.0beta1.tar.gz
tar zxvf zabbix-6.0.0beta1.tar.gz
cd zabbix-6.0.0beta1/ui
cp -raf * /var/www/html/

修改 php 参数，并启动 apache 和 php

sed -i 's/post_max_size = 8M/post_max_size = 16M/' /etc/php.ini
sed -i 's/max_execution_time = 30/max_execution_time = 300/' /etc/php.ini
sed -i 's/max_input_time = 60/max_input_time = 300/' /etc/php.ini
chown -R apache:apache /var/www/html/
systemctl enable --now httpd
systemctl enable --now php-fpm

3).Web 初始化 

浏览器输入 Web IP 地址：http://Web服务器管理IP地址/ 这里有个提示，不用关注

 

确保这里全部 ok 再下一步

这里填入数据库服务器地址及配置的数据库密码，并取消使用 TLS 连接

这里 zabbix server name 留空即可，选择对应的时区，这里选择 Asia/Shanghai

确认无误后点击 Next

创建文件成功，如失败可能是 web 目录没有写入权限

 

使用默认的帐号密码登陆，帐号：Admin 密码：zabbix

四、基本设置

安装完之后，需要对系统进行一些配置 Administrator-Greneral-Housekeeping 这里可配置 history（详情）数据与 Trend（趋势）数据保留的时间。默认已开启 7 天历史数据压缩。

探索技术无限可能，博主具有丰富监控模板资源及开发能力和项目管理经验，欢迎添加交流一起探讨，解决你的技术难题！

微信号:king_songax