电商数仓zabbix

最新推荐文章于 2024-06-12 00:14:13 发布
最新推荐文章于 2024-06-12 00:14:13 发布
阅读量176 收藏
点赞数
分类专栏： 大数据 文章标签： 服务器 运维 网络 big data 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/noob9527/article/details/124701860
版权

1 Zabbix入门

1.1 Zabbix概述

Zabbix是一款能够监控各种网络参数以及服务器健康性和完整性的软件。Zabbix使用灵活的通知机制，允许用户为几乎任何事件配置基于邮件的告警。这样可以快

速反馈服务器的问题。基于已存储的数据，Zabbix提供了出色的报告和数据可视化功能。

1.2 Zabbix 基础架构

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-q82n0Ert-1652223892991)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220507125040784.png)]

2 Zabbix部署

2.1 集群规划

进程h102节点h103节点h104节点
zabbix-agent√√√
zabbix-server√
MySQL√
zabbix-web√

2.2 准备工作

2.2.1 关闭集群

如果集群开启，先关闭集群。因为安装Zabbix前，需要重启虚拟机。

cluster.sh stop

2.2.2 关闭防火墙（3台节点，已关闭）

sudo service iptables stop
sudo chkconfig iptables off

sudo service iptables stop
sudo chkconfig iptables off

sudo service iptables stop
sudo chkconfig iptables off

2.2.3 关闭SELinux（hadoop102）

1）修改配置文件/etc/selinux/config

sudo vim /etc/selinux/config

修改如下内容

# This file controls the state of SELinux on the system.
# SELINUX= can take one of these three values:
#     enforcing - SELinux security policy is enforced.
#     permissive - SELinux prints warnings instead of enforcing.
#     disabled - No SELinux policy is loaded.
SELINUX=disabled
# SELINUXTYPE= can take one of these two values:
#     targeted - Targeted processes are protected,
#     mls - Multi Level Security protection.
SELINUXTYPE=targeted

2）重启服务器

sudo reboot

2.3 配置Zabbix yum源（3台节点）

2.3.1 安装yum仓库

1）在h102、h103、h104安装zabbix的yum仓库

sudo rpm -Uvh https://mirrors.aliyun.com/zabbix/zabbix/5.0/rhel/7/x86_64/zabbix-release-5.0-1.el7.noarch.rpm

2）安装Software Collections仓库

sudo yum install -y centos-release-scl

2.3.2 修改zabbix仓库配置文件

h102、h103、h104三台节点，依次执行如下步骤。

1）修改为阿里云镜像

（1）查看原始zabbix.repo文件

sudo cat /etc/yum.repos.d/zabbix.repo

查看内容如下

[zabbix]
name=Zabbix Official Repository - $basearch
baseurl=http://repo.zabbix.com/zabbix/5.0/rhel/7/$basearch/
enabled=1
gpgcheck=1
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-ZABBIX-A14FE591

[zabbix-frontend]
name=Zabbix Official Repository frontend - $basearch
baseurl=http://repo.zabbix.com/zabbix/5.0/rhel/7/$basearch/frontend
enabled=0
gpgcheck=1
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-ZABBIX-A14FE591

[zabbix-debuginfo]
name=Zabbix Official Repository debuginfo - $basearch
baseurl=http://repo.zabbix.com/zabbix/5.0/rhel/7/$basearch/debuginfo/
enabled=0
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-ZABBIX-A14FE591
gpgcheck=1

[zabbix-non-supported]
name=Zabbix Official Repository non-supported - $basearch
baseurl=http://repo.zabbix.com/non-supported/rhel/7/$basearch/
enabled=1
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-ZABBIX
gpgcheck=1

（2）执行以下命令完成全局替换

sudo sed -i 's/http:\/\/repo.zabbix.com/https:\/\/mirrors.aliyun.com\/zabbix/g' /etc/yum.repos.d/zabbix.repo

（3）查看修改之后的zabbix.repo文件

sudo cat /etc/yum.repos.d/zabbix.repo
2）启用zabbix-web仓库

在h102打开/etc/yum.repos.d/zabbix.repo文件，修改zabbix-frontend前端镜像配置

enabled=1

2.4 安装Zabbix

在h102、h103、h104三台节点分别执行以下安装命令

yum install -y zabbix-server-mysql zabbix-agent zabbix-web-mysql-scl zabbix-apache-conf-scl
sudo yum install -y zabbix-agent
sudo yum install -y zabbix-agent

2.5 配置zabbix

2.5.1 创建zabbix数据库

2.5.2 导入Zabbix建表语句

zcat /usr/share/doc/zabbix-server-mysql-5.0.23/create.sql.gz | mysql -uroot -pxxx -h xx.xx zabbix

2.5.3 配置Zabbix_Server（h102）

修改zabbix-server配置文件

sudo vim /etc/zabbix/zabbix_server.conf

DBHost=h102
DBName=zabbix
DBUser=root
DBPassword=000000

2.5.4 配置Zabbix_Agent（三台节点）

修改zabbix-agent配置文件

sudo vim /etc/zabbix/zabbix_agentd.conf

修改如下内容：

Server=h102
#ServerActive=127.0.0.1
#Hostname=Zabbix server

2.5.5 配置Zabbix_Web时区

修改/etc/opt/rh/rh-php72/php-fpm.d/zabbix.conf文件

sudo vim /etc/opt/rh/rh-php72/php-fpm.d/zabbix.conf

修改时区为上海：

php_value[date.timezone] = Asia/Shanghai

2.6 启动停止Zabbix

2.6.1 启动Zabbix

zabbix-server所在服务器：

sudo systemctl start zabbix-server zabbix-agent httpd rh-php72-php-fpm
sudo systemctl enable zabbix-server zabbix-agent httpd rh-php72-php-fpm

监控服务器：

sudo systemctl start zabbix-agent
sudo systemctl enable zabbix-agent

2.6.2 停止Zabbix

zabbix-server所在服务器：

sudo systemctl stop zabbix-server zabbix-agent httpd rh-php72-php-fpm
sudo systemctl disable zabbix-server zabbix-agent httpd rh-php72-php-fpm

监控服务器：

sudo systemctl stop zabbix-agent
sudo systemctl disable zabbix-agent

2.6.3 连接Zabbix_Web数据库

浏览器访问http://h102/zabbix/

在浏览器页面配置数据库连接信息、zabbix-server地址等。

2.6.4 登录Zabbix

1）用户名密码如下

用户名：Admin 密码：zabbix

2）点击User Settings，语言设成中文

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Ut98lI9z-1652223892993)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220509130409320.png)]

3 Zabbix使用

3.1 Zabbix术语

3.1.1 主机（Host）

一台你想监控的网络设备，用IP或域名表示。

3.1.2 监控项（Item）

你想要接收的主机的特定数据，一个度量数据。

3.1.3 触发器（Trigger）

一个被用于定义问题阈值和“评估”监控项接收到的数据的逻辑表达式。

3.1.4 动作（Action）

一个对事件做出反应的预定义的操作，比如邮件通知。

3.2 Zabbix实战

3.2.1 创建Host

1）点击配置/主机/创建主机

2）配置主机（Host）

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-tI7JlhHe-1652223892993)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220509145523311.png)]

3.2.2 创建监控项（Items）

监控项中的键值配置官网文档，搜索zabbix agent key

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-FfXqfmgj-1652223892993)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220509222719027.png)]

3.2.3 创建触发器（Trigger）

点击配置/主机/触发器

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-QlEVU7LW-1652223892994)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220509224847954.png)]

3.2.4 创建动作（Action）

点击配置/动作/创建动作

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-8bxKXNCH-1652223892994)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510214548770.png)]

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-ngH2YCF9-1652223892995)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510214558064.png)]

3.2.6 创建报警媒介类型（Media type）

点击user settings/报警媒介类型/添加

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-ry5bYWwj-1652223892995)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510220821237.png)]

3.3 创建模板

1）点击配置/模板/创建模板

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-QKW592UV-1652223892995)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510220911923.png)]

2）为模板配置监控项和触发器

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Q57oQtqg-1652223892996)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510221003889.png)]

3）为192.168.1.xxx应用模板

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-ybDB3nWT-1652223892996)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510221054375.png)]

4）在动作中添加模板的触发器

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-I1XUV8e1-1652223892996)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510221159067.png)]

4 集成Grafana

4.1 部署Grafana

1.下载Grafana安装包

官方仓库：https://dl.grafana.com/oss/release/grafana-7.4.3-1.x86_64.rpm

国内镜像：https://repo.huaweicloud.com/grafana/7.4.3/grafana-7.4.3-1.x86_64.rpm

2.将安装包上传到h102主机的/opt/software路径

3.使用rpm安装Grafana

sudo rpm -ivh grafana-7.4.3-1.x86_64.rpm

安装报错提示：

warning: grafana-7.4.3-1.x86_64.rpm: Header V4 RSA/SHA256 Signature, key ID 24098cb6: NOKEY
error: Failed dependencies:
	urw-fonts is needed by grafana-7.4.3-1.x86_64

看着是少了一个字体依赖，使用yum安装

yum -y install urw-fonts

再次安装成功。

4.启动Grafana

sudo systemctl start grafana-server

5.访问Grafana页面

访问地址为：http://h102:3000/

首次登录用户名和密码均为 admin

4.2 快速入门

1.创建Dashboard

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-7kJa88hd-1652223892997)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510222307113.png)]

2.新建panel

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-3uSsH52p-1652223892997)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510222505736.png)]

3.选择数据源，此处选择Grafana提供的随机测试数据

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-TKXFyKZA-1652223892997)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510222521607.png)]

4.3 集成Zabbix

4.3.1 配置数据源

使用Grafana与其他系统集成时，需要配置对应的DataSource

1.点击下图所示按钮，增加数据源

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-0v2OK0tC-1652223892997)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510222809672.png)]

2.选择所需数据源

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-F2yAxeGd-1652223892998)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510222955930.png)]

3.如没有所需数据源，点击下图所示地址，获取更多数据源

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-OvU0ZRUO-1652223892998)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510223016935.png)]

4.搜索zabbix，并点击搜索结果

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-SEVxzthz-1652223892998)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510223036415.png)]

5.按照所需插件的说明进行部署

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-sRWGzZrF-1652223892999)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510223241243.png)]

6.以下是插件部署步骤

1）安装插件

sudo grafana-cli plugins install alexanderzobnin-zabbix-app

2）重启Grafana

sudo systemctl restart grafana-server

3）启用插件

（1）点击设置/插件

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-rJviRWwN-1652223892999)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510223446729.png)]

7.配置zabbix数据源

1）新增数据源

2）搜索zabbix，并点击搜索结果

3）配置数据源

4.3.2 集成案例

1.为方便展示效果，在Zabbix中为h102主机应用一个Zabbix内置的Linux系统监控模板。

1）找到h102主机

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-PDDmmvNF-1652223892999)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510223830916.png)]

2）配置要监控的zabbix数据源、zabbix群组，主机、Metrics等

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-eCSnp61Q-1652223893000)(C:\Users\11244\AppData\Roaming\Typora\typora-user-images\image-20220510225415833.png)]

可以看到还是显示no data，检查服务器时间，发现服务器时间是格林乔治时间，但是又不能重启服务器，等明早再看了。

离开后可以从edit回到配置页面
在这里插入图片描述
早上起来看已经有监控指标数据了
在这里插入图片描述

周虽旧邦其命维新
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Zabbix 官方仓库
weixin_44209961的博客
03-01 412
官方离线版https://repo.zabbix.com/zabbix/4.0/rhel/7/x86_64/
Hadoop(六)
weixin_63816398的博客
08-07 488
数仓
Rocky Linux 9.4 部署Zabbix 7.0
最新发布
不知道
06-12 1339
下图来自百度百科用通俗易懂的话来说，Zabbix是一个监控系统，它可以帮助我们实时检查设备的状态，比如服务器、网络设备等。当设备出现问题时，它会及时通知我们，让我们可以采取措施来解决。同时，它还可以把收集到的数据转化成图表和报告，让我们更直观地了解设备的运行情况。
电商数仓
qq_40995238的博客
01-23 2256
数据仓库的概念 数据仓库(Data Warehouse )可简写为DW或DWH。数据仓库是为企业所有决策制定过程，提供所有系统数据支持的战略集合。 通过对数据仓库中数据的分析，可以帮助企业改进业务流程、挖制成本、提高产品质量等。 数据仓库并不是数据的最终目的她，而是为数据最终的目的她做好准备。这些准备包括对数据的清洗、转义、分类、重组、合并、拆分、统计等等。 项目需求 1、实时采集埋点的用户行为数据 2、实现数据仓库的分层搭建 3、每天定时导入业务数据 4、根据数据仓库中的数据进行报表分析
数仓简介
日格一物
07-17 2043
1.什么是数据仓库? 一个面向主题的、继承的、相对稳定的、反应历史变化的数据集合,用于支持管理决策. 2.数据仓库的根本目的? 本质就是为了支持企业内部的商业分析和决策. (企业的经营管理,基于数据仓库的分析结果,做出相关的经营决策) 3.数仓历史 从上世纪90年代兴起 --> 指导企业开展生产经营管理 --> 在众多企业中应用广泛 4.数仓的体系结构 数据源: 企业生产、经营、业务等数据,用以对企业相关经营行为进行分析; 数据存储和管理: 数据源中数据需要经过抽取、转换、加载(ETL)过程,
php数据仓库数据分析,利用Apache+PHP+MySql构建数据仓库
weixin_39943992的博客
04-10 154
牡丹江师 范学院学报 自然科学版利用 构建数据仓库 ’ 楚飞舟 牡丹江广电集团 牡丹江 巧 仪心 数据仓库是把一 个单位的历史数据收集到一个 中央仓库 中以便于处理 , 是支持决策过程 、面 向主题 、随时间而变 、持久的数据集合 调查研究表明 , 大多数企业并不缺乏数据 , 而是受阻于过量的冗余数据和数据不一致 而且它们变得越来越难于访问 、 管理和用于决策支持 , 信息中心面临着开发决策支持应...
01_大数据项目之电商数仓_用户行为采集平台.docx
07-20
大数据项目之电商数仓用户行为采集平台知识点总结 在这个大数据项目中，我们将构建一个电商数仓用户行为采集平台，旨在收集和分析用户行为数据，以提高电商平台的业务流程和产品质量。该平台将使用 Hadoop、HDFS、...
大数据项目之电商数仓（6集群监控Zabbix）V4.2.zip
10-04
在本项目中，我们关注的是大数据环境下的电商数仓建设和集群监控，具体是利用Zabbix V4.2进行监控。Zabbix是一款开源的企业级监控解决方案，它可以用来监控各种网络参数，确保系统的稳定运行。在电商领域，大数据...
大数据项目之电商数仓（6集群监控Zabbix）V4.2.doc
09-07
本项目以电商数仓为背景，采用Zabbix V4.2进行集群监控，包括Hadoop集群，确保数据处理的高效与安全。 1. **Zabbix概述** Zabbix是一款功能强大的监控解决方案，能够实时监控网络参数和服务器健康状况，提供报警...
zabbix6.4.6
08-30
Zabbix是一款开源的企业级监控解决方案，它能够监控各种网络参数以确保服务器、网络设备和应用程序的正常运行。在本文中，我们将深入探讨如何在CentOS 7系统上安装Zabbix 6.4.6，这是一个功能强大的版本，包含了丰富...
Zabbix6.0中文手册
04-13
Zabbix 6.0 中文手册 Zabbix 是一个企业级的监控解决方案，提供了强大的监控和自动化功能。以下是 Zabbix 6.0 中文手册的知识点总结： 1. 简介：Zabbix 是一个基于 Web 的网络监控系统，可以监控各种网络设备和...
数仓_若只是初见
qq_35861801的博客
04-28 183
1.什么是数据仓库： 一个⾯面向主题的 (Subject Oriented)、集成的(Integrated)、相对稳定的(Non-Volatile)反映历史变化(Time Variant)的数据集合,用于⽀持管理决策(Decision Making Support)。同时也是一个将源系统数据抽取、清洗、规格化、提交到维度数据存储的系统，为决策的制定提供查询和分析功能的支撑与实现。 2.为啥需要...
实战-数据仓库构建（七）
ytp552200ytp的博客
09-18 452
问题导读： 1、如何设计用户行为启动表数据解析？ 2、get_json_object 函数如何使用？ 3、DWD 层用户行为事件表数据如何解析？ 4、如何自定义 UDF 函数？ 一、数仓搭建 - DWD 层 1）对用户行为数据解析 2）对核心数据进行判空过滤 3）对业务数据采用维度模型重新建模，即维度退化 1.1 DWD 层（用户行为启动表数据解析）1.1.1 创建启动表1）建表语句 drop table if exists dwd_start_log; CREATE EXTERNAL TAB.
Zabbix部署详解
qq_53715074的博客
04-29 1419
清空 /etc/yum.repos.d/ 下面的所有文件，并下载阿里云的centos7镜像和epel7镜像。在zabbix-server端安装zabbix-agent可实现zabbix-server端自己监控自己。如果 ‘users’ 表未列出，则可能存在导入过程或 Zabbix Server 配置的问题。zabbix官方文档：https://www.zabbix.com/download。两台服务器，一台做zabbix-server、一台做zabbix-agent。输入zabbix的密码zabbix。
数仓构建步骤
沧海一粟的博客
03-23 8068
数据仓库是面向主题的、集成的、不可更新的、随时间的变化而不断变化的，这些特点决定了数据仓库的系统设计不能采用同开发传统的OLTP数据库一样的设计方法。 数据仓库系统的原始需求不明确，且不断变化与增加，开发者最初不能确切了解到用户的明确而详细的需求，用户所能提供的无非是需求的大的方向以及部分需求， 更不能较准确地预见到以后的需求。因此，采用原型法来进行数据仓库的开发是比较合适的，因为原型法的思想是从...
zabbix安装使用
weixin_44616592的博客
12-28 986
Zabbix是一款能够监控各种网络参数以及服务器健康性和完整性的软件。Zabbix使用灵活的通知机制，允许用户为几乎任何事件配置基于邮件的告警。这样可以快速反馈服务器的问题。基于已存储的数据，Zabbix提供了出色的报告和数据可视化功能。
探秘Zabbix社区仓库：一站式监控解决方案
gitblog_00072的博客
04-10 347
探秘Zabbix社区仓库：一站式监控解决方案 项目地址:https://gitcode.com/monitoringartist/zabbix-community-repos 在数字化运维的世界里，Zabbix 是一个备受瞩目的开源监控工具，它可以帮助系统管理员实时监控服务器、网络设备和应用程序的状态。现在，通过 GitCode上的Zabbix Community Repos，我们可以更方便地访问...
Centos 7 搭建 zabbix 3.4.5
陈苏漾的IT生涯
07-23 2000
     首先本人是一片空白的进行zabbix搭建工作，其实搭建这个之前我搭建过zabbix 2.4，我感觉之前的那个太老了，然后就又推到了重新干了一遍，感觉收获满满。其实最重要的还是要多折腾，折腾多了就自然而然的学会怎么搭建了。当然之前的搭建也是看了前辈们的操作文档，所以还是非常感谢前辈们的贡献，废话不多说，干起来。   一、软件下载： rpm软件下载地址：http://repo.zabb...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值