![](https://img-blog.csdnimg.cn/20201228220048670.jpg?x-oss-process=image/resize,m_fixed,h_224,w_224)
从零开始的日志分析系统
文章平均质量分 89
为什么要学他?开源的啊,企业用得到
ELK+kafka+filebeat企业内部日志分析系统
小公司不用?总有用得到的时候
Nekoosu
"十里扬州 灯火不休"
展开
-
日志分析系统 [ 1 ] --- Elastic Stack 单节点部署,集群部署
文章目录Elastic Stack 单节点部署一、二进制压缩包方式下载和安装1.下载二进制压缩包2.解压安装3.运行 修改节点权限4.切换用户并启动5.查看状态二、集群部署1.条件:2.节点上设置系统内核参数3.设置集群参数4 启动集群5 日志6 查看集群健康状态7 查看集群节点信息8 出现的问题9 关闭 Elasticsearch 进程10 重要的集群参数10.1 设置堆内存大小10.2 设置JVM堆转储路径10.3设置 GC日志记录10.4 设置临时目录小知识:环境变量目录 /etc/profi原创 2020-12-28 21:56:40 · 368 阅读 · 0 评论 -
日志分析系统 [ 2 ] --- Logstash 安装与使用,Filebeat 安装与使用
文章目录企业级日志分析系统一、Logstash 入门1、安装2、配置输入和输出1.管道配置文件2.使用Grok过滤器插件解析Web日志3 使用Geoip过滤器插件增强数据编辑二、Filebeat 安装与使用1、安装2、启用和配置数据收集模块1 查看可以启用的模块列表2 在安装目录中,启用一个或多个模块。2.1 启用 nginx 模块2.2 配置 nginx 模块3 修改配置文件4 启动三、Elasticsearch + Logstash + Filebeat 用于生产环境的简单配置方案企业级日志分析系统原创 2020-12-30 19:48:11 · 426 阅读 · 0 评论 -
日志分析系统 [ 3 ] --- Kibana 部署与使用,Kafka 和 zookeeper 集群的部署与使用,日志收集系统ELK
文章目录企业级日志分析系统一、Kibana 部署与使用1、部署 Kibana2、设置3、运行 Kibana4、访问网站5、创建索引模式6、查询数据7.报错解决二、Kafka 和 zookeeper 集群1.Kafka 介绍2.zookeepe 介绍3.部署实施1安装配置jdk82.安装配置Zookeeper(1)安装(2)配置 [需配置三台]3.配置Kafka(1)配置 [三台]4、其他节点配置5、启动、验证ZK集群(1)启动(2)验证6、启动、验证Kafka(1)启动(2)验证7、模拟消息生产和消费企业原创 2020-12-30 20:45:15 · 451 阅读 · 1 评论 -
日志分析系统 [ 4 ] --- Redis集群 下载及编译安装
文章目录Redis 集群1.下载,编译,安装Ruby2.安装 rubygem redis3.安装 `redis-trib.rb`4.深入集群1.准备节点2.加入集群中Redis 集群1.下载,编译,安装Ruby官网 点我直达 wget https://cache.ruby-lang.org/pub/ruby/2.6/ruby-2.6.1.tar.gz安装依赖包yum -y install zlib-devel readline openssl-devel gcc gcc-c++更多具原创 2021-01-04 20:22:08 · 197 阅读 · 0 评论