作者的博客园已搬家到CSDN，访问博客园主页将默认跳转至CSDN

文章目录ELFK+Kafka+Zookeeper企业级日志架构1.了解1）前言2）介绍3）采集插件2.应用场景与方案1.普通场景2.大型场景3.服务安装规划1）资金充足2）合理节省3.企业级ELFK日志架构搭建准备环境1）安装Docker服务2）安装JDK环境3）修复时区4）搭建要求1.数据采集层1）Nginx1> 配置2> 启动2）Filebeat1> 配置2> 启动2.数据处理层1）Zookeeper1> 配置2> 启动3> 检测集群状态4> 强制删除to

文章目录Canal全家桶+MySQL+Elasticsearch+Kibana二进制方式部署1.准备环境1）服务部署规划2）下载包3）创建服务父目录4）配置服务快速启动别名5）数据库创建账号并授权6）安装Java环境2.Canal-server1）解压2）配置3）启动3.Canal-adapter1）解压2）配置3）启动4.Canal-admin5.安装Elasticsearch1）解压2）配置3）启动6.安装Kibana1）解压2）配置3）启动4）创建索引8.插入数据并测试1）建库2）建表3）插入数据4）

文章目录配置使用Filebeat1.下载安装2.修改配置模式1）备份配置文件2）收集文件日志，输出到文件中3）收集日志输出到redis1> 配置2> 重启3> 对端查看5.安装配置nginx4.ELK架构配置使用Filebeat轻量级日志收集组件，基本不消耗内存主要工作：在每一台机器内收集日志，将日志同步到 > redis > logstash > Elasticsearch所以每台机器都要装filebeat，选择对应所需组件进入下载，这里选择filebeat

文章目录ELK介绍与部署ELK 常用架构及使用场景介绍：1）简单架构2）以Logstash 作为日志搜集器3）以Beats 作为日志搜集器4）引入消息队列模式ElasticSearch单节点部署1.安装1）rpm安装2）源码包安装3）docker安装2.配置1）开启内存锁定2）定义内存大小值3）修改es配置文件4）配置图形化管理界面4.启动5.测试访问多节点部署（部署主从）部署主节点es01部署从节点es-02LogStach部署LogStachrpm安装使用logstach输出读取分类kibana部署ki