ELK
重生之我是一名程序员
IN IT && WIN IT !
展开
-
kafka - boot 集成elk
kafka-boot集成 ELK 在使用 filebeat 收集日志到 ELK 时, 消息中有很多不需要的字段,这里需要去掉: { "@timestamp": "2022 - 04 - 30 T07: 54: 24.132 ", "message": { "@timestamp": "2022-04-30T03:42:44.156Z", "@metadata": { "beat": "filebeat", "ty原创 2022-04-30 16:06:00 · 1144 阅读 · 0 评论 -
kafka- elk-filebeat 日志收集
kafka - 集成 elk+filebeat 日志收集 基于 elasticsearch 7.x 什么是 ELK ? ELK: Elasticsearch + Logstash + Kibana Logstash: 日志读取 FileBeat: 比 Logstash 更轻量级 日志收集流程 流程: fileBeat 从各节点读取日志文件 fileBeat 将日志写入 kafka logstash 从 kafka 订阅 日志 logstash 将日志写入 elasticsearch kibana 展示转载 2022-04-30 11:47:03 · 1149 阅读 · 0 评论 -
ELK - kafak 日志收集
ELK - kaffa 日志收集 场景 用 kafk 收集日志,通过 logstash 消费 kafka 消息 ,然后写入 elasticsearch , 通过 kibana 展示 elasticsearch 结果 配置目录 . ├── data │ ├── es │ │ ├── data │ │ │ └── nodes │ │ └── plugins │ ├── kibana │ │ └── data │ │ └── uuid │ └──转载 2022-04-28 15:33:48 · 161 阅读 · 0 评论 -
docker-compose - etcd伪集群
docker-compose - etcd伪集群 docker-compose 配置 version: "3.0" services: etcd1: image: bitnami/etcd:latest # 镜像 container_name: etcd1 # 容器名 --name ports: # 端口映射 -p - "12379:2379" - "20001:2380" environme转载 2022-01-10 08:53:50 · 1136 阅读 · 0 评论 -
docker-compose elasticsearch 伪集群搭建
docker-compose elasticsearch 伪集群搭建 工程目录 [root@localhost my-es-cluster]# tree -L 1 . ├── data ├── docker-compose.yml ├── logs ├── node0-elasticsearch.yml ├── node1-elasticsearch.yml └── node2-elasticsearch.yml docker-compose.yml 配置 文件 version: '3' services转载 2021-12-23 09:00:55 · 290 阅读 · 0 评论 -
docker-compose logstash jdbc同步数据到 elasticsearch
docker-compose logstash jdbc同步数据到 elasticsearch 在生成订单后,需要将通过 es 查询订单,这里采用 logstash 同步数据到 es。 也可以采用 Cannal 工程目录 [root@blue elk-demo]# tree . ├── docker-compose.yml └── logstash ├── config │ ├── lib │ │ └── mysql-connector-java-8.0.22.jar转载 2021-08-12 09:00:05 · 373 阅读 · 0 评论 -
boot - 整合 logstash , 发送日志到 es
boot - 整合 logstash , 发送日志到 es 基于 es: 7.10.x 引入依赖 <dependency> <groupId>net.logstash.logback</groupId> <artifactId>logstash-logback-encoder</artifactId> <version>6.6</version> </dependency&转载 2021-01-31 11:54:27 · 509 阅读 · 0 评论 -
ELK - logstash 动态指定动态模板
ELK - logstash 动态指定动态模板 基于 es: 7.10.x 写在前面 通过logstash写到es的数据,es 默认匹配logstash* 的模板, 并且 索引( index )名称也会自动加上 logstash-, 默认的 logstash 模板为: GET /_template/logstash { "logstash" : { "order" : 0, "version" : 60001, "index_patterns" : [ "logsta转载 2021-01-31 11:42:45 · 1607 阅读 · 4 评论