基于ELFK的可视化日志收集分析系统

最新推荐文章于 2024-09-20 16:09:07 发布
最新推荐文章于 2024-09-20 16:09:07 发布
阅读量1.1k 收藏 18
点赞数 28
分类专栏： ELK 文章标签： elk
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sdhzdtwhm/article/details/135472801
版权

1 概述

本文用来介绍如何使用开源软件Elasticsearch+Logstash+Filebeat+Kibana构建可视化的日志收集分析系统。

1.1 架构图

在这里插入图片描述

1.2 架构说明

Filebeat通过TCP端口或通过解析文件将日志信息经过Logstash转化后存储到Elasticsearch中，并通过Kibana展示查询。

2 组件说明

2.1 Elasticsearch

Elasticsearch 是一个分布式、实时的搜索与分析引擎，基于 Apache Lucene 构建而成。它可以近乎实时地存储、搜索和分析大量的数据，提供全文搜索、结构化搜索、数据分析等多种功能。Elasticsearch 采用了分布式架构，支持水平扩展，能够处理 PB 级别的数据，并且提供高可用性和容错性。

2.2 Logstash

Logstash 是一个数据收集引擎，主要用于实时传输和转换数据。它可以接收来自各种数据源的日志、事件或半结构化数据，对其进行过滤、转换和丰富，然后将其输出到 Elasticsearch、数据库或其他存储系统。Logstash 支持大量输入、过滤器和输出插件，使得数据处理管道非常灵活。

2.3 Filebeat

Filebeat 是 Elastic Stack 中的一款轻量级日志文件传输工具，替代了 Logstash 在日志收集方面的部分功能。Filebeat 直接从服务器上的日志文件读取数据，并将数据转发到 Elasticsearch 或 Logstash 进行索引和分析。相较于 Logstash，Filebeat 更加轻巧和资源友好，特别适合用于大量分布式系统的日志收集。

2.4 Kibana

Kibana 是一个开源的数据可视化平台，专门用来与 Elasticsearch 配合使用，提供对 Elasticsearch 中存储数据的可视化探索、实时分析和交互式仪表板功能。通过 Kibana，用户可以轻松创建和分享图表、地图和其他视觉化内容，以直观的方式展示 Elasticsearch 中的数据，帮助运维人员、开发人员和业务分析师快速理解并作出决策。

3 部署示例

3.1 部署规划

3.1.1 服务器规划

序号服务器IP服务器配置操作系统root密码备注
110.10.0.488C 16GB 300GiBcentos7.9最小化安装

3.1.2 操作系统分区规划

请使用lvm进行分区规划。

序号分区挂载路径分区大小备注
1/boot8c16g
2/50GiB
3/var50GiB
4swap4GiB
5/opt剩余空间

3.1.3 软件版本规划

序号软件名称软件版本用途
1docker-compose1.28.1docker镜像单机编排工具
2docker20.10.14docker软件
3elasticsearchelasticsearch:7.17.4日志存储
4filebeatdocker.elastic.co/beats/filebeat:7.17.4日志采集
5logstashlogstash:7.17.4日志过滤
6kibanakibana:7.17.4日志可视化管理

3.1.4 部署路径规划

序号用途路径备注
1安装基础目录/opt/apps/elk
2elasticsearch安装目录/opt/apps/elk/elasticsearch
3filebeat安装目录/opt/apps/elk/filebeat
4logstash安装目录/opt/apps/elk/logstash
5kibana安装目录/opt/apps/elk/kibana

3.1.5 服务端口规划

序号软件名称服务器端口容器端口备注
2elasticsearch92009200
3filebeat90009000
4logstash50445044
5kibana56015601

3.2 部署说明

演示环境使用docker-compose进行单机编排部署。此处不介绍docker和docker-compose的安装。

3.2.1 脚本说明

  • /opt/apps/elk/docker-compose.yml ：编排文件
  • /opt/apps/elk/.env ：变量配置文件
  • /opt/apps/elk/deploy.sh ：部署脚本
  • /opt/apps/elk/clean.sh ：清除安装
#[root@localhost elk]# cat /opt/apps/elk/docker-compose.yml 
version: "3"
services:
  elasticsearch:
    container_name: elasticsearch
    hostname: elasticsearch
    image: "elasticsearch:${TAG}"
    restart: always
    ports:
      - 9200:9200
    volumes:
      - ./elasticsearch/conf/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml
      - ./elasticsearch/data:/usr/share/elasticsearch/data:rw
      - ./elasticsearch/logs:/usr/share/elasticsearch/logs:rw
    environment:
      - "ES_JAVA_OPTS=-Xms512m -Xmx512m"
      - discovery.type=single-node
    networks:
      - elk_net
  kibana:
    container_name: kibana
    hostname: kibana
    image: "kibana:${TAG}"
    restart: always
    ports:
      - 5601:5601
    volumes:
      - ./kibana/conf/kibana.yml:/usr/share/kibana/config/kibana.yml
    environment:
      - elasticsearch.hosts=http://elasticsearch:9200
    depends_on:
      - elasticsearch
    networks:
      - elk_net
  filebeat:
    container_name: filebeat
    hostname: filebeat
    image: "docker.elastic.co/beats/filebeat:${TAG}"
    restart: always
    volumes:
      - ./filebeat/conf/filebeat.yml:/usr/share/filebeat/filebeat.yml
      - ./filebeat/data:/usr/share/filebeat/data:rw
    links:
      - logstash
      - elasticsearch
      - kibana
    ports:
      - 9000:9000
    depends_on:
      - elasticsearch
    networks:
      - elk_net
  logstash:
    container_name: logstash
    hostname: logstash
    image: "logstash:${TAG}"
    command: logstash -f ./conf/logstash-filebeat.conf
    restart: always
    volumes:
      # 映射到容器中
      - ./logstash/conf/logstash-filebeat.conf:/usr/share/logstash/conf/logstash-filebeat.conf
      - ./logstash/conf/logstash.yml:/usr/share/logstash/config/logstash.yml
    ports:
      - 5044:5044
    depends_on:
      - elasticsearch
    networks:
      - elk_net
networks:
  elk_net:
    driver: bridge
    
#[root@localhost elk]# cat /opt/apps/elk/.env 
TAG=7.17.4
#[root@localhost elk]# cat deploy.sh 
#!/bin/bash
chmod 777 ./elasticsearch/data
chmod 777 ./elasticsearch/logs
chmod 777 ./filebeat/data
docker-compose up -d
#[root@localhost elk]# cat clean.sh 
#!/bin/bash
docker-compose down
rm -rf ./elasticsearch/data/*
rm -rf ./elasticsearch/logs/*
rm -rf ./filebeat/data/*
[root@localhost elk]#

3.2.2 执行部署

cd /opt/apps/elk
sh deploy.sh

3.3 使用示例

3.3.1 Filebeat

使用telnet访问filebeat的tcp端口，输入消息:hello nihao nihao zhagnsan

在这里插入图片描述

3.3.2 Kibana

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

4 附录

4.1 配置文件示例

#[root@localhost conf]# cat /opt/apps/elk/elasticsearch/conf/elasticsearch.yml 
bootstrap.memory_lock: false
cluster.name: es-cluster
node.name: elasticsearch
node.master: true
node.data: true
network.host: 0.0.0.0
http.port: 9200
path.logs: /usr/share/elasticsearch/logs
http.cors.enabled: true
http.cors.allow-origin: "*"
xpack.security.enabled: false
#[root@localhost conf]# cat /opt/apps/elk/filebeat/conf/filebeat.yml 
filebeat.inputs:
  - type: log
    enabled: true
    paths:
      # 当前目录下的所有.log文件
      - /home/project/elk/logs/*.log
    multiline.pattern: ^\[
    multiline.negate: true
    multiline.match: after
  - type: tcp
    enabled: true
    max_message_size: 10MiB
    host: "0.0.0.0:9000"
filebeat.config.modules:
  path: ${path.config}/modules.d/*.yml
  reload.enabled: false
setup.template.settings:
  index.number_of_shards: 1
setup.dashboards.enabled: false
setup.kibana:
  host: "http://kibana:5601"
output.logstash:
  hosts: ["logstash:5044"]
processors:
  - add_host_metadata: ~
  - add_cloud_metadata: ~
#[root@localhost conf]# cat /opt/apps/elk/logstash/conf/logstash-filebeat.conf 
input {
    beats {
        port => "5044"
    }
}
filter {
    grok {
        match => { "message" => "%{COMBINEDAPACHELOG}"}
    }
    geoip {
        source => "clientip"
    }
}
output {
    # 选择elasticsearch
    elasticsearch {
        hosts => ["http://elasticsearch:9200"]
        index => "%{[@metadata][beat]}-%{[@metadata][version]}-%{+YYYY.MM.dd}"
    }
}
#[root@localhost conf]# cat /opt/apps/elk/logstash/conf/logstash.yml 
http.host: "0.0.0.0"
xpack.monitoring.elasticsearch.hosts: [ "http://elasticsearch:9200" ]
xpack.monitoring.enabled: true
xpack.management.enabled: false
#kibana
#[root@localhost conf]# cat /opt/apps/elk/kibana/conf/kibana.yml 
server.port: 5601
server.host: "0.0.0.0"
elasticsearch.hosts: ["http://elasticsearch:9200"]
i18n.locale: "zh-CN"

4.2 使用filebeat监控nginx日志

#将nginx access日志转为json格式
    log_format log_json '{ "@timestamp": "$time_local", '
    '"remote_addr": "$remote_addr", '
    '"referer": "$http_referer", '
    '"request": "$request", '
    '"status": $status, '
    '"bytes": $body_bytes_sent, '
    '"agent": "$http_user_agent", '
    '"x_forwarded": "$http_x_forwarded_for", '
    '"up_addr": "$upstream_addr",'
    '"up_host": "$upstream_http_host",'
    '"up_resp_time": "$upstream_response_time",'
    '"request_time": "$request_time"'
    ' }';
    access_log  /usr/local/nginx/logs/access.log log_json;
#filebeat
[root@localhost filebeat-7.17.4-linux-x86_64]# cat filebeat.yml
filebeat.config.modules:
  path: ${path.config}/modules.d/*.yml
  reload.enabled: true
fields:
  service_name: nginx
output.logstash:
    hosts: ["10.10.84.175:8014"]
    pretty: true
    enable: true
#执行以下命令：
# 安装Filebeat Nginx模块
./filebeat modules enable nginx

# 配置Filebeat Nginx模块
[root@localhost filebeat-7.17.4-linux-x86_64]# cat modules.d/nginx.yml 
# Module: nginx
# Docs: https://www.elastic.co/guide/en/beats/filebeat/7.17/filebeat-module-nginx.html

- module: nginx
  # Access logs
  access:
    enabled: true

    # Set custom paths for the log files. If left empty,
    # Filebeat will choose the paths depending on your OS.
    var.paths: ["/usr/local/nginx/logs/access.log"]

  # Error logs
  error:
    enabled: true

    # Set custom paths for the log files. If left empty,
    # Filebeat will choose the paths depending on your OS.
    #var.paths:
    var.paths: ["/usr/local/nginx/logs/error.log"]

  # Ingress-nginx controller logs. This is disabled by default. It could be used in Kubernetes environments to parse ingress-nginx logs
  ingress_controller:
    enabled: false

    # Set custom paths for the log files. If left empty,
    # Filebeat will choose the paths depending on your OS.
    #var.paths:
# 检查配置
filebeat test config
filebeat test output
# 启动Filebeat
./filebeat -e

访问nginx的页面，使用kibana查看filebeat的日志

4.3 logstash根据自定义字段service_name自定义output

input {
    # 来源beats
    beats {
        # 端口
        port => "5044"
    }
}
# 分析、过滤插件，可以多个
filter {
    grok {
        match => { "message" => "%{COMBINEDAPACHELOG}"}
    }
    geoip {
        source => "clientip"
    }
}
output {
    # 选择elasticsearch
  if [service_name] == "nginx" {
      elasticsearch {
          hosts => ["http://elasticsearch.elk.svc.cluster.local:9200"]
          index => "nginx-%{+YYYY.MM.dd}"
      }
  } else if [service_name] == "blxx-domain-blocking" {
      elasticsearch {
          hosts => ["http://elasticsearch.elk.svc.cluster.local:9200"]
          index => "%{[@metadata][beat]}-%{[@metadata][version]}-%{+YYYY.MM.dd}"
      }
  } else {
      elasticsearch {
          hosts => ["http://elasticsearch.elk.svc.cluster.local:9200"]
          index => "%{[@metadata][beat]}-%{[@metadata][version]}-%{+YYYY.MM.dd}"
      }
  }
}

4.4 elasticsearch设置密码

配置文件使用：
xpack.security.enabled: true

1.进入es容器
docker exec -it elasticsearch bash
 
cd /usr/share/elasticsearch/
 
2.设置密码
bin/elasticsearch-setup-passwords interactive
 
Initiating the setup of passwords for reserved users elastic,kibana,logstash_system,beats_system.
You will be prompted to enter passwords as the process progresses.
Please confirm that you would like to continue [y/N]y
Enter password for [elastic]: 
passwords must be at least [6] characters long
Try again.
Enter password for [elastic]: 
Reenter password for [elastic]: 
Passwords do not match.
Try again.
Enter password for [elastic]: 
Reenter password for [elastic]: 
Enter password for [kibana]: 
Reenter password for [kibana]: 
Enter password for [logstash_system]: 
Reenter password for [logstash_system]: 
Enter password for [beats_system]: 
Reenter password for [beats_system]: 
Changed password for user [kibana]
Changed password for user [logstash_system]
Changed password for user [beats_system]
Changed password for user [elastic]
 
3.修改密码
curl -H "Content-Type:application/json" -XPOST -u elastic 'http://127.0.0.1:9200/_xpack/security/user/elastic/_password' -d '{ "password" : "123456" }'

[root@elasticsearch elasticsearch]# curl -H "Content-Type:application/json" -XPOST -u elastic 'http://127.0.0.1:9200/_xpack/security/user/elastic/_password' -d '{ "password" : "123456" }'
Enter host password for user 'elastic':
{}
  • logstash配置
[root@localhost logstash]# cat conf/logstash-filebeat.conf
input {
    # 来源beats
    beats {
        # 端口
        port => "5044"
    }
}
# 分析、过滤插件，可以多个
filter {
    grok {
        match => { "message" => "%{COMBINEDAPACHELOG}"}
    }
    geoip {
        source => "clientip"
    }
}
output {
    # 选择elasticsearch
    elasticsearch {
        hosts => ["http://elasticsearch:9200"]
        user => "elastic"
        password => "1qaz2wsx"
        index => "%{[@metadata][beat]}-%{[@metadata][version]}-%{+YYYY.MM.dd}"
    }
}
  • kibana配置
[root@localhost conf]# cat kibana.yml 
# 服务端口
server.port: 5601
# 服务IP
server.host: "0.0.0.0"
# ES
elasticsearch.hosts: ["http://elasticsearch:9200"]
elasticsearch.username: "elastic"
elasticsearch.password: "1qaz2wsx"
# 汉化
i18n.locale: "zh-CN"

4.5 filebeat获取k8s的nginx访问日志

filebeat.yml 容器使用root用户允许，DaemonSet部署

filebeat.inputs:
  - type: log
    symlinks: true
    enabled: true
    paths:
      - /var/log/containers/nginx-service*.log

setup.ilm.enabled: false
output.elasticsearch:
  hosts: ["http://elasticsearch-service-svc.public.svc.cluster.local:9200"]
  username: "elastic"
  password: "Abcd@123!"
  index: "nginx-%{+yyyy.MM.dd}"
setup.template.name: "nginx"
setup.template.pattern: "nginx-*"x

nginx.conf 日志设置成log_json

user  nginx;
worker_processes  2;

error_log  /var/log/nginx/error.log notice;
pid        /var/run/nginx.pid;


events {
    worker_connections  65536;
}


http {
    include       /etc/nginx/mime.types;
    default_type  application/octet-stream;

    log_format log_json '{ "@timestamp": "$time_local", '
    '"remote_addr": "$remote_addr", '
    '"referer": "$http_referer", '
    '"request": "$request", '
    '"status": $status, '
    '"bytes": $body_bytes_sent, '
    '"agent": "$http_user_agent", '
    '"x_forwarded": "$http_x_forwarded_for", '
    '"up_addr": "$upstream_addr",'
    '"up_host": "$upstream_http_host",'
    '"up_resp_time": "$upstream_response_time",'
    '"request_time": "$request_time"'
    ' }';
    access_log  /var/log/nginx/access.log  log_json;

    sendfile        on;
    #tcp_nopush     on;

    keepalive_timeout  65;

    #gzip  on;

    include /etc/nginx/conf.d/*.conf;
}

原创文档，码字不易，请点赞收藏。

杨航的技术博客
关注
专栏目录
ELK日志收集分析系统
zsw07的博客
03-27 556
ELK是Elasticsearch、Logstash、Kibana开源软件的集合，对外是作为一个日志管理系统的开源方案，它可以从任何来源、任何格式进行日志搜索、分析与可视化展示。 基本组成软件： 1、Filebeat：监控日志文件，获取服务器上指定路径的日志文件，并将这些日志转发到Logstash实例以进行处理。Filebeat的设计是为了可靠性和低延迟。Filebeat在主机上占用的资源很少，而...
ELK/ELFK日志分析系统部署
sjc090132的博客
10-12 1371
ELK/ELFK日志分析系统部署
ELK之日志查询、收集与分析系统
weixin_34376986的博客
03-26 174
    项目由来 　　（1）开发人员不能登录线上服务器查看详细日志，经过运维周转费时费力　　（2）日志数据分散在多个系统，难以查找与整合　　（3）日志数据量巨大，查询速度太慢，无法满足需求　　（4）无法全局掌控项目运行状况　　（5）日志数据查询不够实时　　（6）数据分析人员不会写代码，无法分析统计数据　　（7）.........     框架里包含的组件 　　Logstash+Ela...
ELK企业级日志分析系统
最新发布
WuuuuuJay的博客
09-20 1426
ELK 是一套由Logstash和Kibana组成的开源日志分析系统，通常用于大规模的数据收集、处理和可视化分析。其主要功能是将分散在不同系统中的日志和事件数据集中收集、存储、搜索和分析，以实现实时监控、排障、性能优化、安全分析等场景是 ELK 栈中的核心组件，负责数据的存储、索引和搜索。它是一个分布式的搜索和分析引擎，基于构建，能够高效地处理和查询海量数据。Logstash。
基于elk 实现nginx日志收集与数据分析。
weixin_30416497的博客
05-14 297
一。背景 前端web服务器为nginx，采用filebeat + logstash + elasticsearch + granfa 进行数据采集与展示，对客户端ip进行地域统计，监控服务器响应时间等。 二。业务整体架构： nginx日志落地——》filebear——》logstash——》elasticsearch——》grafna（展示） 三。先上个效果图...
log_pipe日志收集分析系统介绍
weixin_34413103的博客
12-13 135
一、简要介绍 　　log_pipe是一个高性能的日志收集分析系统，从13年11月第一版上线以来，已经在阿里内部有了广泛的使用，目前在日志最为繁忙的CDN节点内部已经部署超过20个节点，用于对CDN的访问日志以及其他日志做接收和实时分析。它能够接收从各个服务器发过来的日志，并且支持对日志做实时分析和内存压缩，然后按照配置存放到磁盘的不同路径下。 　　在我设计和开发log_pipe之前，面临着各种...
SysLog - 轻量级的日志收集与分析系统
gitblog_00012的博客
03-17 677
SysLog - 轻量级的日志收集与分析系统 SysLogA tool to grab Android system and kernel logs项目地址:https://gitcode.com/gh_mirrors/sy/SysLog 是一个轻量级的日志收集与分析系统，可以帮助开发者快速地收集、存储、查询和分析应用程序产生的日志数据。 什么是 SysLog？ SysLog 是一种广泛应用于网...
ELK_ELFK(7.3)企业PB级日志系统实践系列文章4 - Kibana可视化分析工具详解与实践应用
企业PB级日志系统是指具有PB级别日志数据规模的日志管理系统，能够进行日志的实时收集、存储、分析和可视化展示，帮助企业快速定位和解决问题，同时发现潜在的系统性能瓶颈与安全隐患。ELK_ELFK(7.3)作为一套开源的...
企业级日志分析系统ELK（Elasticsearch , Logstash, Kibana）
Z__Cheng的博客
07-04 1557
企业级日志分析系统ELK（Elasticsearch , Logstash, Kibana）
ELFK日志收集
planck
12-21 984
ELK是一套开源免费、功能强大的日志分析管理系统，可以将系统日志、网站日志、应用日志等各种日志进行收集、过滤、清洗，然后进行集中存放并展示。ELK不是一个单独的技术，而是由一套日志收集工具组合而成，包括：Elasticsearch、Logstash、Kibana组成。Elasticsearch(简称es)：是由Java开发的一个非关系型数据库，提供日志的存储和搜索功能；Logstash：是一个日志采集工具，提供数据采集、数据清洗、数据过滤等功能；
在Ubuntu上部署ELK_ELFK(7.3)日志系统
ELK/ELFK日志系统是由Elasticsearch、Logstash和Kibana（以及可能的Filebeat）组成的一系列开源工具，用于实时地收集、存储、搜索、分析和可视化日志数据。Elasticsearch是一个分布式的实时搜索和分析引擎，Logstash...
用Kibana和logstash快速搭建实时日志查询、收集与分析系统
02-25
Logstash是一个完全开源的工具，他可以对你的日志进行收集、分析，并将其存储供以后使用（如，搜索），您可以使用它。说到搜索，logstash带有一个web界面，搜索和展示所有日志。kibana也是一个开源和免费的工具，他可以帮助您汇总、分析和搜索重要数据日志并提供友好的web界面。他可以为Logstash和ElasticSearch提供的日志分析的Web界面说到这里，我们看看kibana和logstash到底能为我们做些什么呢？下面是kibana的界面简单来讲他具体的工作流程就是logstashagent监控并过滤日志，将过滤后的日志内容发给redis(这里的redis只处理队列不做存储)
数通网络实践之日志收集与分析
02-27
收集日志不仅可以用于故障定位，也可以用来检查网络设备的运行状况和定期巡检。收集日志、分析日志，是网络专业技术人员的必备基础技能。 本文档适用于华为和华三设备，他们提供了一个打印诊断信息的命 令，这个命令相当于批处理程序，它把多个display命令都封装在一个 命令中执行，省去了工程师逐个display的麻烦。这也是唯一一个无论如何都不可以忘记的命令，当你无能为力的时候这个命令可以为远程协助你的人提供重要的定位信息。
ELK日志采集系统
w2144217940的博客
04-19 596
Elasticsearch 是一个基于 Apache Lucene 构建的分布式、实时搜索与分析引擎。它能够索引、搜索和分析大量数据，并且提供了水平扩展能力，允许处理 PB 级别的数据。Elasticsearch 适合用于全文搜索、日志分析、监控指标聚合等多种场景，其 RESTful API 让数据的索引和查询变得非常便捷。Logstash 是一个动态数据收集管道，用于从各种数据源接收、解析、转换并将数据发送到“stash”（例如 Elasticsearch）。
达达日志系统(一)收集
dada_1036的博客
03-06 1125
背景随着达达业务迅猛发展，访问量的节节攀升，每天产生大量的日志，单日日志量从原来的约20G/天涨到超过500G/天，我们面临着新的架构设计挑战。在提出解决方案之前，我们先来了解一下达达当前的日志现状：1. 日志种类繁多需要收集的日志包含： Nginx的访问日志 Tomcat的访问日志 应用程序的业务日志 其他日志：移动App的日志，达达快递员位移的日志等等 2. 海量的日志记录，接近TB级别随着系统
ELK日志收集与搜索分析系统
qinjiamao1的博客
06-19 692
什么是ELK 通俗来讲,ELK是由 Elasticsearch、Logstash、Kibana三个开源软件组成的一个组合体,ELK是elastic公司研发的一套完整的日志收集、分析和展示的企业级解决 方案,在这三个软件当中,每个软件用于完成不同的功能,ELK又称ELK stack,官方域名为:elastic.co,ELK stack的主要优点有如下几个: 1、处理方式灵活： elasticsearch 是实时全文索引，具有强大的搜索功能 2、配置相对简单：elasticsearch 的 API 全部使用 J
日志采集系统
weixin_42987508的博客
05-28 621
日志采集系统开发记录 接到开发任务，需要一个开发一个日志记录系统，主要分析哪个人再什么时间做了什么操作，业务是否执行成功，请求参数和返回参数是什么，用的什么方法，方便后台直接定位到问题。 要求写一个log-starter ，进行日志的采集工作，在写一个log-center日志进行添加和查询的功能。 一、自定义一个注解@LogAnnotation @Target({ElementType.METHOD}) //注解做用在哪里 @Retention(RetentionPolicy.RUNTIME) @Docu
企业PB级日志解决方案：Elastic Stack实战教程
通过学习本课程，学员们可以获得将Elastic Stack应用于企业级PB级日志系统的能力，掌握如何使用Kafka来优化大规模日志处理流程，以及如何有效地监控和可视化日志数据，以支持企业对数据的实时分析和决策制定需求。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值