elk是如何搭建的

最新推荐文章于 2024-07-22 15:43:33 发布
最新推荐文章于 2024-07-22 15:43:33 发布
阅读量152 收藏
点赞数 1
文章标签： elk
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41257472/article/details/119719290
版权

elk是如何搭建的

ELK组成

elk由elasticsearch，logstash，kibana组件组成

ELK如何工作

Logstash收集AppServer产生的Log，并存放到ElasticSearch集群中，而Kibana则从ES集群中查询数据生成图表，再返回给Browser
一共四个步骤：

  • 将日志收集并惊醒集中化管理（beats），其中beats包含四种工具
    Packetbeat（搜集网络流量数据）
    Topbeat（搜集系统、进程和文件系统级别的 CPU 和内存使用情况等数据）
    Filebeat（搜集文件数据）轻量级的工具（相较于logstash）
    Winlogbeat（搜集 Windows 事件日志数据）
  • 将收集的日志格式化（logstash）
  • 对格式化后的数据进行索引和存储（elasticsearch）
  • 前端数据的展示（kibana）

ELK三种组件介绍

elasticsearch介绍

它提供了一个分布式多用户能力的全文搜索引擎，Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是第二流行的企业搜索引擎。用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。

Elasticsearch的基础核心概念

  • 接近实时（NRT）
    elasticsearch是一个接近实时的搜索平台，这意味着，从索引一个文档直到这个文档能够被搜索到有一个轻微的延迟（通常是1秒）
  • 集群（cluster）
    一个集群就是由一个或多个节点组织在一起，它们共同持有整个的数据，并一起提供索引和搜索功能（共享数据）。其中一个节点为主节点，这个主节点是可以通过选举产生的，并提供跨节点的联合索引和搜索的功能。集群有一个唯一性标示的名字，默认是elasticsearch，es 具有集群机制，节点通过集群名称加入到集群中，同时在集群中的节点会有一个自己的唯一身份标识
  • 节点（node）
    节点就是一台单一的服务器，是集群的一部分，存储数据并参与集群的索引和搜索功能。节点也是通过名字来标识，默认是在节点启动时随机分配的字符名，节点可以通过指定集群名字来加入到集群中，如果启动了多个节点，假设能自动发现对方，他们将会自动组建一个名为elasticsearch的集群。
  • 索引（index）
    一个索引就是一个拥有几分相似特征的文档的集合。一个索引由一个名字来标识（必须全部是小写字母的），并且当我们要对对应于这个索引中的文档进行索引、搜索、更新和删除的时候，都要使用到这个名字。索引相对于关系型数据库的库。
  • 类型（type）
    在一个索引中，你可以定义一种或多种类型。类型相对于关系型数据库的表
  • 文档（document）
    一个文档是一个可被索引的基础信息单元。在一个index/type里面，只要你想，你可以存储任意多的文档。文档相对于关系型数据库的列。
  • 分片和副本（shards & replicas）
    在实际情况下，索引存储的数据可能超过单个节点的硬件限制。从单个节点搜索请求太慢了。为了解决这个问题，elasticsearch提供将索引分成多个分片的功能。当在创建索引时，可以定义想要分片的数量。

– 分片的主要原因：水平分割扩展，增大存储量 ；分布式并行跨分片操作，提高性能和吞吐量
为了不发生故障，elasticsearch将索引分片复制一份或多份，称之为分片副本或副本

– 副本的主要原因：高可用性，以应对分片或者节点故障。出于这个原因，分片副本要在不同的节点上； qps性能，增大吞吐量，搜索可以并行在所有副本上执行。
每个索引可以被分成多个分片。一个索引也可以被复制0次或多次。一旦复制了，每个索引就有了主分片（作为复制源的原来的分片）和复制分片（主分片的拷贝）之别。

– 默认情况下，Elasticsearch中的每个索引被分片5个主分片和1个副本，这意味着，如果你的集群中至少有两个节点，你的索引将会有5个主分片
和另外5个副本分片（1个完全拷贝），这样的话每个索引总共就有10个分片

logstash介绍

Logstash由JRuby语言编写，基于消息（message-based）的简单架构，并运行在Java虚拟机（JVM）上

  • Logstash做3件事：
    Collect：数据输入
    Enrich：数据加工，如过滤，改写等
    Transport：数据输出（被其他模块进行调用）

logStash的主要组件:

  • Shipper日志收集者：负责监控本地日志文件的变化，及时把日志文件的最新内容收集起来。
  • Indexer日志存储者：负责接收日志并写入到本地文件。
  • Broker日志Hub：负责连接多个Shipper和多个Indexer
  • Search and Storage：允许对事件进行搜索和存储
  • Web Interface：基于Web的展示界面

LogStash主机分类

  • 代理主机（agent host）：作为事件的传递者（shipper），将各种日志数据发送至中心主机，只需运行Logstash 代理（agent）程序
  • 中心主机（central host）：可运行包括中间转发器（Broker）、索引器（Indexer）、搜索和存储器（Search and Storage）、Web界面端（Web Interface）在内的各个组件，以实现对日志数据的接收、处理和存储

Kibana介绍

Kibana是一个针对Elasticsearch的开源分析及可视化平台，用来搜索、查看交互存储在Elasticsearch索引中的数据。使用Kibana，可以通过各种图表进行高级数据分析及展示。

kibana主要功能

  • Elasticsearch无缝之集成。Kibana架构为Elasticsearch定制，可以将任何结构化和非结构化数据加入Elasticsearch索引。Kibana还充分利用了Elasticsearch强大的搜索和分析功能。
  • 整合数据。Kibana能够更好地处理海量数据，并据此创建柱形图、折线图、散点图、直方图、饼图和地图。
  • 复杂数据分析。Kibana提升了Elasticsearch分析能力，能够更加智能地分析数据，执行数学转换并且根据要求对数据切割分块。
  • 让更多团队成员受益。强大的数据库可视化接口让各业务岗位都能够从数据集合受益。
  • 接口灵活，分享更容易。使用Kibana可以更加方便地创建、保存、分享数据，并将可视化数据快速交流。
  • 配置简单。Kibana的配置和启用非常简单，用户体验非常友好。Kibana自带Web服务器，可以快速启动运行
  • 可视化多数据源。Kibana可以非常方便地把来自Logstash、ES-Hadoop、Beats或第三方技术的数据整合到Elasticsearch，支持的第三方技术包括Apache Flume、Fluentd
  • 简单数据导出。Kibana可以方便地导出感兴趣的数据，与其它数据集合并融合后快速建模分析，直观的发现新结果。

部署ELK日志分析系统

  • 实验环境
    服务器 Centos7.4 node1 192.168.1.101 Elasticsearch Kibana
    服务器 Centos7.4 node2 192.168.1.3 Elasticsearch
    服务器 Centos7.4 apache 192.168.1.4 Logstash Apache

配置elasticsearch环境

  • 在node1上先配置映射
[root@node1 ~]# vim /etc/hosts
192.168.1.101 node1
192.168.1.3 node2
192.168.1.4 httpd
  • 然后安装JDK环境
[root@node1 ~]# tar zxf jdk-8u91-linux-x64.tar.gz -C /usr/local/
[root@node1 ~]# vim /etc/profile
export JAVA_HOME=/usr/local/jdk1.8.0_91
export JRE_HOME=${JAVA_HOME}/jre
export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib
export PATH=${JAVA_HOME}/bin:$PATH
source /etc/profile
  • 在node2上添加映射
[root@node2 ~]# vim /etc/hosts
192.168.1.101 node1
192.168.1.3 node2
192.168.1.4 httpd

部署elasticsearch软件

  • 在node1上安装elasticsearch-5.5.0.rpm
[root@node1 opt]# rpm -ivh elasticsearch-5.5.0.rpm
  • 加载系统服务
[root@node1 opt]# systemctl daemon-reload 
[root@node1 opt]# systemctl enable elasticsearch.service 
Created symlink from /etc/systemd/system/multi-user.target.wants/elasticsearch.service to /usr/lib/systemd/system/elasticsearch.service.
[root@node1 opt]#
  • 更改elasticsearch配置
[root@node1 opt]# cp /etc/elasticsearch/elasticsearch.yml  /etc/elasticsearch/elasticsearch.yml.bak
[root@node1 opt]# vim /etc/elasticsearch/elasticsearch.yml
 17 cluster.name: my-elk-cluster		//修改集群名字
 23 node.name: node1					//节点名字
33 path.data: /data/elk_data			//数据存放路径
37 path.logs: /var/log/elasticsearch/	//日志存放路径
 43 bootstrap.memory_lock: false		//不在启动的时候锁定内存
 55 network.host: 0.0.0.0				//提供服务绑定的IP地址，0.0.0.0代表所有地址
59 http.port: 9200						//侦听端口为9200
 68 discovery.zen.ping.unicast.hosts: ["node1", "node2"]	//集群发现通过单播实现
  • 创建数据存放路径并授权
[root@node1 opt]# mkdir -p /data/elk_data
[root@node1 opt]# chown elasticsearch:elasticsearch /data/elk_data/
  • 启动elasticsearch是否成功开启
[root@node1 opt]# systemctl start elasticsearch.service 
[root@node1 opt]# netstat -antp | grep 9200
tcp6       0      0 :::9200                 :::*                    LISTEN      13578/java
  • 如果缓存过大可以先清除缓存
[root@node1 opt]# echo 3 > /proc/sys/vm/drop_caches 
[root@node1 opt]# free -h
              total        used        free      shared  buff/cache   available
Mem:           5.7G        2.9G        2.6G         21M        252M        2.5G
  • 查看节点信息
    在这里插入图片描述
  • 在node2上安装elasticsearch-5.5.0.rpm
[root@node2 opt]# rpm -ivh elasticsearch-5.5.0.rpm
  • 加载系统服务
[root@node2 opt]# systemctl daemon-reload 
[root@node2 opt]# systemctl enable elasticsearch.service 
Created symlink from /etc/systemd/system/multi-user.target.wants/elasticsearch.service to /usr/lib/systemd/system/elasticsearch.service.
[root@node2 opt]#
  • 更改elasticsearch主配置文件
[root@node2 opt]# cp /etc/elasticsearch/elasticsearch.yml /etc/elasticsearch/elasticsearch.yml.bak
[root@node2 opt]# vim /etc/elasticsearch/elasticsearch.yml
 17 cluster.name: my-elk-cluster		//修改集群名字
 23 node.name: node2					//节点名字
33 path.data: /data/elk_data			//数据存放路径
37 path.logs: /var/log/elasticsearch/	//日志存放路径
 43 bootstrap.memory_lock: false		//不在启动的时候锁定内存
 55 network.host: 0.0.0.0				//提供服务绑定的IP地址，0.0.0.0代表所有地址
59 http.port: 9200						//侦听端口为9200
 68 discovery.zen.ping.unicast.hosts: ["node1", "node2"]	//集群发现通过单播实现
  • 创建数据存放路径并授权
[root@node2 opt]# mkdir -p /data/elk_data
[root@node2 opt]# chown elasticsearch:elasticsearch /data/elk_data/
  • 启动elasticsearch是否成功开启
[root@node2 opt]# systemctl start elasticsearch.service
[root@node2 opt]# netstat -antp |grep 9200
tcp6       0      0 :::9200                 :::*                    LISTEN      24125/java
  • 在真机上查看节点信息
    在这里插入图片描述
  • 查看集群健康情况
    在这里插入图片描述
  • 查看集群状态
    在这里插入图片描述

安装elasticsearch-head插件

我们可以通过安装elasticsearch-head插件后，来管理集群

  • 在node1上安装node组件及依赖包
[root@node1 opt]# tar zxf node-v8.2.1.tar.gz 
[root@node1 opt]# cd node-v8.2.1/
[root@node1 node-v8.2.1]# yum install gcc gcc-c++ make -y
[root@node1 node-v8.2.1]# ./configure 
[root@node1 node-v8.2.1]# make -j3
[root@node1 node-v8.2.1]# make install
  • 安装phantomjs前端框架
[root@node1 opt]# tar xjf phantomjs-2.1.1-linux-x86_64.tar.bz2 
[root@node1 opt]# cd phantomjs-2.1.1-linux-x86_64/
[root@node1 phantomjs-2.1.1-linux-x86_64]# ls
bin  ChangeLog  examples  LICENSE.BSD  README.md  third-party.txt
[root@node1 phantomjs-2.1.1-linux-x86_64]# cd bin/
[root@node1 bin]# ls
phantomjs
[root@node1 bin]# cp phantomjs /usr/local/bin/
  • 安装elasticsearch-head数据可视化工具
[root@node1 elasticsearch-head]# pwd
/usr/local/src/elasticsearch-head
[root@node1 elasticsearch-head]# npm install
  • 修改主配置文件
[root@node1 ~]# vim /etc/elasticsearch/elasticsearch.yml
http.cors.enabled: true  //开启跨域访问支持，默认为false
http.cors.allow-origin: "*" //跨域访问允许的域名地址
[root@node1 ~]# systemctl restart elasticsearch.service
  • 启动elasticsearch-head
[root@node1 ~]# cd /usr/local/src/elasticsearch-head/
[root@node1 elasticsearch-head]# npm run start &
[1] 59756
[root@node1 elasticsearch-head]# 
> elasticsearch-head@0.0.0 start /usr/local/src/elasticsearch-head
> grunt server

Running "connect:server" (connect) task
Waiting forever...
Started connect web server on http://localhost:9100
  • node2做同样操作
[root@node2 elasticsearch-head]# npm run start &
[1] 118386
[root@node2 elasticsearch-head]# 
> elasticsearch-head@0.0.0 start /usr/local/src/elasticsearch-head
> grunt server

Running "connect:server" (connect) task
Waiting forever...
Started connect web server on http://localhost:9100

[root@node2 elasticsearch-head]# netstat -lnupt |grep 9100
tcp        0      0 0.0.0.0:9100            0.0.0.0:*               LISTEN      118396/grunt        
[root@node2 elasticsearch-head]# netstat -lnupt |grep 9200
tcp6       0      0 :::9200                 :::*                    LISTEN      118269/java
  • 然后在网页上查看
    在这里插入图片描述

在这里插入图片描述

  • 在命令行创建索引
[root@node1 elasticsearch-head]# curl -XPUT 'localhost:9200/index-demo/test/1?pretty&pretty' -H 'content-Type: application/json' -d '{"user":"zhangsan","mesg":"hello world"}'
{
  "_index" : "index-demo",
  "_type" : "test",
  "_id" : "1",
  "_version" : 1,
  "result" : "created",
  "_shards" : {
    "total" : 2,
    "successful" : 2,
    "failed" : 0
  },
  "created" : true
}
  • 在web上查看索引
    在这里插入图片描述
    在这里插入图片描述

安装logstash并做一些日志搜集输出到elasticsearch中

  • 安装apache并启动
[root@apache ~]# yum -y install httpd
[root@apache ~]# systemctl start httpd
tcp6       0      0 :::80                   :::*                    LISTEN      21581/httpd         
[root@apache ~]# java -version			//查看jdk版本
openjdk version "1.8.0_181"
OpenJDK Runtime Environment (build 1.8.0_181-b13)
OpenJDK 64-Bit Server VM (build 25.181-b13, mixed mode)
  • 安装logstash
[root@apache ~]# cd /opt
[root@apache opt]# rpm -ivh logstash-5.5.1.rpm              //安装logstash
[root@apache opt]# systemctl start logstash.service         //启动logstash
[root@apache opt]# systemctl enable logstash.service
[root@apache opt]# ln -s /usr/share/logstash/bin/logstash /usr/local/bin/    //建立logstash软连接

  • logstash（Apache）与elasticsearch（node）功能是否正常，做对接测试
    -f 通过这个选项可以指定logstash的配置文件，根据配置文件配置logstash
    -e 后面跟着字符串 该字符串可以被当做logstash的配置（如果是” ”,则默认使用stdin做为输入、stdout作为输出）
    -t 测试配置文件是否正确，然后退出

  • 输入采用标准输入 输出采用标准输出

[root@apache ~]# logstash -e 'input { stdin{} } output { stdout{} }'
The stdin plugin is now waiting for input:
08:58:38.416 [[main]-pipeline-manager] INFO  logstash.pipeline - Pipeline main started
08:58:38.728 [Api Webserver] INFO  logstash.agent - Successfully started Logstash API endpoint {:port=>9600}
www.baidu.com
2021-08-15T22:59:03.780Z apache www.baidu.com
  • 使用rubydebug显示详细输出，codec为一种编解码器
[root@apache ~]# logstash -e 'input { stdin{} } output { stdout{ codec=>rubydebug } }'
www.baidu.com
{
    "@timestamp" => 2021-08-15T22:59:55.862Z,
      "@version" => "1",
          "host" => "apache",
       "message" => "www.baidu.com"
}
  • 使用logstash将信息写入elasticsearch中
[root@apache ~]# logstash -e 'input { stdin{} } output { elasticsearch { hosts=>["192.168.1.101:9200"] } }'
  • 然后在web页面上查看logstash-20121.08.15就是生成的日志
    在这里插入图片描述

在apache上做对接配置

修改日志权限

[root@apache ~]# chmod o+r /var/log/messages
[root@apache ~]# ll /var/log/messages
-rw----r--. 1 root root 199814 8月  16 09:25 /var/log/messages
  • 配置文件中定义的是收集系统日志
[root@apache ~]# vim /etc/logstash/conf.d/system.conf
input {
       file{
        path => "/var/log/messages"
        type => "system"
        start_position => "beginning"
        }
      }
output {
        elasticsearch {
          hosts => ["192.168.1.101:9200"]
          index => "system-%{+YYYY.MM.dd}"
          }
        }

在这里插入图片描述

安装kibana

  • 在node1上安装kibana
[root@node1 opt]# cd /usr/local/src/
[root@node1 src]# ls
elasticsearch-head  kibana-5.5.1-x86_64.rpm
[root@node1 src]# rpm -ivh kibana-5.5.1-x86_64.rpm 
警告：kibana-5.5.1-x86_64.rpm: 头V4 RSA/SHA512 Signature, 密钥 ID d88e42b4: NOKEY
准备中...                          ################################# [100%]
正在升级/安装...
   1:kibana-5.5.1-1                   ################################# [100%]
  • 修改kibana配置
[root@node1 kibana]# vim kibana.yml 
2/ server.port: 5601                //kibana打开的端口
7/ server.host: "0.0.0.0"          //kibana侦听的地址
21/ elasticsearch.url: "http://192.168.1.101:9200"            //和elasticsearch建立联系
30/ kibana.index: ".kibana"             //在elasticsearch中添加.kibana索引
  • 启动kibana
[root@node1 kibana]# systemctl start kibana.service 
[root@node1 kibana]# systemctl enable kibana.service
Created symlink from /etc/systemd/system/multi-user.target.wants/kibana.service to /etc/systemd/system/kibana.service.
[root@node1 kibana]#

  • 然后在真机上查看
    在这里插入图片描述

  • 对接Apache主机的Apache 日志文件（访问的、错误的）

[root@apache conf.d]# touch apache_log.conf
[root@apache conf.d]# vim apache_log.conf 
input {
       file{
        path => "/etc/httpd/logs/access_log"
        type => "access"
        start_position => "beginning"
        }
       file{
        path => "/etc/httpd/logs/error_log"
        type => "error"
        start_position => "beginning"
        } 
      }
output {
        if [type] == "access" {
        elasticsearch {
          hosts => ["192.168.1.101:9200"]
          index => "apache_access-%{+YYYY.MM.dd}"
          }
        }
        if [type] == "error" {
        elasticsearch {
          hosts => ["192.168.1.101:9200"]
          index => "apache_error-%{+YYYY.MM.dd}"
          }
        }
        }
  • 查看web页面索引
    在这里插入图片描述
咸鱼王变身
关注
elk的搭建
mfuivivig的博客
11-22 212
一种比较玄幻的解释是：事实上开源界永远有多种选择，比如基于java的lucene的es，也有基于c的lucy的dezi。---------------------- ELK Logstash 部署（在 Apache 节点上操作） -------------------------------------------------------------- ELK Kiabana 部署（在 Node1 节点上操作） ----------------------------------------
ELK入门及如何搭建
CNSYEAR BLOG
07-09 364
ELK入门及如何搭建 一．ELK是什么？ 在项目初期的时候，大家都是赶着上线，一般来说对日志没有过多的考虑，当然日志量也不大，所以用log4j就够了，随着应用的越来越多，日志散落在各个服务器的logs文件夹下，确实有点不大方便。 当我们需要日志分析的时候你大概会这么做：直接在日志文件中 grep、awk 就可以获得自己想要的信息。 那你们想过这种方式的问题吗？ 1.日志量太大如何...
ELK搭建教程(全过程)
热门推荐
谷神通
11-07 9万+
1.服务器 使用阿里云服务器(方便)，抢占式实例(便宜)，4核16G，系统选择centos7.4/64位(好用)。购买地址：https://ecs-buy.aliyun.com/ 我们只是测试学习使用，把端口权限全开就行(不然外网访问不了)，安全组配置那里添加如下： 2.下载ELK的包： 下载地址：https://www.elastic.co/downloads 下载最新版的、l...
ELK的简单搭建
Calm person的博客
12-30 2080
## ELK的搭建 下载相关的解压包 kibana、logstash、elasticsearch，我这使用的是6.4.2的版本。 ElasticSearch，是一个分布式搜索和分析引擎，它能够分析和用到搜索数据。 Logstash，是一个用于进行数据收集、解析，并将数据发送给ElasticSearch的一个收集引擎。 Kibana，为方便ElasticSearch的分析和数据的展示的一个web界面。 安装包下好后，传输到虚拟机上，使用tar -zxvf 命令进行解压，然后进行配置文件。 ...
ELK搭建完整步骤
qq_45882426的博客
11-09 2402
ELK其实是Elasticsearch，Logstash 和 Kibana三个产品的首字母缩写，这三款都是开源产品。ElasticSearch(简称ES)，是一个实时的分布式搜索和分析引擎，它可以用于全文搜索，结构化搜索以及分析。Logstash，是一个数据收集引擎，主要用于进行数据收集、解析，并将数据发送给ES。支持的数据源包括本地文件、ElasticSearch、MySQL、Kafka等等。Kibana，为 Elasticsearch 提供了分析和 Web 可视化界面，并生成各种维度表格、图形。
ELK的搭建
01-09
在搭建ELK栈之前，有一些前置条件需要满足。首先，你需要确保防火墙和SELinux被关闭，因为它们可能阻止服务间的通信。关闭防火墙的命令是`systemctl stop firewalld`，而禁用SELinux的临时设置为`setenforce 0`。...
ELK6.2.4搭建
11-15
开源实时日志分析ELK平台能够完美的解决我们上述的问题，ELK由ElasticSearch、Logstash和Kiabana三个开源工具组成。 官方网站：https://www.elastic.co/products Elasticsearch是个开源分布式搜索引擎，它的特点有...
ELK6.2.2搭建
01-16
根据给定文件的信息，我们可以总结出关于ELK6.2.2搭建的相关知识点，包括环境配置、具体安装步骤以及常见的问题解决方法。 ### 一、安装环境 #### 1.1 服务器信息 - **操作系统**：CentOS Linux release 7.5.1804 ...
ELK集群搭建(基础教程)
lqcbj的博客
01-30 3160
ELK集群搭建(基础教程) 目录： 机器准备 集群内各台机器安装Elasticsearch 安装部署Kafka（注：每个节点都配置，注意ip不同） 安装logstash工具 安装filebeat ELK收集Nginx的json日志 ELK收集Nginx正常日志和错误日志 ELK收集Tomcat日志 ELK收集docker日志 配置filebeat收集单个docker日志 modules日志收集 使用redis作为缓存收集日志 使用Kafka做缓存收集日志
ELK搭建
H_YANG__的博客
09-18 853
Logstash 配置文件基本由三部分组成：input、output 以及 filter（可选，根据需要选择使用(1)#给日志目录可读权限chmod o+r /var/log/messages #让 Logstash 可以读取日志修改 Logstash 配置文件，让其收集系统日志/var/log/messages，并将其输出到 elasticsearch 中。input {file{path =>"/var/log/messages" #指定要收集的日志的位置。
ELK详细搭建流程
最新发布
m0_65196233的博客
07-22 3545
elasticsearch+Logstach+kibana详细搭建流程
ELK 搭建
u010980938的专栏
02-12 2990
ELK linux环境搭建
ELK 系统 搭建
大痴小乙的博客
04-18 2540
ELK 简介 ELK 是一般被称作日志分析系统，是三款开源软件的简称。通常在业务服务上线后我们会部署一套 ELK 系统， 方便我们通过图形化界面直接查找日志，快速找到问题源并帮助解决问题。 当然了任何东西都会有他的两面性的，ELK 自然也不理外啦~~~ 优势：统一查询入口，多维度查询与统计，适合团队； 缺点：不适合业务前期，需要额外的硬件资源。 ELK 系统架构图 ...
搭建elk
plutozc的博客
08-22 723
项目中部署了多节点，所以日志看起来很不方便，就动手搞一套elk收集日志，看了网上很多的攻略感觉并不是很难，但还是遇到了蛮多的坑。 一、基础配置 由于elk的组件都是基于java的，所以java环境肯定是必须的。新版本的elk对java版本也是有要求的，要求是1.8。服务器是用的开发的服务器，java什么的也都装了，本以为可以省事，没想到这里却是个坑。。。。二、Logstash 1、下载Logst
ELK的快速搭建
m0_62451624的博客
12-09 529
ELK的快速搭建
【ELK搭建过程】
qq_56589727的博客
11-03 1532
ELK是三个开源软件的缩写，分别代表：Elasticsearch Logstash Kibana。另外新增一个FileBeat，它是一个轻量级的日志收集工具(Agent),Filebeat 占用资源少，适合于在各个服务器上搜集日志后，传输给Logstash，官方也推荐此工具。Elasticsearch 是个开源分布式搜索引擎，提供搜索、分析、存储数据三大功能。特点：分布式、零配置、自动发现、索引自动分片、索引副本机制、restful风格接口、多数据源、自动搜索负载等。
ELK的搭建和使用
YIYIYI
08-11 4500
ELK的搭建和使用
ELK Stack搭建与配置详解
2. 软件安装：创建一个名为ELK的文件夹，比如在C盘，然后将下载的软件包解压到这个文件夹下。这样，Logstash、Elasticsearch和Kibana都会位于C:\ELK目录中。 3. 安装elasticsearch-head插件：这是一个用于监控...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值