ELK 日志分析系统的部署

最新推荐文章于 2023-12-21 23:21:05 发布
最新推荐文章于 2023-12-21 23:21:05 发布
阅读量112 收藏
点赞数
文章标签： elk jenkins 运维
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yj998802/article/details/133104222
版权

文章目录一、ELK前言1.1 需要收集的日志1.2 日志收集后，如何可视化1.3 日志收集可视化后，怎么使用1.4 要怎么收集日志二、ELK简介2.1 ElasticSearch介绍2.2 ElasticSearch核心概念2.2 ELK里面有哪些组件2.3 ELK的工作原理三、 ELK日志分析系统集群部署3.1 ELK Elasticsearch 集群部署(在Node1、Node2节点上操作)3.1.1 前期准备3.1.2 部署 Elasticsearch 软件3.1.3 安装 Elasticsearch-head 插件3.2 ELK Logstash 部署(在 httpd 节点上操作)3.2.1 安装 Logstash3.2.2 测试 Logstash(httpd)与elasticsearch(node)功能是否正常，做对接3.2.3 定义 logstash 配置文件3.3 ELK Kiabana 部署(在 Node1 节点上操作)

一、ELK前言1.1 需要收集的日志1.系统日志：为监控做准备，要收集tomcat系统日志，tomcat所在节点的日志

2.服务日志：比如数据库mysql，收集慢查询日志、错误日志、普通日志，要收集tomcat服务日志。

3.业务日志(业务日志必须收集)：业务口子日志在log4j，log4j是由java环境开发的，跑在tomcat上

1.2 日志收集后，如何可视化

  1. kibana

  2. grafana:可以以地图的方式展示，功能更全面一些，界面会好看一些

1.3 日志收集可视化后，怎么使用

  1. 用于给大数据分析，作为立体化展示的一个数据源

  2. 给研发去使用(排障、解决bug等)

  3. 统计数据流量，作为分析报告的数据源

1.4 要怎么收集日志

我们需要有针对性的去收集日志，日志收集是根据我们设置的日志级别来看的，对于不是很重要的日志，日志级别调高一点。比如error的时候报给我，普通日志不用报。这样可以有效降低日志量。像这种业务日志，我们不适合调error级别，我们需要调成warning级别。

二、ELK简介2.1 ElasticSearch介绍Elasticsearch是一个基于 Lucene 的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是第二流行的企业搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，快速，安装使用方便操作。

2.2 ElasticSearch核心概念

1、接近实时ElasticSearch是一个接近实时的搜索平台

这就是说，我们从索引一个文档直到这个文档能够被搜索到有一个轻微的延迟(通常是1秒)

2、集群化集群每一台服务器都有自己的一个唯一标识，比如说id，标识自己在集群中的一个定位。

个集群就是由一个或多个节点组织在一起，它们共同持有你整个的数据，并一起提供索引和搜索功能。其中一个节点为主节点，这个主节点是可以通过选举产生的，并提供跨节点的联合索引和搜索的功能。

3、节点节点就是一台单一的服务器，是集群的一部分，存储数据并参与集群的索引和搜索功能。像集群一样，节点也是通过名字来标识，默认是在节点启动时随机分配的字符名。当然，你可以自己定义。该名字也很重要，在集群中用于识别服务器对应的节点。

4、索引一个索引就是一个拥有几分相似特征的文档的集合。比如说，你可以有一个客户数据的索引，另一个产品日录的索引，还有一个订单数据的索引。一个索引由一个名字来标识(必须全部是小写字母的)，并且当我们要对对应于这个索引中的文档进行索引、搜索、更新和删除的时候都要使用到这个名字。在一个集群中，如果你想，可以定义任意多的索引。

5、类型在一个索引中，你可以定义一种或多种类型。一个类型是你的索引的一个逻辑.上的分类/分区，其语义完全由你来定。通常，会为具有一组共同字段的文档定义一个类型。比如说，我们假设你运营一个博客平台并且将你所有的数据存储到一个索引中。在这个索引中，你可以为用户数据定义一个类型，为博客数据定义另一个类型，当然，也可以为评论数据定义另一个类型。

6、文档一个文档是一个可被索引的基础信息单元。比如，你可以拥有某一个客户的文档，某一个产品的一个文档，当然，也可以拥有某个订单的一个文档。文档以JSON 格式来表示，而JSON是一个到处存在的互联网数据交互格式。 在一个index/type里面，只要你想，你可以存储任意多的文档。注意，虽然一个文档在物理上位于一个索引中，实际上一个文档必须在一个索引内被索引和分配一个类型。

分片和副本(默认情况下是5个分片、1个副本，这意味着，如果你的集群至少有两个节点，你的索引将会有5个分片和另外5个副本，)

在正常情况下，单个节点的存储和索引以及I/O读写效率是很容易遇到瓶颈的。为了提高瓶颈上限，所以在这里，对于存储进行一个分布式，多个节点做一个任务。可以提高存储上线，可以提高搜索上限，同时可以减轻压力均摊。

elasticsearch提供将索引分成多个分片的功能。当在创建索引时，可以定义想要分片的数量。每一个分片就是一个全功能的独立的索引，可以位于集群中任何节点上。

1、分片的两个最主要原因:(1)水平分割扩展，增大存储量(3)分布式并行跨分片操作，提高性能和吞吐量

2、分布式分片的机制和搜索请求的文档如何汇总完全是由elasticsearch控制的，这些对用户而言是透明的。

3、网络问题等等其它问题可以在任何时候不期而至，为了健壮性，强烈建议要有一个故障切换机制，无论何种故障以防止分片或者节点不可用。

4、副本也有两个最主要原因:(1)高可用性，以应对分片或者节点故障。出于这个原因，分片副本要在不同的节点上。(2)增加了读写性能(qps性能)，增大吞吐量。搜索可以并行在所有副本上执行。

2.2 ELK里面有哪些组件Logstash(日志收集)：主要用于收集、输出、格式化数据

Elasticsearch(日志存储和搜索)：用于建立索引，因为它的副本和分片，他的搜索能力很强。PS：(ES版本 7.10 和 7.20)，特性是：启动时，必须为非root用户。es启动时很吃内存，可能会卡很久。

Kibana(展示)：作为展示用的，展示的话在于日志收集后、由es创建建立索引，并且最后传给kibana，通过kibana展现出来。他的兼容性特别好。

2.3 ELK的工作原理1、在所有需要收集日志的服务器上部署Logstash; 或者先将日志进行集中化管理在日志服务器上， 在日志服务器上部署 Logs tash。

2、Logstash 收集日志，将日志格式化并输出到 Elasticsearch 群集中。

3、Elasticsearch 对格式化后的数据进行索引和存储。

4、Kibana 从 ES 群集中查询数据生成图表，并进行前端数据的展示。

三、 ELK日志分析系统集群部署

需求环境：

服务器类型	     系统和IP地址	              需要安装的组件	              硬件方面
Node1节点	   CentOS7  192.168.217.150	     Elasticsearch 、 Kibana	       2核4G
Node2节点	   CentOS7  192.168.217.101	     Elasticsearch	               2核4G
Apache节点	   CentOS7  192.168.217.102	     Logstash Apache	               2核4G

3.1 ELK Elasticsearch 集群部署(在Node1、Node2节点上操作)

3.1.1 前期准备

#更改主机名 
Node1节点：      hostnamectl set-hostname node1
Node2节点：      hostnamectl set-hostname node2
Apache节点：     hostnamectl set-hostname httpd


#配置域名解析
vim /etc/hosts
192.168.217.150   node1
192.168.217.101   node2
192.168.217.102   httpd

#查看Java环境，如果没有安装，yum -y install java
java -version

#更改主机名

#配置域名解析

#node 1和 node 2 同时配置

#查看Java环境(node 1和 node 2 同时配置)

3.1.2 部署 Elasticsearch 软件

(1)#上传elasticsearch-5.5.0.rpm到/opt目录下
cd /opt
rpm -ivh elasticsearch-5.5.0.rpm 

(2)#加载系统服务
systemctl daemon-reload    
systemctl enable elasticsearch.service

(3)#修改elasticsearch主配置文件
cp /etc/elasticsearch/elasticsearch.yml /etc/elasticsearch/elasticsearch.yml.bak
vim /etc/elasticsearch/elasticsearch.yml
--17--取消注释，指定集群名字
cluster.name: my-elk-cluster
--23--取消注释，指定节点名字：Node1节点为node1，Node2节点为node2
node.name: node1
--33--取消注释，指定数据存放路径
path.data: /data/elk_data
--37--取消注释，指定日志存放路径
path.logs: /var/log/elasticsearch/
--43--取消注释，改为在启动的时候不锁定内存
bootstrap.memory_lock: false
--55--取消注释，设置监听地址，0.0.0.0代表所有地址
network.host: 0.0.0.0
--59--取消注释，ES 服务的默认监听端口为9200
http.port: 9200
--68--取消注释，集群发现通过单播实现，指定要发现的节点 node1、node2
discovery.zen.ping.unicast.hosts: ["node1", "node2"]

#查看主配置文件
grep -v "^#" /etc/elasticsearch/elasticsearch.yml

###node2的配置与node1相同#######

(4)#创建数据存放路径并授权
mkdir -p /data/elk_data
chown elasticsearch:elasticsearch /data/elk_data/

(5)#启动elasticsearch是否成功开启
systemctl start elasticsearch.service
netstat -antp | grep 9200

(6)#查看节点信息
浏览器访问 ，查看节点 Node1、Node2 的信息
http://192.168.217.150:9200  http://192.168.217.150:9200 

#原谅色：green
http://192.168.217.150:9200/_cluster/health?pretty
http://192.168.217.101:9200/_cluster/health?pretty

#上传elasticsearch-5.5.0.rpm到/opt目录下

#加载系统服务(node1 与 node2)

#修改elasticsearch主配置文件

#查看node1 配置

grep -v "^#" /etc/elasticsearch/elasticsearch.yml

(4)创建数据存放路径并授权

mkdir -p /data/elk_data

chown elasticsearch:elasticsearch /data/elk_data/

(5)启动elasticsearch是否成功开启

systemctl start elasticsearch.service

netstat -antp | grep 9200

#查看节点信息

浏览器访问 http://192.168.217.150:9200/_cluster/health?pretty 、 http://192.168.10.14:9200/_cluster/health?pretty查看群集的健康情况，可以看到 status 值为 green(绿色)， 表示节点健康运行。

浏览器访问 http://192.168.217.150:9200/_cluster/state?pretty 检查群集

状态信息。

3.1.3 安装 Elasticsearch-head 插件

1、Elasticsearch 在 5.0 版本后，Elasticsearch-head 插件需要作为独立服务进行安装，需要使用npm工具(NodeJS的包管理工具)安装。2、安装 Elasticsearch-head 需要提前安装好依赖软件 node 和 phantomjs。(1) node：是一个基于 Chrome V8 引擎的 JavaScript 运行环境。(2) phantomjs：是一个基于 webkit 的JavaScriptAPI，可以理解为一个隐形的浏览器，任何基于 webkit 浏览器做的事情，它都可以做到。

(1)#编译安装 node
#上传软件包 node-v8.2.1.tar.gz 到/opt
yum install gcc gcc-c++ make -y

cd /opt
tar zxf node-v8.2.1.tar.gz

cd node-v8.2.1/
./configure
make -j4 && make install

(2)#安装 phantomjs
#上传软件包 phantomjs-2.1.1-linux-x86_64.tar.bz2 到
cd /opt
tar jxf phantomjs-2.1.1-linux-x86_64.tar.bz2 -C /usr/local/src/
cd /usr/local/src/phantomjs-2.1.1-linux-x86_64/bin
cp phantomjs /usr/local/bin

(3)#安装 Elasticsearch-head 数据可视化工具
#上传软件包 elasticsearch-head.tar.gz 到/opt
cd /opt
tar zxf elasticsearch-head.tar.gz -C /usr/local/src/
cd /usr/local/src/elasticsearch-head/
npm install

(4)#修改 Elasticsearch 主配置文件
vim /etc/elasticsearch/elasticsearch.yml
......
--末尾添加以下内容--
http.cors.enabled: true				#开启跨域访问支持，默认为 false
http.cors.allow-origin: "*"			#指定跨域访问允许的域名地址为所有

systemctl restart elasticsearch

(5)#启动 elasticsearch-head 服务
#必须在解压后的 elasticsearch-head 目录下启动服务，进程会读取该目录下的 gruntfile.js 文件，否则可能启动失败。
cd /usr/local/src/elasticsearch-head/
npm run start &


#elasticsearch-head 监听的端口是 9100
netstat -lnutp |  grep 9100
netstat -lnutp |  grep 9200

(6)#通过 Elasticsearch-head 查看 Elasticsearch 信息通过浏览器访问 http://192.168.24.20:9100/ 地址并连接群集。如果看到群集健康值为 green 绿色，代表群集很健康。访问有问题 可以将localhost 改成ip地址
(7)#插入索引
##登录192.168.24.20 node1主机#####  索引为index-demo,类型为test,可以看到成功创建
[root@node1 ~]# curl -XPUT 'localhost:9200/index-demo/test/1?pretty&pretty' -H 'content-Type: application/json' -d '{"user":"zhangsan","mesg":"hello world"}'


####在本机  刷新浏览器输入看索引信息###
node1信息动作 01234 
node2信息动作 01234 
●上面图可以看见索引默认被分片5个，并且有一个副本

点击数据浏览--会发现在node1上创建的索引为index-demo,类型为test, 相关的信息

#编译安装 node

#安装 phantomjs

#安装 Elasticsearch-head 数据可视化工具

#修改 Elasticsearch 主配置文件(node1和node2相同)

#重启服务

5)启动 elasticsearch-head 服务 #必须在解压后的 elasticsearch-head 目录下启动服务，进程会读取该目录下的 gruntfile.js 文件，否则可能启动失败。

#修改 Elasticsearch 主配置文件(node1和node2相同)

#启动 elasticsearch-head 服务

#浏览器访问：http://192.168.217.150:9100

 

 (7)插入索引

 

 

 

5.2 ELK Logstash 部署(在 Apache 节点上操作)

1.安装Logstash

(1)#修改主机名
hostnamectl set-hostname apache
su

(2)#安装httpd并启动
yum -y install httpd
systemctl start httpd

(3)#安装java环境
yum -y install java
java -version

(4)#安装logstash
cd /opt
rpm -ivh logstash-5.5.1.rpm                           
systemctl start logstash.service                     
systemctl enable logstash.service
cd /usr/share/logstash/
ls
ln -s /usr/share/logstash/bin/logstash /usr/local/bin/

(1)#修改主机名

(2)#安装httpd并启动

(3)#安装java环境

(4)#安装logstash

2.测试 Logstash(Apache)与elasticsearch(node)功能是否正常，做对接

Logstash这个命令测试
字段描述解释：
●	-f  通过这个选项可以指定logstash的配置文件，根据配置文件配置logstash
●	-e  后面跟着字符串 该字符串可以被当做logstash的配置(如果是“空”则默认使用stdin做为输入、stdout作为输出)
●	-t  测试配置文件是否正确，然后退出

logstash -f  配置文件名字      去连接elasticsearch  

(1)#输入采用标准输入 输出采用标准输出---登录192.168.59.115  在Apache服务器上
logstash -e 'input { stdin{} } output { stdout{} }'

16:45:21.422 [[main]-pipeline-manager] INFO  logstash.pipeline - Pipeline main started
16:45:21.645 [Api Webserver] INFO  logstash.agent - Successfully started Logstash API endpoint {:port=>9600}
www.baidu.com   ##需要手动输入
2021-12-16T08:46:14.041Z apache www.baidu.com
www.sina.com     ##需要手动输入
2021-12-16T08:46:23.548Z apache www.sina.com


(2)#使用 rubydebug 输出详细格式显示，codec 为一种编解码器
logstash -e 'input { stdin{} } output { stdout{ codec=>rubydebug } }'

16:51:13.127 [[main]-pipeline-manager] INFO  logstash.pipeline - Starting pipeline {"id"=>"main", "pipeline.workers"=>2, "pipeline.batch.size"=>125, "pipeline.batch.delay"=>5, "pipeline.max_inflight"=>250}
16:51:13.174 [[main]-pipeline-manager] INFO  logstash.pipeline - Pipeline main started
The stdin plugin is now waiting for input:
16:51:13.205 [Api Webserver] INFO  logstash.agent - Successfully started Logstash API endpoint {:port=>9600}
www.baidu.com  ##需要手动输入
{
    "@timestamp" => 2021-12-16T08:52:22.528Z,
      "@version" => "1",
          "host" => "apache",
       "message" => "www.baidu.com"
}

(3)##使用logstash将信息写入elasticsearch中
logstash -e 'input { stdin{} } output { elasticsearch { hosts=>["192.168.217.150:9200"] } }'

(1)#输入采用标准输入 输出采用标准输出—登录192.168.217.102在Apache服务器上

(2)#使用 rubydebug 输出详细格式显示，codec 为一种编解码器

(3)##使用logstash将信息写入elasticsearch中

3.定义 logstash配置文件

Logstash 配置文件基本由三部分组成：input、output 以及 filter(可选，根据需要选择使用)。

(1)#给日志目录可读权限
chmod o+r /var/log/messages					#让 Logstash 可以读取日志
(2)#修改 Logstash 配置文件，让其收集系统日志/var/log/messages，并将其输出到 elasticsearch 中。
vim /etc/logstash/conf.d/system.conf

input {
    file{
        path =>"/var/log/messages"						#指定要收集的日志的位置
        type =>"system"									#自定义日志类型标识
        start_position =>"beginning"					#表示从开始处收集
    }
}
output {
    elasticsearch {										#输出到 elasticsearch
        hosts => ["192.168.217.150:9200"]	#指定 elasticsearch 服务器的地址和端口
        index =>"system-%{+YYYY.MM.dd}"		#指定输出到 elasticsearch 的索引格式
    }
}

(4)#重启服务
systemctl restart logstash

(5)#登录192.168.217.150真机
打开浏览器 输入http://192.168.217.150:9100/ 查看索引信息###

多出 system-xxxx

 

(2)#修改 Logstash 配置文件

(4)#重启服务

(5)#浏览器打开http://192.168.217.150:9100/

 

5.3 ELK Kiabana 部署(在 Node1 节点上操作)

(1)#安装 Kiabana
#上传软件包 kibana-5.5.1-x86_64.rpm 到/opt目录
cd /opt
rpm -ivh kibana-5.5.1-x86_64.rpm

(2)#设置 Kibana 的主配置文件
vim /etc/kibana/kibana.yml
--2--取消注释，Kiabana 服务的默认监听端口为5601
server.port: 5601
--7--取消注释，设置 Kiabana 的监听地址，0.0.0.0代表所有地址
server.host: "0.0.0.0"
--21--取消注释，设置和 Elasticsearch 建立连接的地址和端口
elasticsearch.url: "http://192.168.217.150:9200" 
--30--取消注释，设置在 elasticsearch 中添加.kibana索引
kibana.index: ".kibana"

(3)#启动 Kibana 服务
systemctl start kibana.service
systemctl enable kibana.service
netstat -natp | grep 5601

(4)#验证 Kibana
浏览器访问 http://192.168.217.150:5601

第一次登录需要添加一个 Elasticsearch 索引：
Index name or pattern
//输入：system-*			#在索引名中输入之前配置的 Output 前缀“system”
单击 “create” 按钮创建，单击 “Discover” 按钮可查看图表信息及日志信息。
数据展示可以分类显示，在“Available Fields”中的“host”，然后单击 “add”按钮，可以看到按照“host”筛选后的结果

(5)#将 Apache 服务器的日志(访问的、错误的)添加到 Elasticsearch 并通过 Kibana 显示
vim /etc/logstash/conf.d/apache_log.conf
input {
    file{
        path => "/etc/httpd/logs/access_log"
        type => "access"
        start_position => "beginning"
    }
    file{
        path => "/etc/httpd/logs/error_log"
        type => "error"
        start_position => "beginning"
    }
}
output {
    if [type] == "access" {
        elasticsearch {
            hosts => ["192.168.217.150:9200"]
            index => "apache_access-%{+YYYY.MM.dd}"
        }
    }
        if [type] == "error" {
        elasticsearch {
            hosts => ["192.168.217.150:9200"]
            index => "apache_error-%{+YYYY.MM.dd}"
        }
    }


cd /etc/logstash/conf.d/
/usr/share/logstash/bin/logstash -f apache_log.conf

6.#浏览器访问http://192.168.217.150:9100/测试，查看索引信息能发现
apache_error-2019.04.16     apache_access-2019.04.16 

#浏览器访问http://192.168.217.150:5601
点击左下角有个management选项---index  patterns---create index pattern
----分别创建apache_error-*   和     apache_access-* 的索引

(1)#安装 Kiabana

(2)#设置 Kibana 的主配置文件

(3)#启动 Kibana 服务

(4)#验证 Kibana，浏览器访问 http://192.168.217.150:5601

(5)#将 Apache 服务器的日志(访问的、错误的)添加到 Elasticsearch 并通过 Kibana 显示

#浏览器访问http://192.168.217.1505:9100/测试，查看索引信息能发现两个日志

#浏览器访问http://192.168.217.150:5601

添加索引apache_error-*

添加索引apache_access-*

yj998802
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
ELK日志收集安装部署
qq_45429357的博客
07-14 943
收集日志
ELK 企业级日志分析系统（理论加实战部署详解）
Chenwei的博文
03-03 1341
ELK 企业级日志分析系统（理论加实战部署详解） 文章目录一、ELK 概述1.1 ELK 的工作原理二、部署详解（一）、ELK Elasticsearch 集群部署（在Node1、Node2节点上操作）（二）、 ELK Logstash 部署（在 Apache 节点上操作）（三）、 ELK Kiabana 部署（在 Node1 节点上操作） 安装包：ELK安装包 一、ELK 概述 ELK平台是一套完整的日志集中处理解决方案，将ElasticSearch、Logstash和Kiabana三个开源工具配合使用，
ELK日志分析系统概述及部署
Kzxjjjs的博客
08-02 502
ElasticSearch是基于Lucene（一个全文检索引擎的架构）开发的分布式存储检索引擎，用来存储各类日志。Elasticsearch 是用 Java 开发的，可通过 RESTful Web 接口，让用户可以通过浏览器与 Elasticsearch 通信。Elasticsearch是一个实时的、分布式的可扩展的搜索引擎，允许进行全文、结构化搜索，它通常用于索引和搜索大容量的日志数据，也可用于搜索许多不同类型的文档。②Kiabana。
ELK日志系统浅析与部署
02-24
在复杂的企业应用服务群中,记录日志方式多种多样，并且不易归档以及提供日志监控的机制。...2、ELK经典应用如下ELK经典架构如图1.Logstash部署至服务主机，对各个服务的日志进行采集、过滤、推送。2.E
ELK日志分析系统.md
01-03
ELK日志分析系统.md
ELK企业日志分析系统部署实战！理论+实战！
01-09
文章目录前言一：理论部分1.1：什么是ELK日志分析系统？有什么作用？1.2：什么原因催生了ELK日志分析系统？1.3：ELK日志分析系统的开源工具解析1.3.1：Logstash解析1.3.2：ElasticSearch解析1.3.3：Kiabana解析1.4：...
elk日志系统部署及实践
09-29
elk 日志系统部署及实践
ELK日志分析系统详细部署步骤
Stars1sea的博客
09-21 154
ELK日志分析系统是一个开源的日志管理和分析平台，由三个主要组件组成：Elasticsearch、Logstash和Kibana。Elasticsearch
ELK日志服务器部署文档
Afeiamix的博客
07-16 123
ELK即Elasticsearch、Logstash、Kibana,组合起来可以搭建线上日志系统。
ELK日志分析集群部署
weixin_56270746的博客
07-08 1089
ELK是三个软件的统称，即Elasticsearch、Logstash和Kibana三个开源软件的缩写。这三款软件都是开源软件，通常配合使用，并且都先后归于Elastic.co企业名下，故被简称为ELK协议栈。ELK主要用于部署在企业架构中，收集多台设备上多个服务的日志信息，并将其统一整合后提供给用户。它可以从任何来源、任何格式进行日志搜索、分析与可视化展示。在ELK架构中，Elasticsearch、Logstash和Kibana三款软件作用如下： 2、Elasticsearch（es） Elast
ELK日志分析系统之ELK搭建部署
weixin_71429790的博客
10-11 2585
ELK搭建与部署
再见笨重的ELK，轻量化日志 Loki 牛逼，奉上全攻略教程！
程序员闪充宝
05-19 1446
大家好，我是宝哥！1、前言在对公司容器云的日志方案进行设计的时候，发现主流的 ELK（Elasticsearch，Logstash，Kibana）或者 EFK（Elasticsearch，Filebeat or Fluentd，Kibana）比较重，再加上现阶段对于 ES 复杂的搜索功能很多都用不上，最终选择了 Grafana 开源的 Loki 日志系统。下面我们来介绍下...
如何用ELK搭建TB级微服务海量日志监控系统？
xmt1139057136的专栏
06-11 453
知道的越多，不知道的就越多，业余的像一棵小草！编辑：业余草来源：www.cnblogs.com/dengbangpang/p/12961593.html推荐：https://www.xt...
ELK Stack集群部署+Grafana及可视化图形
热门推荐
技术成就梦想
01-17 1万+
Elasticsearch用于构建高可用和可扩展的系统。扩展的方式可以是购买更好的服务器(纵向扩展)或者购买更多的服务器（横向扩展）,Elasticsearch能从更强大的硬件中获得更好的性能，但是纵向扩展也有一定的局限性。真正的扩展应该是横向的，它通过增加节点来传播负载和增加可靠性。对于大多数数据库而言，横向扩展意味着你的程序将做非常大的改动来利用这些新添加的设备。
java开发面试：常见业务场景之单点登录SSO(JWT)、权限认证、上传数据的安全性的控制、项目中遇到的问题、日志采集(ELK)、快速定位系统的瓶颈
最新发布
zhiaidaidai的博客
12-21 1647
单点登录，Single Sign On（简称SSO）,只需要登录一次，就可以访问所有信任的应用系统。如果是单个tomcat服务，session可以共享，如果是多个tomcat，那么服务session不共享。为此我们需要提出针对单点登录的解决方案。单点登录解决方案。
还在用笨重的ELK？日志系统新贵Loki 了解一下
weixin_44421461的博客
07-12 682
点击上方“Java基基”，选择“设为星标”做积极的人，而不是积极废人！每天14:00更新文章，每天掉亿点点头发...源码精品专栏原创 | Java 2021超神之路，很肝~中文详细注释的开源项目RPC 框架 Dubbo 源码解析网络应用框架 Netty 源码解析消息中间件 RocketMQ 源码解析数据库中间件 Sharding-JDBC 和 MyCAT 源码解析...
帮我写一个elk日志系统部署脚本
03-14
部署ELK日志系统需要以下步骤： 1. 安装Java环境 2. 安装Elasticsearch 3. 安装Logstash 4. 安装Kibana 5. 配置Logstash和Kibana连接Elasticsearch 具体的部署脚本可以根据不同的操作系统和版本进行编写，可以参考...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值