ELK原来这么简单！手把手教你搭建实时的分布式搜索和分析引擎

《一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码》，点击传送门，即可获取！
环境依赖：CentOS7.5，JDK1.8，ElasticSearch7.9.3，Logstash 7.9.3，Kibana7.9.3。

2.1 安装ElasticSearch

首先，到官网下载安装包，然后使用tar -zxvf命令解压。

找到config目录下的elasticsearch.yml文件，修改配置：

cluster.name: es-application
node.name: node-1
#对所有IP开放
network.host: 0.0.0.0
#HTTP端口号
http.port: 9200
#elasticsearch数据文件存放目录
path.data: /usr/elasticsearch-7.9.3/data
#elasticsearch日志文件存放目录
path.logs: /usr/elasticsearch-7.9.3/logs

配置完之后，因为ElasticSearch使用非root用户启动，所以创建一个用户。

创建用户

useradd yehongzhi

设置密码

passwd yehongzhi

赋予用户权限

chown -R yehongzhi:yehongzhi /usr/elasticsearch-7.9.3/

然后切换用户，启动：

切换用户

su yehongzhi

启动 -d表示后台启动

./bin/elasticsearch -d

使用命令netstat -nltp查看端口号：

访问http://192.168.0.109:9200/可以看到如下信息，表示安装成功。

2.2 安装Logstash

首先在官网下载安装压缩包，然后解压，找到/config目录下的logstash-sample.conf文件，修改配置：

input {
file{
path => [‘/usr/local/user/*.log’]
type => ‘user_log’
start_position => “beginning”
}
}

output {
elasticsearch {
hosts => [“http://192.168.0.109:9200”]
index => “user-%{+YYYY.MM.dd}”
}
}

input表示输入源，output表示输出，还可以配置filter过滤，架构如下：

配置完之后，要有数据源，也就是日志文件，准备一个user.jar应用程序，然后后台启动，并且输出到日志文件user.log中，命令如下：

nohup java -jar user.jar >/usr/local/user/user.log &

接着再后台启动Logstash，命令如下：

nohup ./bin/logstash -f /usr/logstash-7.9.3/config/logstash-sample.conf &

启动完之后，使用jps命令，可以看到两个进程在运行：

2.3 安装Kibana

首先还是到官网下载压缩包，然后解压，找到/config目录下的kibana.yml文件，修改配置：

server.port: 5601
server.host: “192.168.0.111”
elasticsearch.hosts: [“http://192.168.0.109:9200”]

和elasticSearch一样，不能使用root用户启动，需要创建一个用户：

创建用户

useradd kibana

设置密码

passwd kibana

赋予用户权限

chown -R kibana:kibana /usr/kibana/

然后使用命令启动：

#切换用户
su kibana
#非后台启动，关闭shell窗口即退出
./bin/kibana
#后台启动
nohup ./bin/kibana &

启动后在浏览器打开http://192.168.0.111:5601，可以看到kibana的web交互界面：

2.4 效果展示

全部启动成功后，整个过程应该是这样，我们看一下：

浏览器打开http://192.168.0.111:5601，到管理界面，点击“Index Management”可以看到，有一个user-2020.10.31的索引。

点击Index Patterns菜单栏，然后创建，命名为user-*。

最后，就可以到Discover栏进行选择，选择user-*的Index Pattern，然后搜索关键字，就找到相关的日志了！

三、改进优化

上面只是用到了核心的三个组件简单搭建的ELK，实际上是有缺陷的。如果Logstash需要添加插件，那就全部服务器的Logstash都要添加插件，扩展性差。所以就有了FileBeat，占用资源少，只负责采集日志，不做其他的事情，这样就轻量级，把Logstash抽出来，做一些滤处理之类的工作。

FileBeat也是官方推荐用的日志采集器，首先下载Linux安装压缩包：

https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-7.9.3-linux-x86_64.tar.gz

下载完成后，解压。然后修改filebeat.yml配置文件：

#输入源

结语

小编也是很有感触，如果一直都是在中小公司，没有接触过大型的互联网架构设计的话，只靠自己看书去提升可能一辈子都很难达到高级架构师的技术和认知高度。向厉害的人去学习是最有效减少时间摸索、精力浪费的方式。

我们选择的这个行业就一直要持续的学习，又很吃青春饭。

虽然大家可能经常见到说程序员年薪几十万，但这样的人毕竟不是大部份，要么是有名校光环，要么是在阿里华为这样的大企业。年龄一大，更有可能被裁。

送给每一位想学习Java小伙伴，用来提升自己。

本文到这里就结束了，喜欢的朋友可以帮忙点赞和评论一下，感谢支持！
《一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码》，点击传送门，即可获取！
小伙伴，用来提升自己。

[外链图片转存中…(img-gYCrz8nG-1714421076515)]

本文到这里就结束了，喜欢的朋友可以帮忙点赞和评论一下，感谢支持！
《一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码》，点击传送门，即可获取！