ELK框架（1：使用Docker安装Elasticsearch，Kibana，Logstash）

背景：公司项目，出于后期运维成本考虑，打算导入ELK做简单的日志查询

准备工作：

可能涉及到修改虚拟机内核参数的问题
vi /etc/sysctl.conf

#开启 IP 转发功能。这样，Linux 就可以按照路由表的规则来转发数据包，而不仅仅局限于接收和处理目标地址与本地主机相匹配的数据包。
net.ipv4.ip_forward=1
#参数决定了用户空间的进程可以拥有的最大内存映射数量。在 Elasticsearch 或其他需要大量内存映射的应用程序中，通常需要增加这个参数的值，以便系统能够支持更大规模的内存映射。此处一般大于260000+应该就行（最后一句话我猜的）
vm.max_map_count=655360

保存退出，重新运行该文件

sysctl -p

注意事项：版本保持一致！版本保持一致！版本保持一致！

A.Docker安装Elasticsearch

#拉取镜像
docker search elasticsearch
docker pull elasticsearch:7.7.1  

#创建目录
mkdir -p /data/elk/es/{config,data,logs}

#赋予权限
chown -R 1000:1000 /data/elk/es 

#更新配置内容
cd /data/elk/es/config
touch elasticsearch.yml
vi elasticsearch.yml

 

#运行elasticsearch
docker run -it  -d -p 9200:9200 -p 9300:9300 --name elasticsearch \
-e ES_JAVA_OPTS="-Xms1g -Xmx1g" -e "discovery.type=single-node" --restart=always \
-v /data/elk/es/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
-v /data/elk/es/data:/usr/share/elasticsearch/data \
-v /data/elk/es/logs:/usr/share/elasticsearch/logs elasticsearch:7.7.1

B.Docker安装Kibana

#拉取镜像

docker pull kibana:7.7.1

#运行启动

docker run --name kibana \
-e ELASTICSEARCH_HOSTS=http://服务器IP:9200 \
-p 5602:5602 \
-d kibana:7.7.1

#自启动
docker update kibana --restart=always

#进入容器

docker exec -it kibana /bin/bash

#修改配置文件

vi config/kibana.yml  （注意：打码位置用服务器电脑的IP）

保存后退出容器

#重启kibana

docker restart kibana

C.Docker安装Logstash

#拉取镜像

docker pull logstash:7.7.1

#创建文件

mkdir /data/elk/logstash/

touch /data/elk/logstash/logstash.yml

vi /data/elk/logstash/logstash.yml

注意：path.config: /data/docker/logstash/conf.d/*.conf  #别自作聪明改路径，就先/docker

#接着创建文件

mkdir /data/elk/logstash/conf.d/
touch /data/elk/logstash/conf.d/syslog.conf
vi /data/elk/logstash/conf.d/syslog.conf

保存并退出

#这一步我也不知道干啥的，有没有用，反正看见有人整了

vi /etc/rsyslog.conf

在文件最下面加一行

*.* @@ip:5044

#重新启动这个文件

systemctl restart rsyslog

#运行Logstash

docker run -d --restart=always --log-driver json-file --log-opt max-size=100m --log-opt max-file=2 \
-p 5044:5044 --name logstash -v /data/elk/logstash/logstash.yml:/usr/share/logstash/config/logstash.yml \
-v /data/elk/logstash/conf.d/:/data/docker/logstash/conf.d/ logstash:7.7.1

D：验证安装结果：

注意：浏览器访问这几个端口，好像会被防火墙拦截，自行百度关闭防火墙或者好像可以把这几个端口设为白名单

1.查看ES安装结果：访问对应的ip:9200

2.查看Kibana安装结果：访问对应的ip:5602(kibana默认5601，因为我的5601被别的占用了，我用的5602)

3.产看Logstash安装结果：

以上仅为个人实际操作步骤，如有出入不负责。有错误的话欢迎大佬指正！