ContOS部署elasticsearch实现日志收集，2024年最新原理+实战+视频+源码

本文链接：https://blog.csdn.net/2401_84159688/article/details/137702515

mkdir -p /data/elk/kibana/data
tar xf kibana-8.2.2-linux-x86_64.tar.gz  && cp -r kibana-8.2.2/* /data/elk/kibana/data/

（3）修改配置

cat > kibana.yml <<EOF
#汉化

i18n.locale: "zh-CN"

#kibana监听端口

server.port: 5601

#默认内外网都可以访问

server.host: "0.0.0.0"

#es访问地址

elasticsearch.hosts: ["http://localhost:9200"]

kibana.index: ".kibana"
#加密设置

#Elasticsearch.username:””

#Elasticsearch.password:””

EOF

（4）启动并访问

./bin/kibana --allow-root &

浏览器访问IP:5601

3、Logstash

（1）下载地址

https://artifacts.elastic.co/downloads/logstash/logstash-8.2.2-linux-x86_64.tar.gz

（2）上传并解压

mkdir -p /data/elk/logstash/data
tar xf kibana-8.2.2-linux-x86_64.tar.gz && cp -r logstash-8.2.2/* /data/elk/logstash/data/

（3）修改配置

#重新编写配置

cat > logstash.conf <<EOF

#接收数据

input {

   beats {

#监听地址

     host => '0.0.0.0'

#端口

     port => 5044

   }

}

#处理数据

filter {

   #按需添加过滤器规则来处理和转换数据

}

#推送数据到es

output {

elasticsearch {

    hosts => ["http://http://172.17.212.101:9200"]
#索引名

    index => "%{[@metadata][beat]}-%{[@metadata][version]}-%{+YYYY.MM.dd}"

     #用户认证

#user => "elastic"

     #password => "changeme"

   }

}

#推送数据到本地输出(测试使用)

#output {

#   stdout {

# #ruby格式输出

#       codec => rubydebug

#   }

#}

EOF

（4）启动测试

手动测试，手动输入数据并回车：

./bin/logstash -e "input { stdin { type => stdin } } output { stdout { codec => rubydebug } }"

基于配置文件测试：

nohup ./bin/logstash -f /data/elk/logstash/data/config/logstash.conf >/dev/null 2>&1 &

4、Filebeat

（1）下载地址

https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-8.2.2-linux-x86_64.tar.gz

（2）上传并解压

#创建存放目录并解压安装包
mkdir -p /data/elk/logstash/data

tar xf filebeat-8.2.2-linux-x86_64.tar.gz && cp -r filebeat-8.2.2-linux-x86_64/* /data/elk/filebeat/data/

（3）修改配置

cat > filebeat.yml <<EOF

#收集数据

filebeat.inputs:

#定义要收集的文件类型(type)

- type: log
  #启用

     enabled: true

     paths:

   #日志路径

        - /var/log/messages*
   #自定义字段

     fields:

        type: messages

        ip: 172.17.212.103

     fields_under_root: true

     #索引名

     log_source: messages

#推送数据

output.logstash:

   #logstash地址

     hosts: ["172.17.212.102:5044"]

EOF