配置logstash收集java日志

0.默认已经安装了ELK,并已经成功运行。如需安装,请移步此处

#请将文中所有的ip地址换成你的主机ip地址

1.修改配置文件

#新建配置文件

sudo vim /etc/logstash/conf.d/java.conf

#添加以下配置

input{
  file{
   path=>"/var/log/elasticsearch/elasticsearch.log"
   type => "elasticsearch-java-log"
   start_position => "beginning"
   stat_interval => "2"
   codec => multiline
     {
       pattern => "^\["
       negate => true
       what => "previous"
      }
}
}
output{
     elasticsearch{
        hosts =>["192.168.108.117:9200"]
        index =>"elasticsearch-java-log-%{+YYYY.MM.dd}.log"
}
}

2.测试配置是否有语法错误

输入以下命令

/usr/share/logstash/bin/logstash -f /etc/logstash/conf.d/java.conf -t

配置成功:

3.修改日志文件的权限为其他用户可读

.

sudo chmod 644 /var/log/elasticsearch/elasticsearch.log

4.重启logstash

sudo systemctl restart logstash

5.如果安装了elasticsearch-head,可以看到集群中多了一个分片。如要安装,请移步此处。

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Logstash是一个开源的数据收集引擎,可以收集、处理和转发各种类型的数据。它是Elastic Stack的一部分,可以与Elasticsearch、Kibana和Beats等工具一起使用,用于实现完整的日志分析和可视化方案。 对于Java应用程序,可以使用Logstashlog4j input插件来收集应用程序的日志数据。首先需要在应用程序的pom.xml文件中添加log4j和logstash-logback-encoder依赖: ```xml <dependency> <groupId>org.slf4j</groupId> <artifactId>slf4j-log4j12</artifactId> <version>1.7.30</version> </dependency> <dependency> <groupId>net.logstash.logback</groupId> <artifactId>logstash-logback-encoder</artifactId> <version>6.6</version> </dependency> ``` 然后在log4j.properties文件配置log4j的输出格式和输出目的地: ```properties log4j.rootLogger=INFO, stdout, logstash log4j.appender.stdout=org.apache.log4j.ConsoleAppender log4j.appender.stdout.layout=org.apache.log4j.PatternLayout log4j.appender.stdout.layout.ConversionPattern=%d{yyyy-MM-dd HH:mm:ss} %-5p %c{1}:%L - %m%n log4j.appender.logstash=net.logstash.log4j.JSONEventLayout log4j.appender.logstash.host=localhost log4j.appender.logstash.port=5044 ``` 这里配置了两个输出目的地,一个是控制台(stdout),一个是logstashlogstash的输出格式使用了JSONEventLayout,它将日志转换为JSON格式,方便Logstash进行解析和处理。 最后在logstash配置文件中添加log4j input插件和elasticsearch output插件: ```yaml input { log4j { mode => "server" host => "0.0.0.0" port => 4560 } } output { elasticsearch { hosts => ["localhost:9200"] index => "logstash-%{+YYYY.MM.dd}" } } ``` 这里配置log4j input插件监听4560端口,将收集到的日志数据发送到elasticsearch output插件,存储到Elasticsearch中。 启动Logstash后,Java应用程序的日志数据就会被自动收集和处理了。可以使用Kibana进行日志的搜索和可视化。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值