2 ELK收集nginx的json格式日志_elk 索引别名json格式

##再将日志引用改成json
access_log /var/log/nginx/access.log json;

2.清空nginx原先日志

[root@db01 ~]# > /var/log/nginx/access.log

3.重启nginx,使其配置文件生效

[root@db01 ~]# systemctl restart nginx

4.使用ab命令做模拟访问
也可以使用浏览器访问,手动生成访问日志

[root@db01 ~]# ab -n 100 -c 100 http://172.16.210.53/

5.查看日志
这时候,就能看见日志格式变成了json格式

[root@db01 ~]# tailf /var/log/nginx/access.log
{ “time_local”: “22/Jun/2020:08:53:21 +0800”, “remote_addr”: “172.16.210.53”, “referer”: “-”, “request”: “GET / HTTP/1.0”, “status”: 200, “bytes”: 4833, “agent”: “ApacheBench/2.3”, “x_forwarded”: “-”, “up_addr”: “-”,“up_host”: “-”,“up_resp_time”: “-”,“request_time”: “0.000” }

6.使用es-head查看是否建立索引
filebeat会收集数据,然后导出至elasticsearch

7.修改filebeat配置文件

[root@db01 ~]# vim /etc/filebeat/filebeat.yml
filebeat.inputs:

• type: log
  enabled: true
  paths:
• /var/log/nginx/access.log
  ##添加这两行信息,使其能解析json格式的日志
  json.keys_under_root: true
  json.overwrite_keys: true

output.elasticsearch:
hosts: [“172.16.210.53:9200”]

8.重启filebeat

[root@db01 ~]# systemctl restart filebeat

9.回到kibana的web界面创建索引
点击management

点击Create index pattern

输入filebeat导出到elaticsearch的索引名字,再点击Next stup

过滤选项名选择@timestamp再点击Create index pattern

再点击Discover就能查看到创建的索引的数据了

再点击小三角就能看到全部都是一一对应的json格式数据了


然后可以通过选择对应的字段名,来查看指定想要知道的信息
比如想查看访问的ip都有谁,见选择remote_addr再点击add

只过滤显示访问的ip

再想查看这些ip访问的状态码,就添加status


以此类推,想要显示什么就添加什么

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数软件测试工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年软件测试全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上软件测试开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以添加V获取：vip1024b （备注软件测试）

一个人可以走的很快，但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎扫码加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

2854628061)]

一个人可以走的很快，但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎扫码加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！