使用三剑客分析Nginx.log

最新推荐文章于 2023-12-29 12:30:23 发布
最新推荐文章于 2023-12-29 12:30:23 发布
阅读量420 收藏
点赞数
分类专栏： liunx 文章标签： linux shell
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_46583017/article/details/111106892
版权

接上一篇三剑客和管道，这篇写一下如何分析Nginx.log

文章目录

Nginx

做web服务器的，网站上点击请求通过nginx启用一个服务，后面是一个别的程序写的服务，但是前端访问都是通过nginx软件提供数据，前端才能看到页面

grep补充命令

grep -A -B -C,显示匹配行的下，上，下上行

grep -A 1显示下一行 grep -B 1 显示上一行 grep -c 1 显示上下各一行 grep -c 4显示上下各4行，就是9行
在这里插入图片描述
grep中使用–line-buffer 才能强制使ping命令的值显示出来

[lg52778738@shell.ceshiren.com ~]$ ping www.baidu.com
PING www.a.shifen.com (180.101.49.11) 56(84) bytes of data.
64 bytes from 180.101.49.11 (180.101.49.11): icmp_seq=1 ttl=49 time=13.1 ms
64 bytes from 180.101.49.11 (180.101.49.11): icmp_seq=2 ttl=49 time=13.2 ms
64 bytes from 180.101.49.11 (180.101.49.11): icmp_seq=3 ttl=49 time=13.1 ms
^C
--- www.a.shifen.com ping statistics ---
10 packets transmitted, 10 received, 0% packet loss, time 9008ms
rtt min/avg/max/mdev = 13.191/13.207/13.223/0.136 ms
[lg52778738@shell.ceshiren.com ~]$ ping www.baidu.com|grep 3
64 bytes from 180.101.49.11 (180.101.49.11): icmp_seq=1 ttl
最低0.47元/天 解锁文章
weixin_46583017
关注
专栏目录
NGINX_六 nginx 日志文件详解
bozuris的博客
06-20 178
【代码】NGINX_六 nginx 日志文件详解。
nginx系列：常用利用shell统计日志
天行健，君子以自强不息；地势坤，君子以厚德载物。
08-29 246
点击上方「蓝字」关注我们0x01：根据访问IP统计UVUV（Unique Visitor）独立访客，统计访问某站点的用户数；IP（Internet Protocol）独立IP数，是指独立...
nginx_log_analysis:nginx日志分析
05-26
本代码设计思路没有变化，但代码是3年前的了，看上去不太利索，最近半年已经有引入了更高性能的代码和流转数据的流程，等时间空了在开放出来。 nginx_log_analysis nginx_log_analysis是一个Nginx日志实时分析系统，目前已经在折800旗下的全部Nginx代理上运行，每天负责数十亿日志的实时分析。整个传输操作在log执行阶段，对请求的响应时间没有影响。如果对Ngx_Lua开发有兴趣的朋友们，可以购买 << Nginx实战：基于Lua语言的配置、开发与架构详解 >> 介绍 nginx_log_analysis是基于Ngx_Lua模块开发，日志通过UDP协议网络传输到InfluxDB数据库，可以部署在Nginx和OpenResty上，它有如 下的功能： 1、支持Nginx集群日志集中存储 2、支持正则表达式的URI日志分析 3、支持upstream_tim
nginx Log分析
Gethin
07-09 369
0,查看状态码排序cat access.log | cut -d '"' -f3 | cut -d ' ' -f2 | sort | uniq -c | sort -r1,查看具体状态码URL详情awk '($9 ~ /404/)' access.log | awk '{print $7}' | sort | uniq -c | sort -r...
nginx 日志统计
cihu2282的博客
03-23 160
IP相关统计 统计IP访问量（独立ip访问数量） awk '{print $1}' access.log | sort -n | uniq | wc -l 查看某一时间段的IP访问量(4-5点) grep "07/Apr/2017:0[4-5]" access.log | awk '{p...
Nginx访问日志分析
XiaodunLP的博客
02-25 1288
nginx默认的日志格式 log_format main '$remote_addr - $remote_user [$time_local] "$request" ' '$status $body_bytes_sent "$http_referer" ' '"$http_user_agent" "$http_x_forw...
php nginx日志分析,如何通过NGINX的log日志来分析网站的访问情况，试试这些命令...
weixin_42511507的博客
03-10 297
想知道你的网站每天的访问情况吗？有多少人访问了？访问最多的页面是哪个？哪个时段访问的人最多？哪个地方访问的最多？每秒有多少请求？很好奇吧，只要你是使用了nginx进行请求抓发，那么就试试下面的命令吧，会有惊喜哦！！一、IP相关统计1、统计IP访问量 统计PVawk '{print $7}' access.log|wc -l复制代码2、独立ip访问数量 统计UVawk '{print $1}' ac...
Linux服务器端Web服务三剑客(Apache Lighttpd Nginx).docx
02-19
### Linux服务器端Web服务三剑客(Apache Lighttpd Nginx) #### 一、Apache ##### 概述 Apache HTTP Server（简称Apache）是由Apache软件基金会维护的一个开源Web服务项目，支持跨平台操作，因其强大的安全性与...
nginx篇11-限速三剑客之limit_conn
tinychen
03-01 3593
本文主要是对nginx官方limit_conn相关模块的配置用法和一些个人理解，limit_conn主要用于限制用户的连接数，在如今多线程并发请求大量普及的情况下，对于一些特殊的场景还是有着一定的用处的。 1、背景 目前来说在nginx上面我们常见的三种限速操作分别是：限制请求数(request)、限制连接数(connection)、限制响应速度(rate)，对应在nginx的模块相关指令分别是limit_req、limit_conn和limit_rate三个系列。limit_conn模块和limit_r
docker三剑客之 docker compose（配置haproxy+nginx负载均衡）
S_K15的博客
07-24 1154
docker三剑客之 docker compose一、docker compose简介二、docker compose实践1、docker compose安装2、`docker-compose.yml` 属性3、docker-compose配置haproxy+nginx负载均衡（1）compose整体结构（2）创建`docker-compose.yml`文件（3）编辑`haproxy.cfg`配置文件（4）编写默认发布内容（5）启动服务（6）查看进程（7）访问测试4、docker compose 常用命令
【Linux系统进阶】Linux 数据库负载高使用正则加三剑客分析日志去重排序找到爬虫IP搞定故障
走向CTO的路上...
08-01 106
命令查看日志文件，然后使用 grep 命令或者 sed 命令查找执行时间较长的 SQL 语句或者访问量较大的 IP 地址，最后使用 whois 命令查找 IP 地址的归属地，并使用 iptables 命令屏蔽爬虫 IP 地址。在 Linux 系统中，可以使用正则表达式和三剑客（grep、sed、awk）来分析日志文件，找到数据库负载高的原因和爬虫 IP。最终结果使用 awk 命令提取 IP 地址，并使用 sort 和 uniq 命令去重并统计每个 IP 地址的访问次数。表示来源 IP 地址，
nginx日志分析
qq_40907977的博客
06-15 367
在nginx.conf中定义的日志格式如下： http { ... log_format main '$remote_addr - $remote_user [$time_local] "$request" ' '$status [$request_body] $body_bytes_sent "$http_referer" ' '"$http_use
Nginx 日志分析
番茄炒蛋君的博客
11-22 3804
目录： 日志分析 日志的常用需求分析 Nginx 日志切割 日志分析 Nginx 默认日志路径/usr/local/nginx/logs/，其中包含访问日志 access.log 和错误 记 录 日 志 error.log。 查看 nginx 访问日志 ： cat /usr/local/nginx/logs/access.log | more Nginx 访问日志打印的格式可以自定义...
Nginx access.log日志分析shell命令
怀素的专栏
12-19 4427
分析日志
最全的nginx日志统计分析
咻一咻的博客
06-17 965
统计PV,UV数 统计所有的PV数 cat access.log | wc -l 统计当天的PV数 cat access.log | sed -n /`date "+%d\/%b\/%Y"`/p | wc -l 统计指定某一天的PV数 cat access.log | sed -n '/20\/Aug\/2019/p' | wc -l 根据访问IP统计UV awk '{print $1}' access.log|sort | uniq -c |wc -l 统计指定某一天访问IP统计
Nginx日志文件详解
qq_45429357的博客
04-14 371
Nginx日志文件详解
nginx的access.log文件详解
chris
12-11 609
1、access.log具体每项代表的意思 参数 说明 示例 $remote_addr 客户端地址 211.28.65.253 $remote_user 客户端用户名称 -- $time_local 访问时间和时区 18/Jul/2012:17:00:01 +0800 $request 请求的URI和HTTP协议 "GET /article-10000.html...
Nginx-日志log部分详解-第一部分
最新发布
jietongyibeizi的博客
12-29 1145
默认值：Default: log_format combined "...";log_format 有默认的无需设置的combined日志格式，相当于apache的combined日志格式环境：Context: http context网站，LB，全局和局部。
编辑 nginx.log，把 aaa 替换成 bbb ，需要备份原来的 log
06-01
第二行命令使用 sed 将 nginx.log 文件中所有的 "aaa" 替换为 "bbb"，并写回到原来的文件中。 需要注意的是，这个操作会直接修改原始的 nginx.log 文件，如果需要保留原始文件不变，可以将第二行命令改为： ``` ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值