awk查看与统计nginx访问日志

最新推荐文章于 2024-04-17 04:58:34 发布
最新推荐文章于 2024-04-17 04:58:34 发布
阅读量4.9k 收藏 7
点赞数 1
分类专栏： Linux 综合
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhengholien/article/details/78006887
版权
切割日志
查找7月16日访问log导出到17.log文件中：
cat web_access.log | egrep "17/Jul/2017" | sed  -n '/00:00:00/,/23:59:59/p' > /tmp/16.log
查看访问量前10的IP
awk '{print $1}' web_access.log | sort | uniq -c | sort -nr | head -n 10 
查看访问前10的URL
awk '{print $11}' web_access.log | sort | uniq -c | sort -nr | head -n 10
查询访问最频繁的URL
awk '{print $7}' web_access.log | sort | uniq -c | sort -n -k 1 -r | more
查询访问最频繁的IP
awk '{print $1}' web_access.log | sort | uniq -c | sort -n -k 1 -r | more
根据访问IP统计UV
awk '{print $1}' web_access.log | sort | uniq -c | wc -l
统计访问URL统计PV
awk '{print $7}' web_access.log | wc -l
根据时间段统计查看日志
cat web_access.log | sed -n '/17\/Jul\/2017:12/,/17\/Jul\/2017:13/p' | more
zhengholien
关注
  • 1
    点赞
  • 踩
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Nginx日志统计分析的常用命令总结
01-20
本文主要给大家总结了关于Nginx日志统计分析的一些常用命令，分享出来供大家参考学习，下面来一起看看详细的介绍： 一、IP相关统计 统计IP访问量 awk '{print $1}' access.log | sort -n | uniq | wc -l 查看某一...
shell脚本分析 nginx日志访问次数最多及最耗时的页面(慢查询）
09-15
本文将介绍一个用于分析`nginx`日志的`shell`脚本，该脚本能够帮助我们找出访问次数最多和最耗时的页面，从而针对性地进行优化。这个脚本类似于`MySQL`中的慢查询日志分析，但针对的是Web页面的慢访问情况。 首先，...
awk处理nginx日志
KimmKing的技术博客
10-03 6156
awk处理nginx日志主要是将非结构化的日志处理成结构话数据并入库做统计，本场景是统计rest接口的调用情况： nginx日志设置 awk抽取字段 awk日期格式化 拼装sql与导入数据库 crontab自动执行 配合log rotate 统计分析 邮件通知 报表展示 nginx日志设置nginx.conf中：log_format main '$remote_addr - $remote_us
awk统计访问日志access.log
LILAIQUN博客
10-12 405
awk如何使用 简单文本处理中，功能强大的awk命令。下文详细描述使用方法与示例: 语法： awk [选项参数] 'script' var=value file(s) 或 awk [选项参数] -f scriptfile var=value file(s) 查看最新的访问日志 $ tail -n 50000 /data1/logs/nginx/access.log 0.012 0.012 10...
awk分析日志，统计ip、状态码、域名，详细示例【超实用
最新发布
2401_83946826的博客
04-17 967
注意日志中的列与日志格式中的列的对应关系；由于空格的存在，并不完全是一 一对应；如：日志中的第一列是ip，对应remoteaddr；四、五两列是时间对应四、五两列是时间对应[remoteaddr；四、五两列是时间对应time_local]，第二列是“-”，第三列也是“-”对应remoteuser信息为空则为“−，第六列是状态码对应remote\_user(信息为空则为“-”)，第六列是状态码对应remoteuser。
nginx系列:常用利用shell统计日志
weixin_39833509的博客
08-30 402
nginx系列：常用利用shell统计日志 0x01：根据访问IP统计UV UV（Unique Visitor）独立访客，统计访问某站点的用户数； IP（Internet Protocol）独立IP数，是指独立的浏览了页面的不同IP，即统计不同的IP浏览用户数量。同一IP不管访问了几个页面，独立IP数均为1；不同的IP浏览页面，计数会加1。IP是基于用户广域网IP地址来区分不同的访问者的，所以多个用户（多个局域网IP）在同一个路由器（同一个广域网IP）内上网，可能被记录为一个独立IP访问者。另外如果用
linux awk nginx log,awk处理nginx日志
weixin_32396347的博客
05-15 253
awk处理nginx日志主要是将非结构化的日志处理成结构话数据并入库做统计，本场景是统计rest接口的调用情况：nginx日志设置awk抽取字段awk日期格式化拼装sql与导入数据库crontab自动执行配合log rotate统计分析邮件通知报表展示nginx日志设置nginx.conf中：log_format main '$remote_addr - $remote_user [$time...
awk 统计nginx 日志 pv uv
flye的专栏
06-27 1123
awk 统计nginx 日志pv uv
shell版Nginx日志蜘蛛爬取查看脚本
09-15
2. 使用`cat`命令读取Nginx访问日志文件（需要用户手动修改为实际的日志路径）。`grep`命令过滤出指定日期（`$d/$m`）的记录，并进一步筛选出包含当前蜘蛛User-Agent的行。 3. `wc -l`计算上一步中筛选出的行数，即...
Nginx状态监控以及日志分析详解
09-29
- 统计唯一访问者（UV）： ```bash awk '{print $1}' access.log | sort -n | uniq | wc -l ``` - 查找访问频率最高的IP（前10）： ```bash awk '{print $1}' access.log | sort -n | uniq -c | sort -nr | ...
Linux/Nginx如何查看搜索引擎蜘蛛爬虫的行为
09-15
关于启用和查看Nginx日志，通常Nginx的日志文件路径在安装时已经设定。如果使用像LNMP这样的安装包，你可以通过`whereis nginx`找到Nginx的安装位置，然后在配置文件夹中查看配置文件以找到日志路径。若日志功能已...
Nginx日志统计
weixin_34199335的博客
11-15 102
1）按每小时切割Nginx访问日志，并且将日志自动上传至FTP服务器；#!/bin/bash#auto mv nginx log shell#by author xiaomingS_LOG=/usr/local/nginx/logs/access.logD_LOG=/data/backup/`date +%Y%m%d%H%M`echo -e "\033[32mPlease w...
ip访问次数统计 nginx_统计Apache或nginx日志里访问次数最多的前十个IP
weixin_39927059的博客
12-30 233
1.根据访问IP统计UVawk '{print $1}' access.log|sort | uniq -c |wc -l2.统计访问URL统计PVawk '{print $7}' access.log|wc -l3.查询访问最频繁的URLawk '{print $7}' access.log|sort | uniq -c |sort -nk 1 -r|more4.查询访问最频繁的IPawk '{...
nginx日志所有HTTP状态及次数统计
weixin_34072637的博客
10-12 578
2019独角兽企业重金招聘Python工程师标准>>> ...
nginx 日志统计命令
iteye_7066的博客
12-09 275
  cat access.log.10 | awk '{a[$1]++} END {for(b in a) print b"\t"a[b]}' | sort -k2 -r | head -n 10  
nginx日志访问量统计
weixin_46837396的博客
02-13 1982
1）.根据访问IP统计UV awk '{print $1}' access.log|sort | uniq -c |wc -l 过滤指定接口地址，例如getCurrentUser()作为获取用户信息接口，访问一次网站只统计一次，因此可以作为UV参考 awk '{print $1 $7}' access.log|grep rresource/api/userInfo/getCurrentUser|sort | uniq -c |wc -l 2）.统计访问URL统计PV awk '{print $7}'
查找txt中的中文字符_找出nginx请求日志中某个url请求总次数排名前十的ip地址...
weixin_39990819的博客
11-29 153
答案如下：# 利用linux自带命令：sort、awk、grep、head、uniq组合得出相应的答案awk '{print $1}' | grep 'www.xxxx.com' access.log | sort | uniq -c | sort -nr -k1 | head -n 10命令说明awk命令说明AWK 是一种处理文本文件的语言，是一个强大的文本分析工具。之所以叫 AWK...
nginx 服务器，如何查看ip 访问量
weixin_45379180的博客
07-10 1320
【代码】nginx 服务器，如何查看ip 访问量。
nginx日志统计一段时间内ip的访问次数进行排序&访问量统计
深圳市多克创新科技有限公司
06-13 1403
nginx日志统计一段时间内ip的访问次数&访问量统计
写一个nginx访问日志分析的shell脚本
03-02
以下是一个简单的Shell脚本，用于分析nginx访问日志： ```shell #!/bin/bash # 设置日志文件路径 LOG_FILE="/var/log/nginx/access.log" # 统计访问次数最多的前10个IP地址 echo "Top 10 IP addresses by number of requests:" awk '{print $1}' $LOG_FILE | sort | uniq -c | sort -rn | head -n 10 # 统计最常被请求的前10个URL echo "Top 10 requested URLs:" awk '{print $7}' $LOG_FILE | sort | uniq -c | sort -rn | head -n 10 # 统计最常出现的HTTP状态码 echo "HTTP status codes with count:" awk '{print $9}' $LOG_FILE | sort | uniq -c | sort -rn # 统计访问来源域名的数量 echo "Number of unique referer domains:" awk '{print $11}' $LOG_FILE | awk -F/ '{print $3}' | sort | uniq | wc -l ``` 这个脚本首先设置了nginx访问日志文件的路径，然后使用awk和其他命令来提取有用的信息并进行统计。它将输出访问次数最多的前10个IP地址、最常被请求的前10个URL、最常出现的HTTP状态码以及访问来源域名的数量。 你可以将脚本保存为文件，例如"nginx_log_analysis.sh"，然后使用chmod命令将其设置为可执行文件： ```shell chmod +x nginx_log_analysis.sh ``` 然后在终端中运行它： ```shell ./nginx_log_analysis.sh ``` 它将输出上述统计信息。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值