统计特定状态码的IP列表并计算其访问次数

最新推荐文章于 2024-07-23 20:20:57 发布
最新推荐文章于 2024-07-23 20:20:57 发布
阅读量515 收藏
点赞数
分类专栏： linux基础
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_24336773/article/details/82903907
版权

web访问日志access.log的格式如下，请编写shell脚本统计8.14当天访问web服务器返回非200状态码IP列表并计算其访问次数，由高到低排序。

0.001 215.26.54.129 -- [14/Aug/2016:02:56:50 +0800] "GET / HTTP/1.1" 400 1162 "-"
0.001 215.26.16.26 -- [14/Aug/2016:02:56:50 +0800] "GET / HTTP/1.1" 200 1162 "-"
0.001 215.26.16.26 -- [15/Aug/2016:02:56:50 +0800] "GET / HTTP/1.1" 200 1162 "-"
0.001 215.26.16.26 -- [14/Aug/2016:02:56:50 +0800] "GET / HTTP/1.1" 300 1162 "-"
0.001 215.26.16.240 -- [14/Aug/2016:02:56:50 +0800] "GET / HTTP/1.1" 500 1162 "-"
0.001 215.26.16.240 -- [14/Aug/2016:02:56:50 +0800] "GET / HTTP/1.1" 500 1162 "-"
0.001 215.26.200.2 -- [14/Aug/2016:02:56:50 +0800] "GET / HTTP/1.1" 500 1162 "-"

grep '14/Aug' access.log | awk '$9!=200 {ip[$2]++} END {for (i in ip) print ip[i],i}' | sort -nr

grep过滤出日期为8月14的行；
awk对符合条件的行进行统计；
sort对最终的结果进行排序；
在这里插入图片描述

清塘荷韵_kathy
关注
专栏目录
一个简单的每日访客IP统计
野驴上磨
03-25 3671
<?php $path='dailyip'; $date=date('Ymd'); $save=$path.'/save';if(!file_exists($save)){mkdir($save,0777,true);} $temp=$path.'/temp';if(!file_exists($temp.'/'.$date)){mkdir($temp.'/'.$date,0777,true);}
分析特定ip的访问页面时间和访问者的机器类型
02-26
日志数据通常包含了大量的信息，包括但不限于访问时间、请求的URL、响应状态码、响应大小、客户端IP地址以及用户代理（User-Agent）等。其中，用户代理信息尤为重要，因为它能透露出访问设备的类型、操作系统以及...
使用数组统计出访问日志中每个状态码的数量
51DevOps-刺天冬
05-10 213
[root@qls /service/scripts/day13]# cat g_array-2.sh #!/bin/bash #声明关联数组 declare -A Array_State awk '{print $9}' access.log >access_state.log #循环赋值 while read line do let Array_State[${line}]++ done < access_state.log #遍历与循环 for i in ${!Array_Stat
Linux-文件权限管理
最新发布
weixin_64502313的博客
07-23 2861
linux服务器上有严格的权限等级，如果权限过高导致误操作会增加服务器的风险。所以对于了解linux系统中的各种权限及要给用户，服务等分配合理的权限十分重要。文件权限大致分为基本权限、高级权限、特殊权限和隐藏权限，下面依次从这四个方面介绍。本文简单介绍了在Linux中，用户的基本权限，高级权限，特殊权限和隐藏权限的相关用法.
状态返回码和日志统计
weixin_34326179的博客
01-04 238
一、Nginx状态返回码 二、Nginx日志统计 一、Nginx状态返回码 http返回状态码(Status-Code), 以3位数字组成 200 成功 301 永久重定向(redirect) 302 临时重定向(redirect) 304 浏览器...
由统计ip出现次数展开的...
weixin_34248258的博客
05-27 102
2019独角兽企业重金招聘Python工程师标准>>> ...
nginx（二）---Nginx 日志Log
qq_47800859的博客
01-30 6800
日志配置 日志轮转/切割 日志分析
python实现分析apache和nginx日志文件并输出访客ip列表的方法-电.pdf
12-10
为了提高效率，可以将IP地址存储到列表中，而不是直接打印，这样可以进行进一步的分析，例如统计访问次数、找出最频繁的IP地址等： ```python visitor_ips = [] with open('apache_log.txt', 'r') as log_file: ...
免费的ip数据库淘宝IP地址库简介和PHP调用实例
10-26
如果返回的状态码是0，即表示请求成功，然后将IP地址所在的国家、省份、城市、运营商等信息输出到控制台。如果状态码不是0，则表示请求失败。 整体来看，淘宝IP地址库是一个功能丰富、使用简便的免费IP信息查询服务...
统计一天的访问人数以及总访问数
03-22
标题中的“统计一天的访问人数以及总访问数”是指在网站运营中，为了分析网站的活跃度和用户行为，需要统计在特定时间段（例如一天）内独立访客的数量以及累计的总访问次数。这个过程涉及到网页日志分析、数据挖掘...
统计Nginx日志里前一个小时的IP数量以及IOS占比
07-19
可以使用哈希表（如bash的关联数组）来存储IP及其访问次数。同时，记录iOS设备的访问次数。 5. **输出结果**：定期（如每分钟）输出当前IP总数及iOS设备的访问占比。 "IPcounter_1531992172.log"可能是运行上述...
awk分析日志，统计ip、状态码、域名，详细示例【超实用】
weixin_43234959的博客
09-25 6210
一、第一步，先确认日志格式 1、日志格式示例如下，各参数的含义在此暂不做解释，以下配置在nginx.conf中定义； 2、具体nginx日志示例如下 注意日志中的列与日志格式中的列的对应关系；由于空格的存在，并不完全是一 一对应； 如：日志中的第一列是ip，对应$remote_addr；四、五两列是时间对应[$time_local]，第二列是“-”，第三列也是“-”对应$remote_use...
检测Nginx访问成功(状态码200)的IP及次数
asd0351992的博客
10-12 1248
cat access.log |awk '{print $1,$9}'|grep '200'|sort | uniq -c|awk '{print $2" "$1}' 转载于:https://www.cnblogs.com/Liang-jc/p/9778050.html
Linux awk 统计 nginx 日志状态码非 200 的地址及其数量
潘广宇的博客
03-24 3068
cat nginx.log | awk '{print $8,$10}' | awk 'BEGIN{count[$1]=0}($2!=200){count[$1]+=1}END{for(i in count) print(i, count[i])}' 输出： /hello.html 1 /favicon.ico 559 /hello2.html 11
【SHELL】统计Nginx访问日志状态码
奇峰小筑
05-30 4198
######################################################################### # File Name: check_nginx_server.sh # Author: Moshiyou # mail: momo1a@qq.com #Created Time:Mon 30 May 2016 10:21:52 AM CST #####
海量数据中找出出现次数最多的前10个URL（如何找出访问最多的IP，如何从大量数据中找出高频词）
热门推荐
qq_35858961的博客
08-08 1万+
教你如何迅速秒杀掉：99%的海量数据处理面试题 https://blog.csdn.net/v_july_v/article/details/7382693 十道海量数据处理面试题与十个方法大总结 https://blog.csdn.net/twlkyao/article/details/12037073 题目描述： 给定a、b两个文件，各存放50亿个url，每个url各占64B，...
61-分IP统计访问次数
Lich Howger
11-24 231
  分IP统计访问次数 我们可以统计一下所有IP 访问我们服务器的次数 这样就可以看出是不是有些人 正在攻击我们 当然,这只是比较简单的 比较基础的办法 但是学习一下当然是好的 我们先来一个ServletContextListener public class MainListener implements ServletContextListener { @Overr...
ELK之Kibana
知行合一 止于至善
08-21 5721
Elasticsearch/Logstash/Kibana作为目前开源领域最为炙手可热的监控三剑客声名大噪。ELK三者各司其职，本文将简单地介绍一下如何使用Docker结合ElasticSearch和Kibana启动Kibana的图形界面。
使用 Map-Reduce 统计Web 服务器 access.log 日志文件
weixin_33970449的博客
07-15 85
2019独角兽企业重金招聘Python工程师标准>>> ...
使用Pig分析网站日志统计IP访问次数
3. 计算IP访问次数：通过GROUP BY操作和COUNT函数，我们可以计算每个IP地址的访问次数。 ```pig IP_Counts = GROUP IPS by ip; COUNT_IPS = FOREACH IP_Counts GENERATE group, COUNT(IPS.ip); ``` 4. 存储结果：...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值