awk 统计ip

最新推荐文章于 2023-06-08 13:56:36 发布
最新推荐文章于 2023-06-08 13:56:36 发布
阅读量1.2k 收藏 2
点赞数
分类专栏： Linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Haka36/article/details/84843009
版权 
—————— 
yum安装awk
yum install gawk

查看awk安装目录
which awk
/bin/awk

—————— 
统计日志中出现不同的ip
awk '{a[$1]++} END {for(i in a) print(a[i], i)}' visit.log | sort
1 113.110.176.131
1 180.153.114.199
2 101.226.33.200
2 101.226.51.205
2 131.216.51.220
3 101.226.51.227
3 180.153.205.103
5 101.226.51.52
8 192.168.56.1

统计访问量大于2的ip
awk '{a[$1]++} END {for(i in a) if(a[i]>2) print(i, a[i])}' visit.log | sort -rn -k 2
192.168.56.1 8
101.226.51.52 5
180.153.205.103 3
101.226.51.227 3

统计访问次数前5的ip
awk '{a[$1]++} END {for(i in a) print(i, a[i])}' visit.log | sort -rn -k 2 | head -5
192.168.56.1 8
101.226.51.52 5
180.153.205.103 3
101.226.51.227 3
131.216.51.220 2

awk '{a[$1]++} END {for(i in a) print(i, a[i])}' visit.log | sort -n -k 2 | tail -n 5
131.216.51.220 2
101.226.51.227 3
180.153.205.103 3
101.226.51.52 5
192.168.56.1 8

—————— 参数列表
sort命令的参数
-r 逆序，从大到小，-n 已数值作比较，可以连写为-rn；
-k 2 根据第二列进行排序

tail -n num 取最后的num个

—————— visit.log
180.153.114.199 - - [03/Jul/2013:14:45:52 +0800] GET /wp-admin/plugin-install.php?tab=search&type=term&s=Photogram&plugin-search-input=%E6%90%9C%E7%B4%A2%E6%8F%92%E4%BB%B6 HTTP/1.1 302 0 - Mozilla/4.0 -
101.226.33.200 - - [03/Jul/2013:14:45:52 +0800] GET /wp-admin/plugin-install.php?tab=search&type=term&s=Photogram&plugin-search-input=%E6%90%9C%E7%B4%A2%E6%8F%92%E4%BB%B6 HTTP/1.1 302 0 - Mozilla/4.0 -
101.226.33.200 - - [03/Jul/2013:14:45:52 +0800] GET /wp-admin/plugin-install.php?tab=search&type=term&s=Photogram&plugin-search-input=%E6%90%9C%E7%B4%A2%E6%8F%92%E4%BB%B6 HTTP/1.1 302 0 - Mozilla/4.0 -
113.110.176.131 - - [03/Jul/2013:15:03:57 +0800] GET /wp-content/themes/catjia-lio/images/menu_hover_bg.png HTTP/1.1 304 0 http://demo.catjia.com/wp-content/themes/catjia-lio/style.css Mozilla/5.0 (Windows NT 6.2; WOW64; rv:21.0) Gecko/20100101 Firefox/21.0 -
180.153.205.103 - - [03/Jul/2013:15:13:59 +0800] GET /wp-admin/options-general.php HTTP/1.1 302 0 - Mozilla/4.0 -
180.153.205.103 - - [03/Jul/2013:15:13:59 +0800] GET /wp-admin/options-general.php HTTP/1.1 302 0 - Mozilla/4.0 -
180.153.205.103 - - [03/Jul/2013:15:13:59 +0800] GET /wp-login.php?redirect_to=http%3A%2F%2Fdemo.catjia.com%2Fwp-admin%2Foptions-general.php&reauth=1 HTTP/1.1 200 2269 - Mozilla/4.0 -
101.226.51.227 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
101.226.51.227 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
101.226.51.227 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
101.226.51.205 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
101.226.51.205 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
131.216.51.220 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
131.216.51.220 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
101.226.51.52 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
101.226.51.52 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
101.226.51.52 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
101.226.51.52 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
101.226.51.52 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
192.168.56.1 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
192.168.56.1 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
192.168.56.1 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
192.168.56.1 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
192.168.56.1 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
192.168.56.1 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
192.168.56.1 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -
192.168.56.1 - - [03/Jul/2013:15:14:07 +0800] GET /wp-admin/options-general.php?settings-updated=true HTTP/1.1 302 0 - Mozilla/4.0 -

——————

 

vicosz
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
awk统计独立IP
chkee的专栏
12-17 1160
awk文件形式 -----------ip.awk---------- {         ip[$1]++ } END {         for(i in ip)         {                 print i,ip[i] >"/tmp/ip.txt"         } } awk -f ip.awk /usr/local/apach
awk 精萃
千里之行始于足下
10-26 1625
awk 文章汇总
Linux awk统计日志中出现过的IP(或出现次数最多的N个IP)
lxw1844912514的博客
09-08 7113
awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。 awk的用法 awk 'BEGIN{ commands } pattern{ commands } END{ commands }' 第一步：运行BEGIN{ commands }语句块中的语句。 第二步：从文件或标准输入(stdin)读取一行。然后运行pattern{ commands
使用awk统计分析
javascript_good的博客
06-08 554
awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据的分析并生成报告时显得尤为强大，简单说就是awk把文件逐行读入，以空格为默认分隔符，将每行切片，切开的部分再进行分析处理，因为切开的部分使用awk可以定义变量，运算符，流程控制语句进行深度加工与分析。awk分解行记录,获取每一个域的记录域:根据指定符号,把一行记录分解成多个小记录,每个小记录成为域，记录:一行数据awk 分解记录:1.awk -F 分解符号2.awk 默认按照""分解。
awk 命令详解
weixin_56270746的博客
05-13 6254
一、awk工具介绍 功能强大的编辑工具 五交互的情况下实现复杂的文本操作 命令格式 awk 选项 '模式或条件 {编辑命令}' 文件1 文件2 awk -f 脚本文件 文件1 文件2 二、awk 工具原理 当读到第一行时，匹配条件，然后执行指定动作，再接着读取第二行数据处理，不会默认输出 如果没有定义匹配条件默认是匹配所有数据行，awk隐含循环，条件匹配多少次动作就会执行多少次 逐行读取文本，默认以空格为分隔符进行分隔，将分隔所得的各个字段保存到内建变量中，并按模式或者条件执行编辑命令 s
awk 统计日志中的ip和userId--分析用户恶意刷接口行为
阅微草堂
08-06 450
awk 统计日志中的ip和userId--分析用户恶意刷接口行为
AWK Tutorial Guide
09-06
3. 统计分析：AWK可以进行简单的统计计算，如平均值、中位数和众数。 五、AWK的常用命令和函数 - `print`：打印指定的字段或表达式。 - `printf`：格式化输出，类似于C语言的printf函数。 - `split`：将一个字符串...
awk数组实战
01-17
- 数据统计：使用数组统计文件中单词出现的频率。 - 表格处理：通过数组解析CSV文件，实现列的筛选、合并或转换。 - 日志分析：在日志文件中，数组可以帮助定位特定IP地址或错误代码的频繁出现。 总之，`awk`的...
awk 使用手册
11-20
这将统计访问日志中的IP地址并输出访问次数最多的IP。 通过深入学习`awk`，你可以高效地处理各种文本数据，提升在命令行环境下的工作效率。参考`gawk.pdf`和`nawk manual.pdf`文档，将帮助你掌握更多`awk`的高级...
教你如何使用 awk 处理文本内容.doc
10-21
9. 查看每个 IP 打开的连接数：在分析网络连接时，awk 可以帮助提取并统计特定信息，例如 `netstat` 输出。 总之，awk 是一个功能强大的文本处理工具，能够高效地处理和分析大量文本数据。通过熟练掌握其基本语法和...
071204awk应用1
08-08
- `tcpdump -i eth0 -tnn dst port 80 -c 1000 | awk -F"." '{print $1"."$2"."$3"."$4}' | sort | uniq -c | sort -nr |head -20`: 监听eth0接口，捕获1000个目标端口为80的数据包，统计最频繁的IP。 4. **检查...
awk分析日志，统计ip、状态码、域名，详细示例【超实用】
weixin_43234959的博客
09-25 6148
一、第一步，先确认日志格式 1、日志格式示例如下，各参数的含义在此暂不做解释，以下配置在nginx.conf中定义； 2、具体nginx日志示例如下 注意日志中的列与日志格式中的列的对应关系；由于空格的存在，并不完全是一 一对应； 如：日志中的第一列是ip，对应$remote_addr；四、五两列是时间对应[$time_local]，第二列是“-”，第三列也是“-”对应$remote_use...
如何使用 awk 输出文本中的字段和列
weixin_33807284的博客
07-24 144
首先我们要知道，awk 能够自动将输入的行，分隔为若干字段。每一个字段就是一组字符，它们和其他的字段由一个内部字段分隔符分隔开来。 如果你熟悉 Unix/Linux 或者懂得 bash shell 编程，那么你应该知道什么是内部字段分隔符（IFS）变量。awk 中默认的 IFS 是制表符和空格。 awk 中的字段分隔符的工作原理如下：当读到一行输入时，将它按照指定的 IFS 分割为不同...
awk输出前最多ip地址
qq_47148037的博客
04-24 244
awk '{ip[$1]++} END {for (i in ip) print i,ip[i]}' /var/log/httpd/access_log
shell实用脚本使用awk统计ng网站访问量
m0_57261942的博客
08-10 531
使用awk统计ng网站访问量、 方法一 #统计日志信息，可以找出访问者的ip， awk '{print $1}' /var/log/httpd/access_log 方法二 #可以得到哪个ip来访的次数 awk '{a[$1]++}END{for(i in a){print i,a[i]}}' /var/log/httpd/access_log 方法三 #查看日志中某个ip的出现次数，以及ip，然后按降序排列，出现次数最大的 awk '{ip[$1]++}END{for(i in ip{print
nginx日志ip筛选
weixin_49553825的博客
08-09 642
1、ip访问量统计 grep '09/Aug/2021' /var/log/nginx/access.log | awk '{ ip[$1]++ } END{for (i in ip){print ip[i]}}' 2、ip访问量及ip 统计 grep '09/Aug/2021' /var/log/nginx/access.log | awk '{ ip[$1]++ } END{for (i in ip){print ip[i],i}}' 各个状态码的统计 grep '09/Aug/2021' /
大数据技术分享 Spark技术讲座 荷兰铁路的预测性维护 共32页.pdf
最新发布
07-18
大数据技术分享 Spark技术讲座 荷兰铁路的预测性维护 共32页.pdf
awk统计ip出现次数
06-28
使用awk命令统计IP出现次数，具体命令如下： ``` awk '{print $1}' 文件名 | sort | uniq -c ``` 其中，$1表示每行的第一个字段，即IP地址；sort命令是用于排序的；uniq -c命令是用于统计每个IP地址出现的次数。执行...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值