shell统计日志中ip出现次数

最新推荐文章于 2024-05-11 16:24:10 发布
最新推荐文章于 2024-05-11 16:24:10 发布
阅读量514 收藏
点赞数
分类专栏： linux 文章标签： shell awk
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ydlmlh/article/details/84627139
版权

转自http://james-lover.iteye.com/blog/2105795

日志如下：

178.60.128.31 www.google.com.hk
193.192.250.158 www.google.com
210.242.125.35 adwords.google.com
210.242.125.35 accounts.google.com.hk
210.242.125.35 accounts.google.com
210.242.125.35 accounts.l.google.com
64.233.181.49 www.google.com
212.188.10.167 www.google.com
23.239.5.106 www.google.com
64.233.168.41 www.google.com
62.1.38.89 www.google.com
62.1.38.89 chrome.google.com
193.192.250.172 www.google.com
212.188.10.241 www.google.com
37.228.69.57 www.google.com
222.255.120.42 www.google.com
222.255.120.42 www.gstatic.com
212.188.10.167 www.googleapis.com
64.233.181.49 www.googleapis.com
64.233.181.49 fonts.googleapis.com
193.192.250.158 plus.google.com
193.192.250.158 talkgadget.google.com 
193.192.250.158 ssl.gstatic.com
193.192.250.158 images-pos-opensocial.googleusercontent.com
193.192.250.158 images1-focus-opensocial.googleusercontent.com
193.192.250.158 images2-focus-opensocial.googleusercontent.com
193.192.250.158 images3-focus-opensocial.googleusercontent.com
193.192.250.158 images4-focus-opensocial.googleusercontent.com
193.192.250.158 images5-focus-opensocial.googleusercontent.com
193.192.250.158 images6-focus-opensocial.googleusercontent.com
193.192.250.158 clients4.google.com
222.255.120.42 google.com
222.255.120.42 apis.google.com
222.255.120.42 clients1.google.com
193.192.250.158 clients2.google.com
193.192.250.158 clients3.google.com
193.192.250.158 clients5.google.com
64.233.181.49 maps.google.com
64.233.181.49 mts0.google.com
64.233.181.49 maps.gstatic.com

命令如下：

cat test.txt|awk '{print $1}'|sort|uniq -c

 结合sort和uniq命令

 

ydlmlh
关注
专栏目录
用shell统计访问日志里每个ip访问次数
wgchen
05-24 544
用shell统计访问日志里每个ip访问次数 今天，要统计一个系统的每个ip访问次数，于是我找到该系统访问日志，并写脚本实现。 访问日志情况： [root@bogon wwwlogs]# head textlaravel.cc.log 192.168.1.115 - - [28/Dec/2020:17:13:52 +0800] "GET / HTTP/1.1" 200 665 "-" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.3
使用shell脚本统计文件中ip出现的次数
xiamoyanyulrq的博客
08-10 2万+
首先准备文件demo.txt，内容如下： 1 192.168.41.20 2 192.168.41.21 3 192.168.41.22 4 192.168.41.23 5 192.168.41.24 6 192.168.41.25 统计出现次数最多的ip次数： cat demo.txt | awk '{print $2}' | sort | uniq -c | s...
运维测试；shell脚本或python : 统计某个⽂件中IP地址出现的次数，从⾼到低排序
最新发布
2301_77752359的博客
05-11 410
5. ⽤ shell 写⼀个斐波那契数列，输⼊是 N，输出是它的第 N 项。2. 我想从file1读取命令的所有输⼊，将所有输出直接输出到file2，将错误读取到⽂件3，我该如何实现？4. Linux的 ls -l 命令，最左侧的 drwxr-xr-x 等都是什么意思？例如，要将文件设置为所有者可读写、组可读、其他用户可读的权限，可以使用。# 将命令执行结果输出到file2，错误输出到file3。为例，第一个字符表示文件类型，后面的九个字符表示文件权限。命令的输出中，最左侧的部分是文件/目录的权限信息。
shell 统计浏览器端ip和访问次数
zyb378747350的专栏
01-19 1236
统计nginx 访问浏览器客户端ip地址和访问次数，并且按访问次数大到小排序：日志格式：xxx|124.236.110.26|-|[17/Jan/2018:03:00:27 +0800]|GET /wzy_wifi71/a3/?dcwpf0dc4=1515990033590 HTTP/1.1|200|54217|http://xxx/a3/|Mozilla/5.0 (Linux; Android
去哪网的一个面试题：shell统计日志中各IP 出现的次数
李黄河
08-19 704
       去哪网的面试：数据量不大的话用awk最方便，但长时间没有用过了，忘记了awk数组的用法。 在这里复习一下。 假设数据格式为： 178.60.128.31 www.google.com.hk 193.192.250.158 www.google.com 210.242.125.35 adwords.google.com 210.242.125.35 accounts.g...
【Shell牛客刷题系列】SHELL25 nginx日志分析3-统计访问3次以上的IP
一起加油~
12-09 608
本文首先复习了grep、awk、sed、cut等命令的相关用法；然后，给出了五种题目的解决方案。
shell脚本分析 nginx日志访问次数最多及最耗时的页面(慢查询）
09-15
本文将介绍一个用于分析`nginx`日志的`shell`脚本，该脚本能够帮助我们找出访问次数最多和最耗时的页面，从而针对性地进行优化。这个脚本类似于`MySQL`中的慢查询日志分析，但针对的是Web页面的慢访问情况。 首先，...
shell 统计一个词出现的概率_【shell脚本实例】shell脚本统计单词频率、出现次数最多的n个单词...
weixin_39842237的博客
12-21 1179
1. 统计的对象words.txt，每个单词占一行(从简考虑了~)zjd@ubuntu:~/test$ cat word.txtusedthiscountmysqlcountthisusedmysqllinuxthisredisappleandroidredisapple2. 统计每个单词的频率方法1：zjd@ubuntu:~/test$ cat word.txt |awk '{a[$0]++}E...
36、统计日志中出现次数最多的前10个ip
weixin_43927540的博客
08-18 1563
题目 统计日志中出现次数最多的前10个ip 解法 利用shell脚本即可 cat test.log | awk -F ' ' '{print $2}'| sort | uniq -c|sort -n -r|awk -F ' ' '{print $2}'|head -n 5 脚本分析： 1.cat *.log将文本内容打印到屏幕 2.使用awk命令可以按照分割符将一行分割为多个列，第一列用$1表示，第二列用$2表示，依次类推 awk -F" " '{print $2} //表示用空格作为分隔符进行
linux下shell处理nginx日志自动生成ip黑名单
01-20
#shell脚本处理nginx日志自动生成ip黑名单 ##统计访问量前10名的ip并写入文件 #!/bin/bash data=`date +%Y-%m-%d` #统计访问量最高的前10ip awk '{print $1}' '/PATH/'$data'.log' | sort -n |uniq -c | sort -rn | ...
用shell统计访问日志里每个ip访问次数【转】
weixin_34185364的博客
12-21 757
今天，要统计一个系统的每个ip访问次数，于是我找到该系统访问日志，并写脚本实现。   访问日志情况： [root@qular ~]# cd /usr/local/nginx/logs/ [root@qunlar logs]# head access.log  59.151.44.186 - - [15/Dec/2014:20:19:11 +0800] "POST http://ebw...
Linux awk统计日志中出现过的IP(或出现次数最多的N个IP)
热门推荐
jirryzhang的博客
09-06 2万+
awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。 awk的用法 awk 'BEGIN{ commands } pattern{ commands } END{ commands }' 第一步：运行BEGIN{ commands ...
linux下shell统计已使用ip,使用shell脚本统计文件中ip出现的次数
weixin_36198509的博客
05-05 909
首先准备文件demo.txt，内容如下：1 192.168.41.202 192.168.41.213 192.168.41.224 192.168.41.235 192.168.41.246 192.168.41.25统计出现次数最多的ip次数：cat demo.txt | awk '{print $2}' | sort | uniq -c | sort -n -r | head -n 1注：a...
Shell查找文档/日志中的ip并按出现的次数倒序输出Linux查本机ip命令
weixin_43260123的博客
12-22 555
egrep -o '[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}' 文件 |sort|uniq -c|sort -nrt " "| head -5 效果 文件： 拓展 查本机ip 方法一： ifconfig eth0 | egrep -o '[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}\.[0-9]{1,3}' | sed -n 1p 方法二 ifconfig eth0 | awk '/inet/ {print $2}'
通过shell统计连接MySQL的ip_用shell统计访问日志里每个ip访问次数
weixin_34626572的博客
01-28 243
今天，要统计一个系统的每个ip访问次数，于是我找到该系统访问日志，并写脚本实现。访问日志情况：[root@qular ~]# cd /usr/local/nginx/logs/[root@qunlar logs]# head access.log59.151.44.186 - - [15/Dec/2014:20:19:11 +0800] "POST http://ebws.travelsky.co...
利用shell脚本查询访问次数最多的100条记录
he_haiqiang的专栏
01-11 1184
提取访问次数的钱100条 cut -d '  ' -f 2,3 record.txt | sort |uniq -c | sort -r; cut -d '  ' -f 2,3 record.txt |sort |uniq -c | sort -r |head -n100; 这条命令用了cut命令的-d和-f选项，-d选项定义了字段分隔符，此处为空格，而-f选项要求cut取出记录中的第二个字
通过shell实现分析nginx日志，自动封单个IP访问量大于指定值的国外IP
Nick学习PHP的点点滴滴
08-31 1935
个人博客原文：http://www.lampnick.com/php/662 1.在nginx的nginx.conf中http段或者server段中引入拒绝访问的IP列表 include /usr/local/nginx/conf/blockip/*/*/*.conf; 2.写shell脚本实现分析访问日志，将国外IP写入到拒绝访问的IP列表 #!/bin/bash #当单个IP访问...
Shell日志分析：十大高效命令揭示IP行为
本文档深入解析了在Shell中分析日志文件的高效命令技巧，对于IT专业人士处理大量网络日志数据具有极高的实用价值。以下是主要内容的详细解读： 1. **IP访问计数**: 使用`awk`命令结合`sort`和`uniq`，可以计算出...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值