awk统计排序

最新推荐文章于 2024-04-01 06:50:56 发布
最新推荐文章于 2024-04-01 06:50:56 发布
阅读量1.9k 收藏 1
点赞数
分类专栏： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/riapgypm/article/details/41382715
版权


 access_log 是一个日志文件，现在对里面的IP地址进行统计，并且按数量进行降序排序。

日志样式如：

211.143.50.68 - - [13/Oct/2014:17:05:40 +0800] "POST /mobile/user/login.
216.58.115.41 - - [13/Oct/2014:17:05:40 +0800] "POST /mobile/user/
119.251.70.91 - - [13/Oct/2014:17:05:40 +0800] "POST /mobile/user/
223.98.200.171 - - [13/Oct/2014:17:05:40 +0800] "POST /mobile/
223.98.200.171 - - [13/Oct/2014:17:05:40 +0800] "POST /GameCallBack


命令：awk  '{a[$1]++} END{for(i in a){print i,a[i] | "sort -r -n -k 2"}}' access_log

统计结果为：ip 数量，如：

42.62.86.204 222096
106.3.40.36 104001
120.42.197.250 98855
123.84.153.73 72438
42.62.29.140 55620
123.84.163.107 54370

命令说明：

a[$1]++ ：默认是以空格为分隔符的，ip地址是第一个字段，所以a[$1]++就是统计每个ip出现的数量，

END:表示为脚本运行完之后要执行的语句，即之后的打印排序

sort -r -n -k：是排序 -r:是倒序； -n:是以数字的形式排序，默认是以字符的形式排序；-k是以那个字段进行排序，因为print i a[i],所以统计的数量是第二个字段，所以此处是2.


riapgypm
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
awk数组实战
01-17
默认情况下，`awk`会按照内部排序的键进行遍历，但这种排序通常不可预测。如果你需要特定顺序，可以使用`for`循环和`NF`变量。 ```awk for (i in array) { print i, array[i] } ``` 3. **数组操作** - `...
Shell、awk、sed面试题汇总（无答案）.doc
07-07
8. 数据排序：可以使用 awk 命令来对数据进行排序，例如按照第二列排序。 sed 9. 行号打印：可以使用 sed 命令来打印文件的行号，例如 `sed '=' file`。 10. 空行打印：可以使用 sed 命令来打印文件的空行，例如 `...
统计日志中ip访问次数并排序的三种方法
菜的不行的IT民工
05-09 2920
1 利用linux中的awk命令 grep "GET aaa.log| awk -F " " '{print $NF}' >d:/test.log 假设日志的最后一行是ip地址，则取出日志的最后一行以空格为分隔符并且重定向到d盘下的test.log中。 取出之后还可以进一步操作直接统计出ip访问的次数并且降序排列。 cat test.log | sed 's/:[0-9]\+//g'| awk '{IP[$1]++}END {for(a in IP) print a"-----"IP[..
使用awk聚合和排序
dhcao1112的博客
12-04 1133
用cat和grep筛选文件之后，awk对文件做聚合，sort进行排序
linux命令-awk（运维基本功）
龙叔运维的博客
07-02 1580
运维这一行，绕不开对各种各样的数据做统计分析（日志，性能数据等），所以awk这个数据处理命令可以说是运维的基本功。 在问题来临的时候，如何快速分析现有日志定位问题点？awk是一个很好的辅助工具，所以花费一定的时间去学习它，并在日常工作中有意的多去使用以达到熟练操作，都是很有必要的。 命令介绍 运行模式： awk [参数可选] '条件类型1{动作1} 条件类型2{动作2} ......' filename 常用参数： 【-F】指定分割符，默认空格（如 -F"," 以逗号...
awk命令用法及编程
weixin_34125592的博客
12-18 221
awk(gawk):报告生成器，格式化文本输出：awk,gawk基本用法：gawk [options] ‘program’FILE ...program: PATTERN{ACTION STATEMENT};可以有多个，语句之间用分号分隔print,printf选项：-F：指明输入数据时用到的字段分隔符-v var=value：自定义变量；变量：...
linux awk 排序,shell三剑客之awk(包括sort排序和uniq工具)
weixin_39616674的博客
05-14 3078
shell三剑客之awk在 Linux/UNIX 系统中，awk 是一个功能强大的编辑工具，逐行读取输入文本，并根据指定的匹配模式进行查找，对符合条件的内容进行格式化输出或者过滤处理，可以在无交互的情况下实现相当复杂的文本操作，被广泛应用于 Shell 脚本，完成各种自动化配置任务。awk 所使用的命令格式如下所示，其中，单引号加上大括号“{}”用于设置对数据进行的处理动作。awk 可以直接处理目...
sed-awk正则表达式
09-09
在统计文件中单词出现次数时，`tr`可以用来删除非单词字符，然后配合`sort`、`uniq`进行处理。例如，`tr –s ' '`可以压缩连续的空格为一个空格，`tr ' ' '\n'`则可以将空格替换为换行符，便于按单词进行处理。 `...
shell脚本awk按照某列排序输出
01-09
带排序文件mscto.txt 的内容为： ————————————- 81 38|24 64 18|43 33 46|54 72 33|38 43 108|64 需要按照第二列大小排序命令： for i in `awk -F ‘[ |]’ ‘{print NR,$2}’ mscto.txt|sort -rn -k2|awk ‘{print $1}’`; do awk ‘NR==’$i’ {print}’ mscto.txt; done ———————————— 43 108|64 33 46|54 81 38|24 72 33|38 64 18|43
awk常用统计
Yonx
08-31 2103
Linux记录-常用统计awk #统计第一列ip的个数（uniq -c 打印重复行count计数） cat ip.txt | awk '{print $1}' | sort | uniq -c | sort -rn | head -n 10 #统计tcp连接状态个数 netstat -an | awk '/tcp/{print $6}' | sort | uniq -c awk '{print $1}' test.txt | sort | uniq -c #统计第一列ip的个数 awk '{su
awk常用统计命令
dujidan的博客
10-13 379
【代码】awk常用统计命令。
awk按列求和求平均值、locate: command not found问题、awk统计搜索包含多个关键符号的行数命令以及awk对nginx的日志按接口统计的实现
最新发布
本博客记录了从2014年以来在工作学习中遇到的技术问题、解决方法以及部分个人人生经历、经验等内容。
04-01 464
平常在服务器运维处理的过程中，肯定会要对日志进行一些处理，比如日志统计中肯定需要用上对取出来的一列数据进行求和求平均值。使用awk很容易实现。
统计文件中出现次数最多的前10个单词
jiaoyun007的专栏
07-05 3477
实例 cat logt.log|sort -s -t '-' -k1n |awk '{print $1;}'|uniq -c|sort -k1nr|head -100 统计文件中出现次数最多的前10个单词 使用linux命令或者shell实现：文件words存放英文单词，格式为每行一个英文单词（单词可以重复），统计这个文件中出现次数最多的前10个单词。 cat words.
【awk】awk逆序打印记录
shuhuai007的专栏
02-22 2022
已知log.txt,其内容如下： ================= Beth 4.00 0 Beth 4.00 Dan 3.76 0 Kathy 4.00 10 Mark 5.00 20 Mary 5.50 22 Susie 4.25 18 ================= cat reverse_print.awk: {line[NR] =
软件测试测试开发Linux三剑客之——awk命令详解
湖北太米网络科技有限公司
02-25 998
命令是Linux系统中一种强大的文本处理工具。它可以读取文件的每一行，根据指定的规则进行匹配和处理，并输出相应的结果。awk命令的主要作用是对文本进行分析和处理，它可以根据用户的需求提取、过滤、修改和统计数据。使用awk命令，我们可以轻松地实现文本数据的定制化处理和处理。无论是在系统管理、日志分析、数据整理还是程序开发方面，awk命令都有着广泛的应用场景。​​命令的优点主要体现在它的灵活性和强大的文本处理能力上。作为Linux三剑客之一，awk命令可以轻松地处理文本文件，并从中提取出所需的信息。
awk统计总结
learn_tech的博客
08-07 7240
（1）awk求和 cat data |awk '{sum+=$1} END {print "Sum = ", sum}' （2）平均值 cat data|awk '{sum+=$1} END {print "Average = ", sum/NR}' （3）求最大值 cat data|awk 'BEGIN {max = 0} {if ($1>max) max=$1 fi} E...
awk 统计域出现的次数并且排序
weixin_33872660的博客
09-09 203
[root@VM_166_163_centos ~]# cat 1aaabbbdeesxdsscsdxcsdsxfdd[root@VM_166_163_centos ~]# awk '{num[$1]++} END{for(k in num)print k,"----",num[k]|"sort -rk 2"}' 1s ---- 6d ---- 6x ---- 3b ----...
awk统计ip出现次数
06-28
使用awk命令统计IP出现次数，具体命令如下： ``` awk '{print $1}' 文件名 | sort | uniq -c ``` 其中，$1表示每行的第一个字段，即IP地址；sort命令是用于排序的；uniq -c命令是用于统计每个IP地址出现的次数。执行...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值