awk统计具有相同ID的行的和

最新推荐文章于 2024-04-17 04:58:34 发布
最新推荐文章于 2024-04-17 04:58:34 发布
阅读量2.2k 收藏 1
点赞数
分类专栏： StudyNotes Awk 文章标签： awk 和 统计 相同ID
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ilmlife/article/details/43971595
版权
  • 数据：
    • abcdef|12
      abcdef|11
      abcdef|89
      abcdef|10
      mnwlk3|4
      mnwlk3|5
  • 编写
    • cat silly.test |sort |awk -F '|' 'BEGIN{getline;preId=$1;sum[preId]=$2}{if(preId==$1){sum[preId]+=$2}else{preId=$1;sum[preId]=$2}}END{for(uid in sum){print uid,sum[uid]}}'
ilmlife
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
awk统计文件中某关键词出现次数的命令
01-20
awk -F “” ‘{for(i=1;i<=NF;++i) if($i==”a”) ++sum}END{print sum}’ test.c[root@xiaobb 5906]# awk ‘{for(i=1;i<... 您可能感兴趣的文章:IOS计步器功能实现之Healthkit和CMPedometerJa
sed和awk！
12-01
`awk`，全称“ awk 指令和关键词”，则更像一个轻量级的编程语言，具有变量、循环、条件判断等功能。`awk`以行为单位处理数据，通过指定字段分隔符（默认为空格或制表符）将每行分割成多个字段，并可以对这些字段...
awk之特征相同行的合并 ~转
weixin_34138139的博客
12-23 572
awk之特征相同行的合并 ~转 awk之特征相同行的合并 文本： 1001 hisk01 1001 hisk02 1001 hisk03 1002 hisk04 1002 hisk05 1002 hisk06 1003 hisk07 1003 hisk08 特征相同的合并成一行： 100...
awk统计重复列
qq_17088237的博客
04-29 2248
awk是什么？ AWK是一个优良的文本处理工具，Linux及Unix环境中现有的功能最强大的数据处理引擎之一。这种编程及数据操作语言（其名称得自于它的创始人阿尔佛雷德·艾侯、彼得·温伯格和布莱恩·柯林汉姓氏的首个字母）的最大功能取决于一个人所拥有的知识。awk经过改进生成的新的版本nawk,gawk，现在默认linux系统下日常使用的是gawk，用命令可以查看正在应用的awk的来源（ls -l ...
awk分析日志，统计ip、状态码、域名，详细示例【超实用
最新发布
2401_83946826的博客
04-17 1026
注意日志中的列与日志格式中的列的对应关系；由于空格的存在，并不完全是一 一对应；如：日志中的第一列是ip，对应remoteaddr；四、五两列是时间对应四、五两列是时间对应[remoteaddr；四、五两列是时间对应time_local]，第二列是“-”，第三列也是“-”对应remoteuser信息为空则为“−，第六列是状态码对应remote\_user(信息为空则为“-”)，第六列是状态码对应remoteuser。
linux下统计重复行出现的次数|花式排序|去重,awk|sort|uniq|cut
热门推荐
cy413026的博客
06-12 2万+
1.方法1 使用awk命令统计重复 awk '{a[$0]++}END{for(i in a){print i,a[i] | "sort -r -k 2"}}' testfile 结果如下： 其中a[$0]大概表示将一整行写入数组a，如果是a[$2]则表示将每一行的第二个元素‘memlib’写入数组a，默认以空格作为分割一行的元素。可以用 -F指定分割符如下： awk -F：'{a[$...
awk命令：将某一列、行的数值相加。去除列中重复值，重复行
z的博客
08-11 7761
利用awk命令awk '{print $n}' | awk '{sum+=$1}END{print sum}' 例：
awk对列/行进行统计求和【转】
weixin_30710457的博客
05-18 908
场景】--类似于excel中的sum函数对列/行进行统计求和 A01 30 16 9 3 2 30 30 16 9 3 A02 14 6 1 0 7 14 14 6 1 0 A03 4 0 3 0 1 4 0 4 0 3 A09 6 3 ...
Linux中 sed 和 awk的用法详解
09-15
sed是一个很好的文件处理工具，本身是一个管道命令,awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大 ,本文重点给大家介绍Linux中 sed 和 awk的用法，一起...
sed和awk的必备书籍
05-09
包括： 1. sed与awk+第三版（中文高清晰），内容非常全面详细，看了觉得很不错，学习sed和awk的必备书籍。 2. Effective awk Programming, 4th Edition 3. Sed与awk第二版(高清版).pdf
【Shell】awk命令--输出某列，列求和，列求平均值，列最大值，列去重复，取倒列，过滤行，匹配，不匹配，内置变量|定义分隔符|多个分隔符
bandaoyu的note
04-29 1万+
在awk中运行shell命令 目前我所了解的在awk中运行shell命令 有2中方式实现 1.awk内置函数system 2.通过awk print出要执行的命令 然后交给/bin/bash 执行 awk 内置函数system 执行方法 awk ‘BEGIN{system(“shell命令)}’ 就行 [root@CHSHA-CT-WWW-249 ~]# awk ‘BEGIN{system(“hostname”)}’ CHSHA-CT-WWW-249.360buy.com [root@...
sed与awk去除重复行
alnx37271的博客
08-29 1212
1 如果仅仅是删除内容完全一样重复行 则可以使用sort先进行排序然后使用 uniq进行删除重复数据即可 例如 CUST.TXT Txt代码 130000006800,17,151,01,250100 130000006800,17,151,01,250101 1300001077,17,151,01,256600 ...
shell awk 统计重复个数
JAVA
07-20 7406
有文件file.log内容如下： http://www.sohu.com/aaa http://www.sina.com/111 http://www.sohu.com/bbb http://www.sina.com/222 http://www.sohu.com/ccc http://www.163.com/zzz http://www.sohu.com
awk重复行输出重复数，逆排序
u013176681的专栏
01-19 2143
cat mark.all |awk -F '\t' '{a[$1]++}END{for(i in a){print i,a[i] | "sort -k  2nr"}}'
AWK 输出重复的行 去掉重复的行
firefox_1980的专栏
05-15 5375
AWK是一个非常强大的文本处理工具。 今天尝试着去掉文件中的重复的行， 开始采用了“cat filename | sort -u" 命令， 但是这个命令有很大的缺点，改变了原来行的顺序。 用diff命令，很难查看到文件的差别。 偶然看到一个兄弟写的一个很简单的AWK命令，既能不改变原文本行的相对顺序，并且能够输出／去掉重复的行，而且命令非常简单。 awk 'a[$0]++'
awk 计算符合条件的行数
wangqiaowqo的专栏
06-19 2304
1、 hdfs dfs -cat /source/ent/web/access/20140618/23_10.103.9.70 | awk -F"\t" '{print NF}' | grep 26 | wc -l 2505 2、 cat accessStat.log.2014-06-18 | awk -F "\t" '{print NF}' | grep 26 | wc -l ...
awk学习笔记之行求和和列求和
weixin_34082854的博客
11-15 269
 1.测试的文本内容awk1.t [root@demo ~]# cat awk1.t  reed  100 90 100 Reed  98  92 100 huih  100 90 100 deer  99  91  99 hjl   92  100 80 gsl   80  80  80 zww   85  85  85 swe   85  85  85  2.测试的脚本t.sh [roo...
awk 统计字符数量
09-11
要使用awk统计字符数量，可以使用以下命令： awk -v RS='(targetstring)' 'END {print --NR}' file 其中，"targetstring"是你要统计的字符，file是包含要统计的字符的文件名。这个命令将会统计文件中"targetstring...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值