awk实现group by 功能

最新推荐文章于 2024-05-10 11:24:39 发布
最新推荐文章于 2024-05-10 11:24:39 发布
阅读量9.7k 收藏 1
点赞数 1
分类专栏： shell linux 文章标签： awk unix
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xiaozhuangfeng/article/details/38920517
版权
[app_usr@ haha]$ ls
BOSSNM_0_3032_9069_50_H1_20120315_020_00000011_000.json  BOSSNM_0_3032_9069_50_H1_20120315_020_00000015_000.json
BOSSNM_0_3032_9069_50_H1_20120315_020_00000012_000.json  BOSSNM_0_3333_9069_50_H1_20120315_020_00000011_000.json
BOSSNM_0_3032_9069_50_H1_20120315_020_00000013_000.json  BOSSNM_0_3333_9069_50_H1_20120315_020_00000012_000.json
BOSSNM_0_3032_9069_50_H1_20120315_020_00000014_000.json  BOSSNM_0_3333_9069_50_H1_20120315_020_00000013_000.json
[app_usr@ haha]$ 
[app_usr@ haha]$ ls | awk '{a[substr($0, 10, 9)] += 1}END{for (i in a){printf "%s %d\n", i, a[i]} }'
3333_9069 3
3032_9069 5
[app_usr@ haha]$ 
[app_usr@ haha]$
xiaozhuangfeng
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
在Powershell中使用Group-Object和-GroupBy
weixin_30628077的博客
06-26 385
使用Group-Object(group)按组统计 1 PS C:\> Get-Command -Module Microsoft.PowerShell.LocalAccounts | group Noun 2 3 Count Name Group ...
awk中实现ord函数功能
09-15
然而，awk本身并不内置这个函数，因此在awk中实现ord函数的功能需要自定义方法。本文将详细解释如何在awk中实现ord函数，并提供两种不同的实现方式。 首先，我们来看第一种实现方式： ```awk awk 'BEGIN{ for (i ...
使用awk数组功能实现类似SQL语句中的group by功能
匿_名_用_户的专栏
03-21 917
使用awk数组功能实现类似SQL语句中的group by功能文本处理中，有时需要实现类似SQL语句中的group by功能。在关系数据库中，实现很容易，比如下面的group by SQL语句可以查询每个月的总收入inst105@db2a:~$ db2 "select * from test"MONTH      INCOME    ---------- -----------Jan        ...
用awk做log聚合
最新发布
至虛極，守靜篤
05-10 129
日前拿到一份log，一个完整数据集被写在两条log里，通过索引字段排序后，呈现出如上表样式的csv格式。
awk实现groupby和join
u012922485的博客
05-26 339
1.awk实现join 最终要实现类似 select a.a,a.b,b.name from a left join b on a.id=b.bid group bya.a,a.b,b.name shell的写法 awk -f name.awk file1 file2 > file3 name.awk的写法： BEGIN{ FS="\t";OFS="\t"; #设置分隔符 } # argument index 1 file - id,deali...
使用awk聚合和排序
dhcao1112的博客
12-04 1101
用cat和grep筛选文件之后，awk对文件做聚合，sort进行排序
Python实现像awk一样分割字符串
12-16
若你使用过 Shell 中的 awk 工具，会发现用它来分割字符串是非常方便的。特别是多个连续空格会被当做一个处理。 [root@localhost ~]# cat demo.txt hello world [root@localhost ~]# [root@localhost ~]# awk ...
awk 九九乘法表 shell实现代码
09-15
主要介绍了awk 九九乘法表 shell实现代码,需要的朋友可以参考下
awk入门到精通.pdf
08-24
此外, awk内建有pipe的功能, 可将处理中的数据传送给外部 的 Shell命令加以处理, 再将Shell命令处理后的数据传回awk程序, 这个特点也使得awk程序很 容易使用系统资源. 由于awk具有上述特色, 在问题处理的过程中, 可...
awk实现group by功能分组统计条数
热门推荐
我的博客
04-28 1万+
log日志初始文件内容如下：' "2017-04-26 09:23:04","ac:c1:ee:3c:f9:63","http://www.wangfanwifi.com:16621/api/pageTime?uid=&hitID=bootstrap&browserID=2Cxz4MWqDSJDHJ5RliLg7QtfIpaxkt4h","192.168.10.29","1","2","未知
处理按第一列聚合第二列的代码示例
weixin_34334744的博客
04-07 85
#coding=gbk import os import sys import argparse import commands import logging status, username = commands.getstatusoutput('whoami') logging.basicConfig(level = logging.DEBUG, for...
Pandas分组（GroupBy）
weixin_30399155的博客
09-13 64
任何分组(groupby)操作都涉及原始对象的以下操作之一。它们是 - 分割对象 应用一个函数 结合的结果 在许多情况下，我们将数据分成多个集合，并在每个子集上应用一些函数。在应用函数中，可以执行以下操作 - 聚合- 计算汇总统计 转换- 执行一些特定于组的操作 过滤- 在某些情况下丢弃数据 下面来看看创建一个DataFrame对象并对其执行所有操作 - i...
类似SQL 的Group by功能
Aderlee的专栏
12-03 670
最近做了几个小小统计的报表界面，由于.net不带group by 的功能，统计起来有时候相当不便，便趁着睡着的时候写了一个类似的方法。 有不足之处或是有更好的方法还望大家指正。 至于效率如何？未知，因为本人的测试数据就是比较少。  /// /// SQL Group by /// /// 数据源 /// 统计类型：count
linux awk 分组统计
风儿-zsj的专栏
08-01 1万+
1、awk分组统计 cat order.txt | awk 'NR>=2{a[$3]+=$4}END{for(j in a) print j, a[j]}' | sort -rk 2 | head -3 2、处理数据 awk -f  cal.awk sorce.txt     -f 从脚本中读取awk命令
awk 指定列 排序 去重统计
qiezikuaichuan的专栏
02-09 5513
hadoop fs  -text  /////20170205/00/*   | awk  '{print $2}'  | sort | uniq  | wc -l
AWK之分组聚合
DataCareer的博客
11-06 6475
AWK分组统计功能很强大，我们以下面的数据做几个实验给大家展示一下效果。
java 调用 linux 命令行 +使用管道、awk等命令进行数据处理的方法
denghan9435的博客
03-04 700
这里用sh -c "命令"的方式是因为java里只能这么用，管道这边java处理不了，所以只能一次执行一条命令，但是在linux里用sh -c的方式返回的awk处理过的结果是有问题的，比如下面： [root@192 ~]# sh -c "ping www.baidu.com -c 3 | awk -F '[ ]+' 'NR==8 {print $4}'" r...
AWK命令 实现分组 group_concat的效果，合并相同列的其他数据列
z69183787的专栏
06-11 1787
txt结构如下 cost_amount,cost_type,coupon_amount,coupon_name,coupon_source,coupon_type, ctime, etime, id,order_amount_limit, order_id, phone, stime,user_coupon_status, u...
awk指令可以实现的功能
05-31
awk是一个强大的文本处理工具，它可以实现以下功能： 1. 分割文件：awk可以将输入文件按照指定的分隔符进行分割，然后对每个分割的字段进行处理。 2. 搜索文件：awk可以搜索指定的模式，并对匹配的行进行处理。 3...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值