awk按列合并示例

最新推荐文章于 2022-12-07 15:07:23 发布
最新推荐文章于 2022-12-07 15:07:23 发布
阅读量9.9k 收藏 6
点赞数 4
分类专栏： awk 文章标签： awk
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/jiuniu110/article/details/79889586
版权

需求：

将如下文本按第一列为主key，将相同的第二列值追加到同一行

cat input.log
ofB8Mt-5i_308H0LALOc-tsk1Aqg 2488
ofB8Mt-5i_308H0LALOc-tsk1Aqg 2620
ofB8Mt-j2usddmbu5_WrL3xitQ4o 2551
ofB8Mt-j2usddmbu5_WrL3xitQ4o 2582
ofB8Mt00DhYwMOpJvGm2dKDnZ3NM 3037
ofB8Mt00DhYwMOpJvGm2dKDnZ3NM 3080
ofB8Mt0UrL1Ux_PzudJiG0kH4uN4 1223
ofB8Mt0UrL1Ux_PzudJiG0kH4uN4 1248
ofB8Mt0WJTVB3am154f80kQ3bmv4 1169
ofB8Mt0WJTVB3am154f80kQ3bmv4 1207

执行命令：

cat input.log | awk '{a[$1]=a[$1]"|"$2}END{for( i in a){print i, a[i]"|"}}'
ofB8Mt00DhYwMOpJvGm2dKDnZ3NM |3037|3080|
ofB8Mt0UrL1Ux_PzudJiG0kH4uN4 |1223|1248|
ofB8Mt-5i_308H0LALOc-tsk1Aqg |2488|2620|
ofB8Mt-j2usddmbu5_WrL3xitQ4o |2551|2582|
ofB8Mt0WJTVB3am154f80kQ3bmv4 |1169|1207|

General
关注
  • 4
    点赞
  • 踩
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
awk对文件按照列进行合并
人生何处不相逢
08-16 2648
首先解释一下awk合并文件用到的变量，NR表示读到的文件行数,会对所有文件进行累加，FNR表示读到的当前文件行数，每次读完一个文件后就会从1重新开始。 文件1.request.txt(空格分隔，一共3列) /game/bag/batchSell 98.5775 842 /game/bag/gainVipDailyGift 24.0069 785 /game/bag/open 9....
awk按某列key相同合并多行到一行，并对一对多情况进行统计
Knight_M_Moon的博客
06-13 4473
awk按第一列key相同，合并多行；并对一对多情况进行统计
linuxawk将多个文件结果列合并到一个文件整理.pdf
12-06
linuxawk将多个文件结果列合并到一个文件整理.pdf
awk 给某一列拼接 并且去掉空行
qq_40340448的博客
02-18 940
数据： uint32_t snd_maxcount; uint32_t fastresend; uint32_t incr; uint32_t reset_counter; uint32_t role; ...
使用awk将两字段合并
zhaogezhuoyuezhao的专栏
12-26 4222
有文档a.txt如下： 861399 4444623*** 861339 4444660*** 861339 4444660*** 861339 4444671*** 861339 4444672*** 861339 4444690*** 861339 4444692*** 861530 4444863*** 使用awk将两列合并，并去掉第一列的86及第二列的444，结果如下：
对awk合并有相同内容列的理解
qq_45821474的博客
03-10 1109
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 欢迎使用Markdown编辑器 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Mar
linux awk 某一列合并,利用shell中awk和xargs以及sed将多行多列文本中某一列合并成一行...
weixin_42310347的博客
05-25 1140
一、问题描述最近需要利用Shell将多行多列文本中某一列，通过指定的分隔符合并成一行。假设需要处理的文本如下：我们主要处理的是，将用户名提取处理，合并成一行，并通过逗号进行分隔。最终的格式如下："li1","huan","wang","wu","78c","zh","liu","zhao","xu","yang"二、解决方案首先是提取每一行的第X列，我最先能够想到的是awk命令，如下：awk'...
awk错误：无法在awk中将两列合并为一列
qq_38334677的博客
08-01 508
awk错误：无法在awk中将两列合并为一列
awk合并两个文件的列
iteye_13612的博客
02-02 2346
问题描述：两个文件a.dat, b.dat   a.dat 0    100 1    99 2    93 3    90 ...   b.dat 0   0 1   3 2   0 3   2 ....   如果两个文件中第一列的元素相同，则相对应行的第二列元素相加，即 0    100 1    102 2    93 3    92 ... ...
awk数组实战
01-17
- 表格处理：通过数组解析CSV文件，实现列的筛选、合并或转换。 - 日志分析：在日志文件中，数组可以帮助定位特定IP地址或错误代码的频繁出现。 总之，`awk`的数组功能强大且灵活，对于处理和分析大量文本数据...
Python实现像awk一样分割字符串
12-16
在上面的示例中，awk 将 `demo.txt` 文件中的 "hello world" 作为一个由单个空格分隔的两个字段打印出来。 在 Python 中，如果我们直接使用 `split()` 方法，结果可能会有所不同： ```python msg = 'hello world' ...
awk_toys:awk 脚本 - 有些有用，有些没有
06-02
在"awk_toys"项目中，我们可以看到一些有趣的脚本示例，比如： 1. **统计单词计数**：一个简单的脚本可以用来统计文件中单词出现的次数，这利用了awk的分词能力，将文本分割成字段并进行计数。 2. **查找模式**：...
AWK用法AWK用法AWK用法
01-19
对于包含`101`的行，打印第一列和第二列合并后的结果。此例展示如何连接字段。 #### df | awk ‘$4 > 1000000’ 从`df`命令的输出中筛选出第四列大于`1000000`的行。这里结合了管道操作来处理命令的输出。 #### ...
awk合并某一列相同的行
seamoon的博客
12-07 931
将文件 合并第一列相同的值，呈现如下效果： 只需执行命令：
AWK命令 实现分组 group_concat的效果，合并相同列的其他数据列
z69183787的专栏
06-11 1814
txt结构如下 cost_amount,cost_type,coupon_amount,coupon_name,coupon_source,coupon_type, ctime, etime, id,order_amount_limit, order_id, phone, stime,user_coupon_status, u...
awk 两个文件的两个列若相同，合并两个文件
热门推荐
xinxin_zhang的专栏
08-03 1万+
1.文件1 [root@bi-3 bin]# cat push  TCL_P728M       TCL     74eda717a4aef660f362f1806eb85d9d TCL_S720_JB2    TCL     ecb6724875f6361466f4e91df603f06c TCL_P728M       TCL     f654f6d4f2157a658c0d7f688
Linux awk 输出最后两个（列）
u013992330的博客
09-28 2608
uname -r |awk -F. '{ print $(NF-1)"."$NF }'
awk 合并相同列的行
abcdef0966的专栏
03-06 8655
Q: 怎么做来着？ 如果第一列与第二列相同，就合并行 cat a.txt a b c  a b d a b e  结果为 a b c e d A: awk '{v=$1" "$2;a[v]=a[v]$3}END{for (j in a) print j,a[j]}' file
awk合并两个文件列
最新发布
08-07
使用awk合并两个文件的列可以使用以下命令： ``` awk 'FNR==NR{a[FNR]=$0;next}{print a[FNR],$0}' file1 file2 ``` 这个命令的作用是在每一行输出file1中的对应行和file2中的对应行。其中，FNR表示当前处理的行号...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值