使用awk进行简单文件处理对文件分割求平均

最新推荐文章于 2023-03-29 08:30:40 发布
最新推荐文章于 2023-03-29 08:30:40 发布
阅读量821 收藏
点赞数
文章标签： shell linux awk awk分割 awk求平均
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/molong1208/article/details/50587585
版权

一、文件格式

线上有这么一份文件需要做一个统计的信息

格式类似如下：

不同为：;
不同为：;
不同为：;
不同为：;
不同为：;
不同为：;
不同为：;
不同为：;
无用个数为:13 总个数为:13 无用比例为：1;
无用个数为:16 总个数为:16 无用比例为：1;
无用个数为:21 总个数为:21 无用比例为：1;
无用个数为:18 总个数为:18 无用比例为：1;
无用个数为:20 总个数为:20 无用比例为：1;
无用个数为:23 总个数为:23 无用比例为：1;
无用个数为:19 总个数为:19 无用比例为：1;
无用个数为:60 总个数为:60 无用比例为：1;
Thread:7	TotalCount:2	CostTime:0.140625s	TongjiCostTime:0.09375s	SelectCostTime:0.015625s	InsertCostTime:0.03125s;
Thread:8	TotalCount:2	CostTime:0.140625s	TongjiCostTime:0.09375s	SelectCostTime:0.015625s	InsertCostTime:0.03125s;
Thread:5	TotalCount:2	CostTime:0.140625s	TongjiCostTime:0.09375s	SelectCostTime:0.015625s	InsertCostTime:0.03125s;
Thread:4	TotalCount:2	CostTime:0.15625s	TongjiCostTime:0.09375s	SelectCostTime:0.015625s	InsertCostTime:0.046875s;
Thread:3	TotalCount:2	CostTime:0.15625s	TongjiCostTime:0.10937
最低0.47元/天 解锁文章
molong1208
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
awk linux 分隔_Linux awk命令详解
weixin_39852491的博客
12-22 201
awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理。使用方法 ： awk '{pattern + action}' {filenames}尽管操作可能会很复杂，但语法总是这样，其中 pattern 表示 AWK 在数据中查找的内容，而 ...
AWK Tutorial Guide
09-06
3. 统计分析：AWK可以进行简单的统计计算，如平均值、中位数和众数。 五、AWK的常用命令和函数 - `print`：打印指定的字段或表达式。 - `printf`：格式化输出，类似于C语言的printf函数。 - `split`：将一个字符串...
使用sed和awk分割部分文件内容
feifniao的专栏
03-14 3801
文本的一部分内容，需要进行比较，其他的部分，需要忽略掉。
利用awk计算文件的单词数量及排序
weixin_34123613的博客
12-20 760
[root@oldboy awk]# awk 'BEGIN{RS="(:|\n)"} {print $0}' /etc/passwd |sort|uniq -c|sort -r26 x20 /sbin/nologin6 06 4 /sbin4 /3 /bin/bash2 uucp2 sync2 shutdown2 root2 operator2 mail2 lp2 halt2 gopher2 ga...
AWK分割的用法
hao10119的博客
03-14 8995
AWK分割文件命令使用方法： （1）对于原文件test.txt的内容如下： 然后执行命令 awk 'BEGIN{FS=",";RS=":"}{print $0}' test.txt，结果如图所示 FS表示分隔符，就是在操作（拆分，合并等）的时候是以什么作为分隔符 RS表示awk操作最小单位的边界，就是操作的时候以FS分隔符，以RS作为分割的边界（界限） NF表示每一行（$
awk按照多个分隔符进行分割
热门推荐
hongchangfirst
05-22 15万+
我们知道awk可以进行类似于cut之类的操作，ru
awk_linux_bash_awk_
09-30
它的工作原理是在文件或标准输入中逐行扫描，根据用户定义的模式和动作对每一行进行处理。基本语法结构如下： ```awk awk '模式 {动作}' ``` 模式可以是正则表达式，用于匹配行。动作则是一系列要执行的命令，如打印...
awk-script：awk脚本指南
02-22
awk的主要功能是对文本文件进行模式匹配和处理，尤其擅长处理结构化的数据，如CSV或TSV格式。 二、基本语法 awk脚本由一系列规则组成，每个规则包含一个模式和一个动作。模式定义了匹配的文本行，动作则是在满足...
awk实用手册
06-17
awk的工作原理是基于行的处理，它会读取输入文件的一行一行，然后根据指定的模式（pattern）进行匹配，并执行相应的动作（action）。基本语法是`awk 'pattern {action}' file`。例如，`awk '/pattern/ {print $0}' ...
awk使用详解（英文）
03-12
`awk` 是一个强大的文本分析工具，常用于处理和解析Linux/Unix系统中的文本文件或标准输入。在Shell脚本中，`awk` 提供了一种灵活的方式去处理和提取数据，尤其适合处理结构化的数据，如CSV或日志文件。`awk` 的名字...
awk分割
m0_61417337的博客
03-29 1065
无
awk写shell分发脚本
司念
12-11 1025
awk配合写shell脚本，轻松分发到集群文件
awk使用多分隔符进行数据切分
鱼爻
04-28 2773
假如我们数据是这样的： mshing#24-mshing@msezi.com|A zhynin#18|zhynin@msezi.com-B mm-12-mm@123-c 分割符号为#,-,|不同的符号而且每一行的格式还不一致。但是数据的格式都是一样的，我们想通过分隔符提取数据。 使用多次awk的方法行不通，但别忘了强大的awk是可以一次指定多次分隔符的。 上代码： mshing@remtor:~$ cat text.txt | awk -F '[#|-]' '{print $1, $2, $3, $4}'
awk统计命令(求和、求平均、求最大值、求最小值)
weixin_30779691的博客
05-03 184
本节内容：awk统计命令 1、求和 cat data|awk '{sum+=$1} END {print "Sum = ", sum}' 2、求平均 cat data|awk '{sum+=$1} END {print "Average = ", sum/NR}' 3、求最大值 cat data|awk 'BEGIN {max = 0} {if ($1>max...
shell awk （按行切割、分析）的基本使用
猎人在吃肉
06-09 1万+
awk ，一个强大的文本分析工具，把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行分析处理。 1. 基本用法 awk [选项参数] 'pattern1{action1} pattern2{action2}...' filename 选项参数说明： 选项参数 功能 -F 分隔符。指定输入文件的分隔符 -v 临时变量。赋值一个用户定义变量 patternN{actionN} 说明： pattern ：表示 awk 在数据中查找的内容，就是匹配模式； actio
【shell】shell字符串分割|文件分割|剪切|截取
bandaoyu的note
10-08 10万+
目录 一、字符串分割 1、awk分割 2、利用shell 中 变量 的字符串替换成空格分割 3、设置分隔符，通过 IFS 变量 4、利用tr 指令实现字符替换 二、文件分割 附录 【转】linux下awk内置函数的使用(split/substr/length) 四、gsub函数 五、正则表达式 一、字符串分割 1、awk分割 把 ceph_12.2.1.centos.x86_64.tar.gz-2021-10-08-08后面的2021-10-08-08按“-”分割，取最后一个数..
awk实现以tab分割
dadaoke的专栏
07-08 2万+
最近碰到一个日志文件格式，跟参数内容已tab作为分割服 为了统计按某些参数的量，需要提取 可以使用 awk -F'\t' '{print $1}' a.log 如果是shell中使用awk，使用下面这种方式 awk 'BEGIN{IFS='\t'}{print $1}' a.log 否则会出错，原因 ‘\t’ 是 shell默认分割符之一 ...
使用awk按照行数切割文件
Yonx
08-12 1035
使用awk按照行数切割文件 最近在做一个事情，需要将一个文本文件按照行数进行切割 脚本如下: #!/bin/bash ## 文件效果: 根据行数来切割文件 ## 参数1为要切割的文件名 ## 参数2为每个切割后文件的行数 filename=$1 fileline=$2 echo "filename=$filename" echo "fileline=$fileline" awk -v count=$fileline 'BEGIN{i=0} { print $0 > sprintf(
关于awk分割文件的用法
chinnrai的专栏
11-05 7072
最近写一个脚本，需要对一个记录文件进行分割，因为记录是很有规律的如下格式的文件test.txt： gameserver1 1 a gameserver1 2 b gameserver1 3 c gameserver2 1 a gameserver2 2 b gameserver2 3 c gameserver3 1 a gameserver3 2 b gameserver3
awk是什么？如何使用awk进行文本处理？
最新发布
03-23
awk的主要功能是对文本文件进行逐行处理，并根据用户指定的规则进行匹配、提取和转换。它使用一种简单而强大的脚本语言，可以轻松地处理结构化文本数据。 使用awk进行文本处理的一般步骤如下： 1. 构造一个awk脚本...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值