Linux文本处理神器awk实战案例

最新推荐文章于 2024-07-25 16:55:59 发布
最新推荐文章于 2024-07-25 16:55:59 发布
阅读量384 收藏 4
点赞数
分类专栏： 前端 html 文章标签： 小程序 前端 vue.js
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_67394360/article/details/123349751
版权
本文详细介绍了Linux文本处理工具awk的使用，包括打印不同列的内容、行号和列号，修改输入和输出分隔符，条件筛选以及运算等功能。awk是一种强大的文本分析工具，适合数据提取和报告生成。
摘要由CSDN通过智能技术生成

文章目录

1. 什么是awk

AWK是为文本处理专门打造的领域指定语言，通常用作数据提取和数据报告。它和sed、grep的功能是类似的，能够进行过滤，并且它们三者是大多数Linux系统的标准工具。

20世纪70年代，AWK诞生于贝尔实验室。它的名字起源于三个作者姓的首字母。AWK语言是一种数据驱动的语言，它是由对文本流的一系列操作组成的，不仅能够对文件进行操作，也能够对管道进行操作，最终能够提取或者处理文本，例如产生格式化的报告。AWK广泛使用字符串类型，关联数组和正则表达式。

2. 打印不同列的内容

2.1 初探数据文件

首先，data.txt是awk工具的输入文件，其内容如下所示，其中第一列是材质，第二列是重量，第三列是发行年，第四列是发行国，最后一列是古币的名称：

gold 1
最低0.47元/天 解锁文章
免费的东西
关注
专栏目录
AWK应用实战
qq_48644092的博客
11-10 235
1、AWK 日志分析统计 # 统计一个时间范围内访（pv）问量 grep '31/Oct/2020' access.log | wc -l awk '$4>="[05/Sep/2020：08：00：00" && $4<="[05/Sep/2020：09：00：00" {print $0}' access.log | wc -l #统计一个时间范围内访问量前10的ip grep "09/Nov/2020" access.log | awk '{ips[$1]+
awk 具体实战例子
epeaktop的专栏
12-19 464
用awk生成代码 awk -F',' 'BEGIN {printf(&quot;# coding:utf-8\nitem_conf_data = {\n&quot;);}; {printf(&quot;%s:\&quot;%s\&quot;,\n&quot;,$1,$2)}; END {printf(&quot;\n};\n&quot;);}' /cygdrive/e/huanling/sharedata/item_equip_table.c
【Shell 编程三剑客】shell-awk命令详解（理论+实战）
最新发布
YCyjs的博客
07-25 1357
AWK是一种处理文本文件的语言，是一个强大的文本分析工具。它是专门为文本处理设计的编程语言，也是行处理软件，通常用于扫描、过滤、统计汇总工作数据可以来自标准输入也可以是管道或文件。20世纪70年代诞生于贝尔实验室，现在centos7用的是gawk之所以叫AWK是因为其取了三位创始人和的的首字符。
awk企业实战案例
darling_user的博客
02-26 152
搭建日志服务器
15个awk的经典实战案例
m0_63069714的博客
03-26 2528
可以取得日志中的时间字符串部分，再将它们的年、月、日、时、分、秒都读取出来，然后放入nktim()构建对应的epoch值。FPAT可以收集正则匹配的结果，并将它们保存在各个字段中。(就像grep匹配成功的部分会加颜色显示，而使用FPAT划分字段，则是将匹配成功的部分保存在字段$1 $2 $3...中)进行划分，然后将uid=xxx保存再数组当中，这是判断重复的依据，然后统计uid出现次数，第一次出现统计，第二次不统计。grep/sed/awk用正则去筛选日志时，如果要精确到小时、分钟、秒，则非常难以实现。
awk实战11-进阶-10种awk有效应用实战
文思源想的技术空间
08-21 779
上文我们讲了ａｗｋ的基本语法，可以发现ａｗｋ是一种基于模式－动作的文本处理语言；本文以ｗｃ用法开头，主要呈现ａｗｋ命令的十种常用用法。 awk ‘pattern{action}pattern{action}…’ file 1 awk实现wc命令 cat filename | awk 'BEGIN {print "SUM:"} {w += NF; c += length + 1} END {...
Linux文本处理神器：sed与awk的高级应用技巧
在Unix/Linux系统中，sed（流编辑器）和awk（文本分析工具）是两个强大的命令行工具，用于处理文本数据。它们可以帮助用户快速、高效地对文本进行编辑、提取和转换，是Shell脚本和命令行管道中的重要利器。 ## 1.2 ...
005_awk案例实战
weixin_30907523的博客
11-28 130
一、工作经验总结. (1)日志案例: 10.100.194.39 10.100.194.39 1019-03-16T11:01:04+08:00 www.uuwatch.com^^3FF91DE01BCB49B8BD11198DB98394F8|1993969314640 GET 499 /agent-config?appId=biz.marketing&host=10.101.1...
【shell】shell脚本实战-awk使用案例(1)，面试被吊打
2401_84265972的博客
04-10 690
0.0.0.0 192.168.0.1 0.0.0.0 UG 100 0 0 eth0169.254.169.254 192.168.0.1 255.255.255.255 UGH 100 0 0 eth0192.168.0.0 0.0.0.0 255.255.255.0 U 100 0 0 eth0方法一：[root@ecs-c13b awk]# rou
三剑客老大——awk企业实战，面试必备
weixin_33836223的博客
09-24 174
awk生产环境实战案例：（一）：请执行命令取出linux中eth0的IP地址法1： ifconfig eth0| grep 'inet addr'| awk -F":" '{print $2}'|awk '{print $1}'法2： ifconfig eth0| grep 'inet addr'| cut -d: -f2|cut -d" " -f1法3： ifconfig ...
awk最全详解及实例操作
qq_32330469的博客
07-12 2526
awk最全详解及实例操作
关于AWK的10个经典案例
08-05 826
awk是Linux系统下一个处理文本的编程语言工具，能用简短的程序处理标准输入或文件、数据排序、计算以及生成报表等等，应用非常广泛。 基本的命令语法：awk option 'pattern {action}' file 下面根据工作经验总结了10个实用的awk案例，面试...
awk经典案例
weixin_42816196的博客
11-25 465
文章序列介绍 介绍 awk是linux及unix操作系统中非常优秀的数据及文本处理工具，它是一种编程语言 awk命令格式为：
awk基本用法、处理条件、awk应用案例、监控脚本编写
m0_52686092的博客
07-04 1364
准备一个测试文档，里面有6行，每行分别是abc、xyz、abc、opq、xyz、abc 然后按照awk逐行处理的工作特点使用awk '{a[$1]++}' shu.txt 走完每一行得到下列结果，但不会输出到屏幕。要求: 格式化输出passwd文件内容时，要求第一行为列表标题，中间打印用户的名称、UID、家目录信息，最后一行提示一共已处理文本的总行数，效果如图-1所示。通过awk提取信息时，利用IP地址作为数组下标，每遇到一个重复值就将此数组元素递增1，最终就获得了这个IP地址出现的次数。
awk工具使用方法及案例
m0_58292366的博客
05-11 1392
一、awk工具 1、awk工具简介 awk是功能强大的编辑工具，在无交互的情况下实现复杂的文本操作 2、awk的格式 awk 选项 '模式1' 3、awk 工作原理 逐行读取文本，默认以空格为分隔符进行分隔，将分隔所得的各个字段保存到内建变量中，并按模式或者条件执行编辑命令 4、awk内置变量 FILENAME:被处理的文件名 二、awk案例 1、示例1：awk简单的用法 示例二：awk加入差数案例 ...
详解awk（一）awk基础知识、选项、程序段解析与实例
chinaltx的博客
01-13 1329
目录 序：回顾shell三剑客的关系          一、awk基础 1.1awk简介 1.2基本语法          二 awk中OPTIONS的说明 2.0 参数列表 2.1 -f program-file 2.2 -F fs 2.3 -v var =val 2.4 -d [file] 2.5 -h 2.6 -P 待补充 2.7 -S 待补充 2.8 -V 显示...
1. awk基础,awk介绍,awk基本语法,直接使用action,打印列,初识列和行,\$0、\$NF、NF,基础示例,begin模式,end模式
细致-专业-实操
02-08 2431
awk介绍 awk其实是一门编程语言，它支持条件判断、数组、循环等功能。所以可以把awk理解成一个脚本语言解释器。 grep 、sed、awk被称为linux中的"三剑客"。 我们总结一下这三个"剑客"的特长。 grep 更适合单纯的查找或匹配文本 sed 更适合编辑匹配到的文本 awk 更适合格式化文本，对文本进行较复杂格式处理 awk基本语法 基本语法 awk [options] 'program' file1 , file2 , ``` 对于上述语法中的program来说，又可以细分成patte
掌握Linux文本处理神器：AWK基础教程
本文档是一份关于AWK编程语言的全面教程，专为Linux用户设计，旨在展示在Unix/Linux环境下的强大文本处理能力。AWK被誉为与Perl、sed和bash等其他脚本语言相媲美的“剑客”工具，它在数据解析、格式化和操作文本文件...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值