文本三剑客之 grep

最新推荐文章于 2024-07-12 08:39:51 发布

飞翔小怪兽

最新推荐文章于 2024-07-12 08:39:51 发布

阅读量1.6k

点赞数 1

文章标签： linux 运维服务器

本文链接：https://blog.csdn.net/m0_71493671/article/details/131016423

版权

本文介绍了Linux系统中用于文本处理的一系列命令，包括grep用于过滤和搜索文本，支持正则表达式的不同选项；sort命令对文件内容进行排序，可按不同数据类型和方向排序；uniq命令用于去除重复行，提供统计和筛选功能；还涉及到了cut命令的字段截取，split的文件拆分以及paste的文件合并。这些工具在日常系统管理和数据分析中十分实用。

摘要由CSDN通过智能技术生成

一.grep

文本三剑客了之一，对文本内容进行过滤，支持正则表达式，针对行来进行处理

1.grep常用选项命令选项

-m	匹配日几次后停止
-i	忽略字符大小写
-v	取反
-n	只显示行号
-c	统计匹配的行数
-o	仅显示匹配到的字符串
-A	匹配当前行号的后3行
-B	匹配当前行的后3行
-c	匹配当前行的前3行和后3行
-e	条件或 -e可以跟多个选择
-w	匹配整个单词
-E	使用ERE，相当于egrep，使用扩展正则
-f	处理两个文件相同的内容把第一个文件作为匹配条件

- F	不支持正则表达式
-r	递归目录，但不处理软连接
-R	递归目录，单处理软连接

2.grep 命令选项

-m 1 ---------- 多从匹配支取几次结果

-i ----------- 忽略字符打大小写大写也可以小写也可以

-v ------------ 取反就是过滤所有包含root的信息和字符

-n --------------显示匹配的行号

-c ------------显示匹配的行数只有两行

-o ---------仅显示匹配到的字符串只对文本内容进行处理就是正则表达式

-A 3 -------- 后面必须要加个参数否则会报错显示当前行后3行

-B 3 ------- 显示当前行数的前3行

-C ----------显示当前行数的前后个三行

-e ------是逻辑或的意思或打印root 或打印bash 也认可与同时打印两个条件满足一个即可

grep -e root -e bash /etc/passwd

-w -----匹配整个单词

-E ------ egrep 使用扩展正则

-f -------- 处理连个文件里的相同类容第一个文件作为匹配条件

-r -------- 只处理递归目录，但不处理软连接

grep -r a /opt

-R -------- 只处理递归目录，但不处理软连接

3.简单的正则表达式

"^" 以什么为开头

"&" 以什么为结尾

^$ 空行

把66.txt 里的空行过滤出来导入到666.txt 里使用正则表达式的时候要用“”引号引起来

cat 66.txt | grep -v "^$" > 666.txt

只匹配一个root的行多个不匹配

grep -n "^root$" 2.txt

二.sort 命令

以行为单位对文件内容进行排序，也可以根据不同的数据类型来排序

sort 常用命令选项

-f	忽略大小写，默认会大写字母排在前面
-b	忽略每行前面的空格
-n	按照数字进行排序
-r	反向排序
-u	等同uniq，表示相同的数据仅显示一行，去重
-t	指定字段分隔符，默认使用tab键分隔
-k	指定排序字段
-o	<输出文件>：将排序后的结果转存至指定文件

1.sort -f 忽略大小写，默认会大写字母排在前面

2.sort -n 按照数字进行排序

3. sort -r 反向排序

4sort-u 去重

5. sort-o <输出文件>：将排序后的结果转存至指定文件

三.uniq 去重

unip 常用选项

-c	统计连续重复的行的次数，并且合并重复的行
-u	显示仅出现一次的行（包括不连续的重复行）
-d	仅显示重复出现的行（必须是连续的重复行）

1.cat 6.txt | uniq 快捷去重

uniq 选项参数

uniq -u 显示仅出现一次的行（包括不连续的重复行）

uniq -d 仅显示重复出现的行（必须是连续的重复行）

uniq -c 统计连续重复的行的次数，并且合并重复的行

四 .语法格式：
tr 选项参数

-c	保留字符集1的字符，其他的字符（包括换行符\n）用字符集2替换
-d	删除所有属于字符集1的字符
-s	将重复出现的字符串压缩为一个字符串，用字符集2 替换字符集1
-t	字符集2 替换字符集1，不加也行

字符集1：
指定要转换或删除的原字符集。当执行转换操作时，
必须使用参数”字符集2“指定转换操作时，必须使用参数”字符集2“指定转换的目标字符集。
但执行删除操作时，不需要参数”字符集2“

字符集2：
指定要转换成的目标字符集

tr . 换成，号

大写替换成小写

保留了ab，替换了c,输出aa

排序输出，压缩空行为一个

删除ab，打印c

五.快速裁剪命令——cut:

-d	指定分隔符（默认分隔符为Tab）
-f	按字段进行截取。指定第n个字段
-b	以字节为单位进行截取
-c	以字符为单位进行截取

-d 指定分隔符（默认分隔符为Tab）

六.split 文件拆分

-l	指定行数
-b	指定文件的大小

[root@localhost opt]# cp /etc/passwd /opt/test2.txt
[root@localhost tr]# split -l 20 test2.txt sc
[root@localhost opt]# split -b 2m httpd-2.4.29.tar.bz2 sc 指定文件大小，不需要大小写