【Linux命令】脚本里常用的几个命令sort，uniq，tr，cut，split，eval

已于 2023-05-15 08:29:42 修改
阅读量928 收藏 1
点赞数 1
分类专栏： Linux网络 文章标签： linux 运维 服务器
于 2023-05-11 16:43:35 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wang_dian1/article/details/130607517
版权
本文详细介绍了Linux系统中常见的文本处理命令，包括SORT用于按行排序，uniq用于去除重复行，tr用于字符替换和删除，cut用于提取文件字段，以及split用于拆分大文件。每个命令都配以语法格式、常用选项和实例演示，帮助读者理解和掌握这些基础工具的使用。
摘要由CSDN通过智能技术生成

脚本里常用的命令

一、SORT命令

  • 以行为单位对文件内容进行排序，也可以根据不同的数据类型进行排序
  • 比较的原则是从首字符向后，一次按照ASCII码值进行比较，最后将他们按升序输出

1.1、语法格式

  • sort [选项] 参数
  • cat file | srot 参数

1.2常用选项

选项功能
-n按照数字进行排序
-r反向排序
-u等于uniq，表示相同的数据仅显示一行
-t指定字段分隔符，默认使用【tab】键分割
-k指定排序字段
-o （输出文件）将排序后的结果转存至指定文件
-f忽略大小写，会将小写字母都转为大写字谜来进行比较
-b忽略每行前面的空格

-n
在这里插入图片描述

-r,-u
在这里插入图片描述
-t,-k
在这里插入图片描述
-f,-o

在这里插入图片描述
在这里插入图片描述

二、uniq命令

  • 常用于报告或者忽略文件中连续重复行，常与sort命令结合使用

2.1命令格式

  • uniq [选项] 参数
  • cat file | uniq 选项

2.2常用选项

选项功能
-c进行计数，并删除文件中重复出现的行
-d仅显示连续的重复行
-u仅显示出现一次的行

在这里插入图片描述

2.3小实验，过滤出现三次以上的IP地址

过滤出日志里面出现三次以上的登录失败的IP地址，并加入到黑名单中

在这里插入图片描述

三、tr命令

  • 常用于对来自标准输入的字符进行替换、压缩和删除

3.1语法格式

  • tar 【选项】 【参数】

3.2常用选项

选项功能
-c保留字符集1的字符，其它的字符（包括\n）用字符集2替换
-d删除所有属于字符集1的字符
-s将重复出现的字符串压缩为一个字符：用字符集2替换字符集1
-t字符集2替换字符集1，不加选项默认的结果

在这里插入图片描述

3.3实验

把一个混乱的数组按照从小打到排序

在这里插入图片描述

四、cut命令

  • 显示行中的指定部分，删除文件中的指定字段

4.1语法格式

  • cut 【参数】
  • cat file | cut 【选项】

4.2常用选项

选项功能
-f通过指定哪一个字段进行提取，cut命令使用“TAB”作为默认的字段分隔符
-d“tab” 是默认的分隔符，使用此选项可以更改为其它的分隔符
–complement此选项用于排除所指定的字段
–output-delimiter=更改输出内容的分隔符

在这里插入图片描述
在这里插入图片描述

五、split命令

  • 将一个大文件拆分成若干小文件

5.1语法格式

  • split 【选项】 【参数】 原文件 拆分后文件名前缀

5.2常用选项

选项功能
-l以行数拆分
-b以大小拆分

在这里插入图片描述

六、eval

  • 扫描两次命令，放在命令前面使用

在这里插入图片描述

七、paste命令

  • 按列合并文件

7.2命令格式

  • paste [选项] 文件1 文件2

7.2

选项功能
-d默认的是“tab”指定分隔符
-s把输出结果由列换成行

在这里插入图片描述

DDD嘀嘀嘀
关注
专栏目录
linux常用命令和shell编程
生活在别处
10-20 5799
Red Hat Linux 9 编程开发与网络管理 冉林仓 电子工业出版社 2006 (将linux系统的各种情况和dos系统做了对比)UNIX基础教程 龚汉明等 清华大学出版社 2007Linux应用开发技术详解 范永开等 人民邮电出版社 2006Linux Shell 脚本攻略 Sarath Lakshman 人民邮电出版社 2011。
Linux：Linux系统的简介、基础知识、最强学习路线(以Ubuntu系统为例—安装/各自命令行技能/文件系统/Shell脚本编程/权限网络和系统管理/高级语言编程)、常用案例(图文教程)之详细攻略
热门推荐
近期请国内外头部出版社可尽快私信博主！——心比天高，仗剑走天涯，保持热爱，奔赴向梦想！低调，谦虚，自律，反思，成长，还算是比较正能量的博主，公益免费传播……内心特别想在AI界做出一些可以推进历史进程影响力的东西(兴趣使然，有点小情怀，也有点使命感呀)…
04-02 1万+
​ Linux：Linux系统的简介、基础知识、最强学习路线(以Ubuntu系统为例—安装/各自命令行技能/文件系统/Shell脚本编程/权限网络和系统管理/高级语言编程)、常用案例(图文教程)之详细攻略 目录 一、了解Linux的基础知识 二、安装Linux操作系统 三、理解Linux文件系统 四、掌握命令行技能 五、学习Shell脚本编程 六、权限、网络和系统管理 七、学习Linux下的高级语言编程
shell脚本基础5——常用命令写作技巧
百慕卿君博客
06-11 1445
1、grep、sed、awk、date、xargs、wait命令 2、交互文本框的使用。 3、写作技巧。
常用脚本命令集(转)
congjukun0600的博客
08-10 175
常用脚本命令集(转)[@more@]如何用脚本实现分割文件代码:#!/bin/bashif [ $# -ne 2 ]; thenecho 'Usage: split file size(in bytes)'exitfifile=...
LinuxShell编程1———shell基础命令
最新发布
m0_65436732的博客
07-16 1623
可以由字母、数字、下划线组成， 不能以数字开头， 不能是关键字，见名知意。变量名=“变量值” 或者 变量名=变量值注意：变量名与变量值等号之间不能有空格，不然就定义失败。调用（提取）变量：$变量名 或${变量名}Shell数组用括号来表示，元素用空格分割开，语法格式：定义数组 ：数组名=(值1 值2 ... 值n)$@内置变量，脚本外输的变量值，我们就调用这个函数进行判断。返回值0是服务开启，非0是未开启。修改颜色添加时间sed是一个用于：过滤并转换文本行的流编辑器。
linux常用命令（shell脚本常用命令）（grep、cut、sort、uniq、seq、tr）
weixin_30512785的博客
05-29 314
本章命令： 1 2 3 4 5 6 grep cut sort uniq seq tr 1、grep 作用：过滤文本内容 选项 描述 -E :--extended--regexp 模式是扩展正则表达式（ERE） -i :--ignore--case 忽略大小写 -n: --line--number 打印行号 -o:--only--matching...
linux脚本命令
qq_41340733的博客
11-06 1983
linux脚本命令一.根据进程名字关闭所有名字相关进程 一.根据进程名字关闭所有名字相关进程 "<<!"开始多行注释 "!"结束多行注释 $1是传进去的参数 #带参数 <<! pName=$1 echo $pName pids=$(ps -ef | grep "$1" | grep -v grep | grep -v $0 | awk '{print $2}') echo ---------------------- ps -ef | grep $pName | grep -v
常用脚本命令
s13596191285的博客
12-31 611
#!/bin/bash #sed -i 's/^export JAVA_HOME=.*$/export JAVA_HOME=/usr/local/jdk11/' /etc/profile.d/java.sh #source /etc/profile #node_name=`hostname`"-master" #sed -i "2 inode.name: $node_name" /web/esuser/c9fe4436-3cf3-413e-9a8e-6ef6bac4/9200/elasticsearch-7
Linux常用命令集
12-22
### Linux常用命令集详解 #### 引言 随着信息技术的发展，Linux作为一种开源的操作系统，在服务器领域及开发环境中占据了举足轻重的地位。相比于Windows，Linux以其稳定性和安全性著称，并且具备丰富的命令行工具...
Linux shell脚本 精华中文版
06-14
011_合并与分割_sort_join_uniq_cut_paste_split.pdf 012_tr的用法.pdf 013_登录环境.pdf 014_环境和shell变量.pdf 015_引号.pdf 016_基础shell编程_shell脚本介绍.pdf 017_条件测试_test_expr.pdf 018_控制...
shell编程和unix命令
02-27
3.4.2 一次提交几个作业 29 3.5 小结 30 第4章 文件名置换 31 4.1 使用* 31 4.2 使用？ 32 4.3 使用[...]和[!...] 32 4.4 小结 33 第5章 shell输入与输出 34 5.1 echo 34 5.2 read 35 5.3 cat 37 5.4 管道 38 5.5 ...
Linux脚本命令
快乐星球的博客
07-28 1331
1、#！/bin/bash 声明解析当前文件需要使用的解释器 2、$()相当于‘’,对命令的替换 3、${}中放变量，对变量的替换 4、$#用于表示脚本参数 5、=~用于判断string和右边的正则表达式pattern是否匹配 6、read -p:输入前的提示信息 7、echo -e可以输出转义字符 8、$(())对内部内容进行运算 9、uname -o 获取操作系统的类型 未完待续。。。 ......
LIUNX加减乘除
qq_43039301的博客
12-13 1363
LIUNX加减乘除 — +：对两个变量做加法。 — -：对两个变量做减法。 — *：对两个变量做乘法。 — /：对两个变量做除法。 — **：对两个变量做幂运算。 — %：取模运算，第一个变量除以第二个变量求余数。 — +=：加等于，在自身基础上加第二个变量。 — -=：减等于，在第一个变量的基础上减去第二个变量。 — *=：乘等于，在第一个变量的基础上乘以第二个变量。 — /=：除等于，在第一个变量的基础上除以第二个变量。 — %=：取模赋值，第一个变量对第二个变量取模运算，再赋值给第一个变量。 t=ex
常用的脚本命令
大白机器人的博客
08-15 621
1.查找字符串 如果你想在当前目录下 查找"hello,world!"字符串,可以这样:  grep -rn "hello,world!" * * : 表示当前目录所有文件，也可以是某个文件名 -r 是递归查找 -n 是显示行号 -R 查找所有文件包含子目录 -i 忽略大小写 下面是一些有意思的命令行参数： grep -i pattern fi
3、windows常见脚本命令
宇之日记
11-24 2567
1、taskkill是Windows命令行里终止指定程序“进程”的命令。 /f 表示强制终止 /im 表示指定的进程名称，例如“explor.exe"。 2.start "" "C:\Program Files\erwin\Data Modeler r9\erwin.exe" bat脚本要打开有空格的路径，start后面必须加引号，exe路径也要加引号。 3.在批处理前面加上@echo off ，它将使所有命令不再显示命令本身，当然也包括了echo off 命令本身也不会回显了。echo 你要输出的信
linux 执行脚本命令
CYY941027的博客
06-03 1万+
方法一：切换到shell脚本所在的目录（此时，称为工作目录）执行shell脚本： cd /data/shell ./hello.sh 方法二：以绝对路径的方式去执行bash shell脚本： /data/shell/hello.sh 方法三：直接使用bash 或sh 来执行bash shell脚本： cd /data/shell bash hello.sh 或者 cd /data/shell sh hello.sh 解决linux的-bash: ./xx.sh: Permission denied 解决方法
shell脚本常用命令
清风
06-06 3613
一.diff命令 diff 命令：是用来比较两个文件或目录的不同，并且是以行为单位来比对的。一般是用在 ASCII 纯文本文件的比对上。由于是以行为比对的单位，因此 diff 通常是用在同一文件（或软件）的新旧版本差异上对比上，能够借由 diff 创建的分析档,以处理补丁(patch)功能的文件。 diff [options] target1 target2 diff file1 file2 di...
Linux实用脚本命令
TT天SS的博客
08-24 618
Linux命令（备忘）统计文件行数: 语法：wc [选项] 文件… 说明：该命令统计给定文件中的字节数、字数、行数。如果没有给出文件名，则从标准输入读取。wc同时也给出所有指定文件的总统计数。字是由空格字符区分开的最大字符串。 该命令各选项含义如下： 　　- c 统计字节数。 　　- l 统计行数。 　　- w 统计字数。 cd - 切换到上次访问的目录Linux查
脚本中常用的命令详解
weixin_59439430的博客
12-03 378
a,c,d]a添加、c更改、d删除表示第二个文件常用参数。
Linux数据统计与搜索命令详解：grep, sort与uniq
本文将详细介绍几个常用的Linux数据统计命令，包括grep、egrep、sort和uniq。 1. **grep（全局搜索）**： - `grep -A num`：显示匹配行之后的指定行数，默认是1，如`grep -A 2 pattern file`，会显示匹配行及其...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值