shell特殊符号cut、sort_wc_uniq、tee_tr_split命令

最新推荐文章于 2021-10-15 15:24:17 发布
最新推荐文章于 2021-10-15 15:24:17 发布
阅读量91 收藏
点赞数
文章标签： shell python
原文链接：https://my.oschina.net/u/3964535/blog/2245819
版权

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

10月15日任务

8.10 shell特殊符号cut命令

8.11 sort_wc_uniq命令

8.12 tee_tr_split命令

8.13 shell特殊符号下

 

截取命令：cut

  • -d 分隔符
  • -f 字段
#截取/etc/passwd的前十行的第1,2个字段
[root@centos7 ~]# cat /etc/passwd | head -n 5 | cut -d ":" -f 1,2
root:x
bin:x
daemon:x
adm:x
lp:x
  • -c 指定第几个字符
[root@centos7 ~]# cat /etc/passwd | head -n 5 | cut -c 1
r
b
d
a
l

排序命令：sort

按ASCII码顺序排序内容

  • -n 按数字顺序排序(默认字母排在数字前)
[root@centos7 ~]# cat /etc/passwd | head -n 5 | sort -n
adm:x:3:4:adm:/var/adm:/sbin/nologin
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
root:x:0:0:root:/root:/bin/bash
  • -r 按反序
[root@centos7 ~]# cat /etc/passwd | head -n 5 | sort -r
root:x:0:0:root:/root:/bin/bash
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
bin:x:1:1:bin:/bin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
  • -t 分隔符，配合-k n/ -k n1,n2
# 按第三个字段的字母顺序排序
[root@centos7 ~]# cat /etc/passwd | head -n 5 | sort -t ":" -k 3
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

统计命令：wc

# 测试数据
[root@centos7 ~]# cat /etc/passwd | head -n 5
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
  • -l 显示文本内容的行号
[root@centos7 ~]# cat /etc/passwd | head -n 5 | wc -l
5
  • -m/c 显示字符数
[root@centos7 ~]# cat /etc/passwd | head -n 5 | wc -m / c
183
  • -w 显示文本内的单词数，以空格分割
[root@centos7 ~]# cat /etc/passwd | head -n 5 | wc -w
5

cat -A 显示行尾的换行符

除重命令：uniq

去除文本内的重复行，前提需要先排序

[root@centos7 ~]# cat 1.txt | uniq
num111
passwd this is a
num111
passwd
num111
|
# 不排序
[root@centos7 ~]# cat 1.txt | uniq -c
      1 num111
      1 passwd this is a
      1 num111
      1 passwd
      4 num111
      1 |
      
# 先排序再去重
[root@centos7 ~]# cat 1.txt | sort -n | uniq -c
      1 |
      6 num111
      1 passwd
      1 passwd this is a

重定向并显示：tee

重定向内容至文本的同时在终端显示

[root@centos7 ~]# cat /etc/passwd | head -n 5 | tee tee.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

[root@centos7 ~]# cat tee.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
  • -a 追加内容
[root@centos7 ~]# cat /etc/passwd | tail -n 1 | tee -a  tee.txt
castiel:x:1000:1000::/home/castiel:/bin/bash
[root@centos7 ~]# cat tee.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
castiel:x:1000:1000::/home/castiel:/bin/bash

字符替换命令：tr

转换内容，tr

[root@centos7 ~]# echo "test" | tr "s" "S"
teSt

文件切割命令：split

split切割文件

# 测试文件
[root@centos7 tmp]# find / -type f -name "*.conf" -exec cat {} >> test.txt \;

[root@centos7 tmp]# ll
总用量 676
-rw-r--r--. 1 root root 688355 9月  30 23:10 test.txt
[root@centos7 tmp]# du -sh test.txt 
676K	test.txt
  • -b 按指定大小切割，不加单位默认为b（字节）
# 按大小进行切割
[root@centos7 tmp]# split -b 100K test.txt test-
[root@centos7 tmp]# ll
总用量 1352
-rw-r--r--. 1 root root 102400 9月  30 23:11 test-aa
-rw-r--r--. 1 root root 102400 9月  30 23:11 test-ab
-rw-r--r--. 1 root root 102400 9月  30 23:11 test-ac
-rw-r--r--. 1 root root 102400 9月  30 23:11 test-ad
-rw-r--r--. 1 root root 102400 9月  30 23:11 test-ae
-rw-r--r--. 1 root root 102400 9月  30 23:11 test-af
-rw-r--r--. 1 root root  73955 9月  30 23:11 test-ag
-rw-r--r--. 1 root root 688355 9月  30 23:10 test.txt

[root@centos7 tmp]# rm -f test-*
  • -l 按指定行数切割

切割时不指定文件前缀，将以特定命名

# 按行数进行分割
[root@centos7 tmp]# cat test.txt | wc -l
28439
[root@centos7 tmp]# split -l 7000 test.txt test-
[root@centos7 tmp]# ll
总用量 1356
-rw-r--r--. 1 root root 259864 9月  30 23:13 test-aa
-rw-r--r--. 1 root root 138784 9月  30 23:13 test-ab
-rw-r--r--. 1 root root 105356 9月  30 23:13 test-ac
-rw-r--r--. 1 root root 172792 9月  30 23:13 test-ad
-rw-r--r--. 1 root root  11559 9月  30 23:13 test-ae
-rw-r--r--. 1 root root 688355 9月  30 23:10 test.txt

shell特殊符号

  • $
    • 变量的值 echo $PATH
    • 正则表示行尾
    • !$表示上一条命令的最后一个参数
  • ;
    • 多条命令单行编辑连续执行
  • ~
    • 用户家目录
    • 正则表示匹配符
  • &
    • 后台运行进程
  • 定向
    • > 重定向
    • >> 追加重定向
    • 2> 错误重定向
    • 2>> 错误追加重定向
    • &> 重定向与错误重定向
  • []
    • 范围选其一，[0-9],[a-zA-Z]
  • ||
    • 命令1 || 命令2
      • 命令1正确执行，命令2不执行
      • 命令1执行错误，命令2执行
  • &&
    • 命令1 && 命令2
      • 命令1执行正确，命令2执行
      • 命令1执行错误，命令2不执行
[root@centos7 tmp]# ll
总用量 0
# 当前目录下，test目录不存在，返回错误代码1
[root@centos7 tmp]# [ -d test ]
[root@centos7 tmp]# echo $?
1

# && ：命令1返回错误，命令2--mkdir命令不执行
[root@centos7 tmp]# [ -d test ] && mkdir test
[root@centos7 tmp]# echo $?
1

# || ：命令1返回错误，执行mkdir命令
[root@centos7 tmp]# [ -d test ] || mkdir test
[root@centos7 tmp]# echo $?
0

# 此时test目录已存在，命令1返回0，命令2不执行
[root@centos7 tmp]# [ -d test ] ||  mkdir test
[root@centos7 tmp]# echo $?
0

[root@centos7 tmp]# ll
总用量 0
drwxr-xr-x. 2 root root 6 9月  30 23:31 test

# 命令1执行正确，命令2也执行
[root@centos7 tmp]# [ -d test ] && mkdir test
mkdir: 无法创建目录"test": 文件已存在

转载于:https://my.oschina.net/u/3964535/blog/2245819

weixin_34388207
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
处理文本的常用命令
shanjun12的博客
01-18 333
处理文本的常用命令
常用文本内容操作命令集
weixin_34245082的博客
11-07 127
2019独角兽企业重金招聘Python工程师标准>>> ...
常用文本处理命令
IAmFiveWater的博客
06-23 230
tr 用于替换文本中的字符串 tr 原始字符 目标字符 cat anaconda-ks.cfg | tr [a-z] [A-Z] 小写替换大写 wc统计指定文本的行数，字数，字节数 -l 只显示行数 -w 只显示单词数 -c 只显示字节数 cut 用于按列提取文本字符 cut 参数 文本 cut -d: -f1 /etc/passwd diff 用于比较多个文本文件的差异 diff 参...
常用Linux操作命令集
浅浅回忆的博客
05-27 174
1、cd（Change Directory，切换（进入）工作目录，） 2、pwd（Print Working Directory，显示当前工作目录的地址） 3、ls（列举出当前工作目录下的文件及文件夹） 4、mk（Make Directory，创建目录） 5、mv（move，移动文件） 6、cp（copy，复制文件） 7、rm（Remove Directory，删除指定的文件） 8、...
linux常用的文本内容显示命令有哪些,Linux常用的文本处理命令
weixin_39627430的博客
05-10 261
1. 总体介绍 Linux常用的文本处理命令more/less: 逐屏显示文件cat与od: 一次性列出文件内容head与tail: 显示文件的头部或者尾部tee: 三通wc: 字数统计sort: 对文件内容进行排序tr: 翻译字符uniq: 筛选文件中的重复行2. more/less: 逐屏显示文件more/less常用快捷键，推荐使用less代替more命令。: 空格键，翻页: 回车键，向下翻...
bash_shell@鸟哥
03-01
#### 6.2 排序命令：`sort`, `wc`, `uniq` - **`sort`**: 对文件中的行进行排序。 - **`wc`**: 计算文件中的字节数、单词数等。 - **`uniq`**: 过滤相邻重复的行。 #### 6.3 双向重导向：`tee` `tee`命令可以同时...
关于linux日常使用的shell命令
08-04
### 关于 Linux 日常使用的 Shell 命令 在 Linux 操作系统中，Shell 命令是用户与操作系统交互的重要方式之一。掌握常用的 Shell 命令对于提高工作效率、解决实际问题至关重要。本文将详细介绍标题及描述中提及的...
shell编程基础之认识与学习BASH
09-15
`cut`命令用于分隔和提取数据，`grep`搜索匹配的行，`sort`进行排序，`uniq`去除重复行，`wc`统计文本中的单词、行和字符数，`tee`实现双向重定向，`tr`用于替换或删除字符，`col`将格式化文本转化为纯文本，`join`...
1-8文本内容操作
weixin_42508243的博客
10-04 60
文章目录1.8.1VIM编辑器1.8.2文本内容过滤 1.8.1VIM编辑器 一、VIM文本编辑器 -格式:vim [[目录]文件名] -若目标文件不存在，则新建空文件并编辑 -若目标文件已经存在，则打开此文件并编辑 二、VIM基本操作 -保存并退出:wq -放弃修改并退出:q! 1.8.2文本内容过滤 一、根据字符串模式提取文本行 -grep [选项] ‘匹配模式’ 文本文件 1.常用命令选项 -v:取反匹配 -i:忽略大小写 2.用例 [root@localhost03 mnt]# grep root
Linux中文本内容查看常用相关命令
weixin_42373127的博客
03-12 861
cat命令（不会分页） 用途：显示出文件的全部内容，从头到尾一直显示，一次性显示完 格式：cat -n 文件名 -n带行号，n是字母，不是数字 tac命令（没有-n） 用途：从最后一行倒着显示出文件的全部内容 root@localhost ~]# cat /etc/aaa 11111111111111111111 222222222222222222 [root@localhost ~]# ta...
linux查看文件内容常用命令
君子不怨天的博客
10-15 5万+
一、查看文件类型 1、file命令： file file_name 二、查看文本内容 查看全部文本内容： 1、cat命令 cat file_name #输出所有文本内容 3、cat -n file_name #文本内容所有行加上行编号输出 3、cat -b file_name #文本内容非空行加上行编号输出 分页查看文本内容： 1、more命令(常用的分页工具) more file_name 2、less命令（more升级版分页工具) less file_name #显示行加-N参数，less
linux常用的文本内容显示命令有哪些,linux常用命令之--文本编辑和文本内容查看命令...
weixin_30517215的博客
05-10 596
linux的文本编辑和文本内容查看命令1、文本编辑命令vi:用于编辑文本文件，基本上可以分为三种模式，分别是一般模式、编辑模式、命令行模式。一般模式：当编辑一个文件时，刚进入文件就是一般模式。编辑模式：在一般模式下，是不可以编辑文本内容的，需要按i、l、a、A、o、O中的任意一个键进入编辑模式(此时频幕最下方会出现“INSERT”或“REPLACE”)，从编辑模式回到一般模式需要按键盘左上方的ES...
Linux显示文件内容常用命令
aiyu0831的博客
07-04 1810
显示文件内容命令：cat、more、less、head、tail 一.cat命令 主要用来显示文件，依次读取其后所指文件的内容并将其输出到标准输出设备上。 另外，还能够用来连接两个或多个文件，形成新的文件 该命令的使用形式为：cat [选项] 文件名 例：在屏幕上显示出readme.txt文件的内容 #cat readme.txt 把文件text1和文件text2的内容...
Linux | 文本文件查看命令
热门推荐
嵌入式大杂烩
05-05 7万+
我们要查看一些文本文件的内容时，要使用文本编辑器来查看。在Linux下，可以使用一些命令预览文本文件中的内容，而不必使用文本编辑器打开查看。这篇笔记分享几个常用的文本查看命令。分别是： cat：从第一行开始显示文本内容（适用于内容较少的） tac：从最后一行开始显示，是 cat 的逆顺序 more：一页一页的显示文本内容（适用于内容较多的） less：与 more 类似，但是比 more 更好的是...
Linux下查看文件内容的几种常用命令
ApplicationJoke的博客
08-02 8412
【常用】 1，cat     由第一行开始显示内容，并将所有内容输出 cat的功能是将文件从第一行开始连续的将内容输出在屏幕上。但是cat并不常用，原因是当文件大，行数比较多时，屏幕无法全部容下时，只能看到一部分内容。 cat语法：cat [-n]  文件名 （-n ： 显示时，连行号一起输出） 2，less 根据窗口大小，一页一页的显示文件内容 less可以使用【pageup】和【pa...
shell字符串截取（cut）
centor的博客
08-04 3803
字符串截取操作cut，cut以行为单位进行操作。 cut命令主要是接受三个定位方法： 第一，字节（bytes），用选项-b 第二，字符（characters），用选项-c 第三，域（fields），用选项-f-b，下面代码块中详述-b操作//目标操作串-b [lj@localhost script]$ ps PID TTY TIME CMD 2
Linux下Bash的管线pipe命令,cut,grep,sort,wc,uniq，tee,tr,col,join,past,expand
最新发布
05-17
k1++; } else if (board[i+k][j+k] == -turn || k1 == 0) { if (k1 > 0) { k2++; } k1 = 0; } if (k1 ==Bash管道(pipe)命令是将多个命令通过管道符(|)连接在一起，使得前一个 6) { value += 10000; } else if (k1 > 0 && i+k > 0 && i命令的输出成为下一个命令的输入，以此类推，形成一个流水线。下面是常+k < ROWS - 1 && j+k > 0 && j+k < COLS - 1 && board[i+k-1用的一些命令： 1. cut：用于剪切文本文件中的字段，可以按列或字符位置进行][j+k-1] == 0 && board[i+k+1][j+k+1] == 0) { value +=剪切。 示例： ``` cut -d',' -f1 file.csv # 按逗号分隔，提取第一 100; // 可以成五 } else if (k1 > 0 && i+k > 0 && i+k <列 cut -c1-5 file.txt # 提取文本文件的前5个字符 ``` 2. grep： ROWS - 1 && j+k > 0 && board[i+k-1][j+k-1] == 0) { value += 10; // 可以成四 } else if (k1 > 0 && i+k < ROWS - 用于按照指定的模式搜索文本文件中的内容，并将匹配的行输出。 示例： ``` 1 && j+k < COLS - 1 && board[i+k+1][j+k+1] == 0) { valuegrep 'pattern' file.txt # 搜索文本文件中包含pattern的行 grep -v 'pattern' file.txt # += 10; // 可以成四 } else if (k1 > 0 && i+k > 1 && j+k 搜索文本文件中不包含pattern的行 ``` 3. sort：用于对文本文件的行进行排序。 > 1 && board[i+k-1][j+k-1] == turn && board[i+k-2][j+k-2]示例： ``` sort file.txt # 按照字典序升序排序 sort -n file.txt # 按照数字 == 0) { value += 5; // 可以成三 } else if (k1 > 0 && i大小升序排序 ``` 4. wc：用于统计文本文件中的行数、单词数和字符数+k < ROWS - 2 && j+k < COLS - 2 && board[i+k+1][j+k+1] ==。 示例： ``` wc -l file.txt # 统计文本文件的行数 wc -w file.txt # turn && board[i+k+2][j+k+2] == 0) { value += 5; // 可以成三 统计文本文件的单词数 wc -c file.txt # 统计文本文件的字符数 ``` 5 } } if (k1 > 0) { k2++; } if (k2 > . uniq：用于去除文本文件中的重复行。 示例： ``` sort file.txt | uniq # 将0) { value += k2 * k2; // 连子数越多，价值越高 } k1文本文件排序并去重 ``` 6. tee：用于将命令的输出同时输出到屏幕和文件中 = 0; k2 = 0; } } // 左下到右上 for (int i =。 示例： ``` ls -l | tee file.txt # 将ls命令的输出同时输出到屏幕和文件中 5; i < ROWS; i++) { for (int j = 0; j < COLS - 5; j ``` 7. tr：用于对文本文件进行字符转换。 示例： ``` tr 'a-z' '++) { for (int k = 0; k < 6; k++) { if (board[i-k][j+k]A-Z' file.txt # 将文本文件中的小写字母转换为大写字母 ``` 8. == turn) { k1++; } else if (board[i-k][j+k] == -turn || k1 == 0) { if (k1 > 0) { k2++; } k1 = 0; } col：用于过滤文本文件中的控制字符。 示例： ``` col -b file.txt # 过滤 if (k1 == 6) { value += 10000; } else if (k1 > 0 && i-k文本文件中的控制字符 ``` 9. join：用于将两个文本文件中的相同字段进行 > 0 && i-k < ROWS - 1 && j+k > 0 && j+k < COLS - 1 && 合并。 示例： ``` join file1.txt file2.txt # 将file1.txt和file2.txt中相同的 board[i-k-1][j+k+1] == 0 && board[i-k+1][j+k-1] == 0字段合并 ``` 10. paste：用于将两个文本文件的对应行合并成一行。 示) { value += 100; // 可以成五 } else if (k1 > 0 && i-k < ROW例： ``` paste file1.txt file2.txt # 将file1.txt和file2.txt的对应行合并成一S - 1 && j+k > 0 && j+k < COLS - 1 && board[i-k+1][j+k行 ``` 11. expand：用于将文本文件中的制表符转换为空格。 示例： ``` expand file.txt # 将文本文件中的制表符转换为空格 ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值