sort命令 uniq命令 tr命令 cut命令

sort命令 ——以行为单位对文件内容进行排序，也可以根据不同的数据类型来排序

比较原则是从首字符向后，依次按ASCII码值进行比较，最后将他们按升序输出

语法格式：

sort [选项] 参数

cat file | sort 选项

-n	按照数字进行排序
-r	反向排序
-u	等同于uniq，表示相同的数据仅显示一行
-t	指定字段分隔符，默认使用[Tab]键分隔
-k	指定排序字段
-o  <输出文件>	将排序后的结果转存至指定文件
-f	忽略大小写，会将大小写字母都转换为大写字母来进行比较
-b	忽略每行前面的空格

 

 

 uniq——用于报告或者忽略文件中来连续的重复行，常与sort命令结合使用

语法格式：

uniq [选项] 参数

cat file | uniq 选项

-c	进行计数，并删除文件中重复出现的行
-d	仅显示连续的重复行
-u	仅显示出现一次的行

 

 实例：输出一个文件中出现三次的IP

 

 

实例2：使用脚本来查看用户有没有被恶意登录，查看登录用户的对应ip地址

在源主机里查看日志

使用cd /var/log/  #进入var目录里的log里

使用tail secure -f   #来查看日志

查看日志里的输入错误密码的用户ip地址
如果被人攻击了会出现大量的ip地址报错

使用shell脚本将输入错误次数过多的ip地址放进黑名单里

 tr ——用来对来自标准输入的字符进行替换、压缩、删除

-c:保留字符集1的字符，其他的字符（包括换行符\n）用字符集2替换
-d:删除所有属于字符集1的字符
-s:将重复出现的字符串压缩为一个字符;用字符集2替换字符集1
-t:字符集2 替换 字符集1，不加选项同结果
参数：
字符集1：指定要转换或删除的原字符集。当执行转换操作时，必须使用参数"字符集2"指定转换的目标字符集。但执行删除操作时，不需要参数"字符集2"
字符集2：指定要转换成的目标字符集

[root@cx ~]# echo -e "abc\nabcd\nab"
abc
abcd
ab
[root@cx ~]# echo -e "abc\nabcd\nab" | tr -c 'ab' '1'
ab11ab111ab1[rooecho -e "abc\nabcd\nab" | tr -c 'ab\n' '1'
ab1
ab11
ab

 

 

 

[root@cx ~]# arr=(60 15 21 3 5 79)
[root@dz666 ~]# echo ${arr[@]}
60 15 21 3 5 79
[root@cx ~]# echo ${arr[@]} | tr ' ' '\n'
60
15
21
3
5
79
[root@cx ~]# echo ${arr[@]} | tr ' ' '\n' | sort -n
#对数组进行大小排序
3
5
15
21
60
79
[root@cx ~]# echo ${arr[@]} | tr ' ' '\n' | sort -n | tr '\n' ' '
3 5 15 21 60 79 [root@dz666 ~]# 

使用shell脚本来编写数组的排序

#!/bin/bash

arr=(24 36 53 12 6 9 1 3)
echo "排序前数组的值为; ${arr[@]}"

newarr=$(echo ${arr[@]} | tr ' ' '\n' | sort -n | tr '\n' ' ')

echo "排序后的数据的值为: ${newarr[@]}"

 

 cut命令

cut命令—显示行中的指定部分，删除文件中指定字段

-d	通过指定哪一个字段进行提取。cut命令使用"TAB”作为默认的字段分隔符
-f	“TAB”是默认的分隔符，使用此选项可以更改为其他的分隔符。
-complement	此选项用于排除所指定的字段
--output-delimiter	更改输出内容的分隔符