鸟哥的linux私房菜(数据流重定向）

1、数据流重导向
标准输入(stdin) ：代码为 0 ，使用 < 或 << ；
标准输出(stdout)：代码为 1 ，使用 > 或 >> ；
标准错误输出(stderr)：代码为 2 ，使用 2> 或 2>> ；

一串指令的最左边一定是指令，而在 >,2>,< 右边的，必须是档案或装置才行！

• 1> ：是将正确的数据输出到指定的地方去
• 2> ：是将错误的数据输出到指定的地方去
[dmtsai@linux ~]$ find /home -name testing > list_right 2> list_error

如果我只要正确的数据，错误的信息我不要了。
[dmtsai@linux ~]$ find /home -name testing > list_right 2> /dev/null

如果我要将数据都写到同一个档案中。
[dmtsai@linux ~]$ find /home -name testing > list 2> list <==错误写法
[dmtsai@linux ~]$ find /home -name testing > list 2>&1 <==正确写法

那个 < 又是什么呀！？
# cat > catfile
testing
cat file test
<==这里按下 [ctrl]+d 结束输入来离开！

# cat > catfile < somefile

# cat > catfile <<eof
> This is a test testing
> OK now stop
> eof <==输入这个玩意儿，嘿！立刻就结束了！

# sync; sync; shutdown -h now

当前面的指令执行结果为正确 (例如：仅有 standard output 时)，就可以接着执行后续的指令， 否则就予以略过！
# ls /tmp && touch /tmp/testingagin

那个 || 刚好完全跟 && 相反，当前一个指令有错误时，在 || 后面的指令才会被执行！
# ls /tmp/vbirding || touch /tmp/vbirding

以 ls 测试 /tmp/vbirding 是否存在，若存在则显示 "exist" ，若不存在，则显示 "not exist"！
ls /tmp/vbirding && echo "exist" || echo "not exist"

2、一些基本的管线命令指令介绍：
撷取命令： cut, grep
• cut
# cut -d'分隔字符' -f fields
# cut -c 字符区间
参数：
-d ：后面接分隔字符。与 -f 一起使用；
-f ：依据 -d 的分隔字符将一段讯息分割成为数段，用 -f 取出第几段的意思；
-c ：以字符 (characters) 的单位取出固定字符区间；

• grep
# grep [-acinv] '搜寻字符串' filename
参数：
-a ：将 binary 档案以 text 档案的方式搜寻数据
-c ：计算找到 '搜寻字符串' 的次数
-i ：忽略大小写的不同，所以大小写视为相同
-n ：顺便输出行号
-v ：反向选择，亦即显示出没有 '搜寻字符串' 内容的那一行！

排序命令： sort, wc, uniq
• sort
# sort [-fbMnrtuk] [file or stdin]
参数：
-f ：忽略大小写的差异，例如 A 与 a 视为编码相同；
-b ：忽略最前面的空格符部分；
-M ：以月份的名字来排序，例如 JAN, DEC 等等的排序方法；
-n ：使用『纯数字』进行排序(预设是以文字型态来排序的)；
-r ：反向排序；
-u ：就是 uniq ，相同的数据中，仅出现一行代表；
-t ：分隔符，预设是 tab 键；
-k ：以那个区间 (field) 来进行排序的意思；

• uniq
# uniq [-ic]
参数：
-i ：忽略大小写字符的不同；
-c ：进行计数

• wc
# wc [-lwm]
参数：
-l ：仅列出行；
-w ：仅列出多少字(英文单字)；
-m ：多少字符；
范例二：我知道使用 last 可以输出登入者，但是 last 最后两行并非账号内容，
那么请问，我该如何以一行指令串取得这个月份登入系统的总人次？
# last | grep [a-zA-Z] | grep -v 'wtmp' | wc -l
# 由于 last 会输出空白行与 wtmp 字样在最底下两行，因此，我利用
# grep 取出非空白行，以及去除 wtmp 那一行，在计算行数，就能够了解啰！

双向重导向： tee
# tee [-a] file
参数：
-a ：以累加 (append) 的方式，将数据加入 file 当中！

字符转换命令： tr, col, join, paste, expand
• tr
# tr [-ds] SET1 ...
参数：
-d ：删除讯息当中的 SET1 这个字符串；
-s ：取代掉重复的字符！

DOS下面会自动在每行行为加入^M这个断行符号，这个时候我们可以使用这个tr来将^M去除。^M可以使用\r来替代
cat /etc/passwd | tr -d '\r' >/root/passwd.linux

• col
# col [-x]
参数：
-x ：将 tab 键转换成对等的空格键

• join
# join [-ti12] file1 file2
参数：
-t ：join 预设以空格符分隔数据，并且比对『第一个字段』的数据，
如果两个档案相同，则将两笔数据联成一行，且第一个字段放在第一个！
-i ：忽略大小写的差异；
-1 ：这个是数字的 1 ，代表『第一个档案要用那个字段来分析』的意思；
-2 ：代表『第二个档案要用那个字段来分析』的意思。
范例一：用 root 的身份，将 /etc/passwd 与 /etc/shadow 相关数据整合成一栏
# join -t ':' /etc/passwd /etc/shadow

范例二：我们知道 /etc/passwd 第四个字段是 GID ，那个 GID 记录在
/etc/group 当中的第三个字段，请问如何将两个档案整合？
# join -t ':' -1 4 /etc/passwd -2 3 /etc/group

• paste
# paste [-d] file1 file2
参数：
-d ：后面可以接分隔字符。预设是以 [tab] 来分隔的！
- ：如果 file 部分写成 - ，表示来自 standard input 的资料的意思。
范例一：将 /etc/passwd 与 /etc/shadow 同一行贴在一起
# paste /etc/passwd /etc/shadow

范例二：先将 /etc/group 读出(用 cat)，然后与范例一贴上一起！且仅取出前三行
# cat /etc/group|paste /etc/passwd /etc/shadow -|head -n 3

• expand
这玩意儿就是在将 [tab] 按键转成空格键

分割命令： split
# split [-bl] file PREFIX
参数：
-b ：后面可接欲分割成的档案大小，可加单位，例如 b, k, m 等；
-l ：以行数来进行分割。

我的/etc/termcap七百多k,若想分成300KB一个文件怎么办？

cd /tmp;split -b 300k /etc/termcap termcap
ll -l termcap*
......termcapaa
......termcapab

如何将上面的小文件合成一个文件
cat termcap* >>tercapback

将使用ls -al /输出 的信息中，每10行记录成一个文件
ls -al / |split -l 10 - lsroot
结果
wc -l lsroot*
.........

参数代换： xargs
范例一：将 /etc/passwd 内的第一栏取出，仅取三行，使用 finger 这个指令将每个
账号内容秀出来
# cut -d':' -f1 < /etc/passwd |head -n 3| xargs finger

范例二：同上，但是每次执行 finger 时，都要询问使用者是否动作？
# cut -d':' -f1 < /etc/passwd |head -n 3| xargs -p finger

范例三：将所有的 /etc/passwd 内的账号都以 finger 查阅，但一次仅查阅五个账号
# cut -d':' -f1 < /etc/passwd | xargs -p -n 5 finger

范例四：同上，但是当分析到 lp 就结束这串指令？
# cut -d':' -f1 < /etc/passwd | xargs -p -e'lp' finger

关于减号 - 的用途
# tar -cvf - /home | tar -xvf -
上面这个例子是说：『我将 /home 里面的档案给他打包，但打包的数据不是纪录到档案，而是传送到 stdout； 经过管线后，将 tar -cvf - /home 传送给后面的 tar -xvf - 』。后面的这个 - 则是取用前一个指令的 stdout， 因此，我们就不需要使用 file 了！这是很常见的例子喔！注意注意！