硬链接 (hard link) 与软链接(又称符号链接,即 soft link 或 symbolic link)。链接为 Linux 系统解决了文件的共享使用,还带来了隐藏文件路径、增加权限安全及节省存储等好处。若一个 inode 号对应多个文件名,则称这些文件为硬链接。换言之,硬链接就是同一个文件使用了多个别名。硬链接可由命令 link 或 ln 创建。
软链接与硬链接不同,若文件用户数据块中存放的内容是另一文件的路径名的指向,则该文件就是软连接。软链接就是一个普通文件,只是数据块内容有点特殊。软链接有着自己的 inode 号以及用户数据块。
ln -s source target
文本操作命令
cat 由第一行开始显示内容,并将所有内容输出
tac 从最后一行倒序显示内容,并将所有内容输出
more 根据窗口大小,一页一页的显示文件内容
less 和more类似,但其优点可以往前翻页,而且进行可以搜索字符
head 只显示头几行
tail 只显示最后几行
sort、uniq
sort 进行排序。
$ sort [-fbMnrtuk] [file or stdin]
-f :忽略大小写
-b :忽略最前面的空格
-M :以月份的名字来排序,例如 JAN, DEC
-n :使用数字
-r :反向排序
-u :相当于 unique ,重复内容只出现一次
-t :分隔符,默认为tab
-k :指定排序的区间
范例:/etc/passwd 内容是以 : 来分隔的,以第三栏来排序。
$ cat /etc/passwd | sort -t ‘:’ -k 3
root❌0:0:root:/root:/bin/bash
dmtsai❌1000:1000:dmtsai:/home/dmtsai:/bin/bash
alex❌1001:1002::/home/alex:/bin/bash
arod❌1002:1003::/home/arod:/bin/bash
uniq 可以将重复的数据只取一个。
$ uniq [-ic]
-i :忽略大小写
-c :进行计数
使用cat命令可以显示文本文件内容,或 把几个文件内容附加到另一个文件中。
使用more命令可以分页显示文本文件的内容。
使用less命令可以回卷显示文本文件的内容。
使用head命令可以显示指定文件的前若干行文件内容。
使用tail命令可以查看文件的末尾数据。
使用sort命令可以对文件中的数据进行排序,并将结果显示在标准输出上。
使用uniq命令可以将文件内的重复行数据从输出文件中删除,只留下每条记录的唯一样本。
使用cut命令可以从文件的每行中显示出选定的字节、字符或字段。
使用comm命令可以比较两个已排过序的文件,并将其结果显示出来。
使用diff命令可以逐行比较两个文本文件,列出其不同之处。它比comm命令完成更复杂的检查。它对给出的文件进行系统的检查,并显示出两个文件中所有不同的行,不要求事先对文件进行排序。
vim
===
vi编辑器有3种基本工作模式,分别是命令行模式、插入模式和末行模式。
命令行模式控制屏幕光标的移动,字符、字或行的删除,移动、复制某区域及进入插入模式,或者到末行模式。
只有在插入模式下,才可以做文字输入,按“Esc”键可回到命令行模式。
末行模式将文件保存或退出vi编辑器,也可以设置编辑环境,如寻找字符串、列出行号等。
在指令列模式下,有以下命令用于离开或者存储文件。
命令 作用
:w 写入磁盘
:w! 当文件为只读时,强制写入磁盘。到底能不能写入,与用户对该文件的权限有关
:q 离开
:q! 强制离开不保存
:wq 写入磁盘后离开
:wq! 强制写入磁盘后离开
实时查看日志命令
tail -f path
-f 循环读取
系统日志
====
/var/log/message 系统启动后的信息和错误日志,是Red Hat Linux中最常用的日志之一
/var/log/secure 与安全相关的日志信息
/var/log/maillog 与邮件相关的日志信息
/var/log/cron 与定时任务相关的日志信息
/var/log/spooler 与UUCP和news设备相关的日志信息
/var/log/boot.log 守护进程启动和停止相关的日志消息
/var/log/wtmp 该日志文件永久记录每个用户登录、注销及系统的启动、停机的事件
find
====
查找磁盘上最大的文件的命令
find / -type f -size +10G
列出当前目录及子目录下所有文件和文件夹
在/home目录下查找以.txt结尾的文件名 find /home -name “*.txt”
同上,但忽略大小写 find /home -iname “*.txt”
当前目录及子目录下查找所有以.txt和.pdf结尾的文件 find . \( -name “*.txt” -o -name “*.pdf” \) 或 find . -name “*.txt” -o -name “*.pdf”
匹配文件路径或者文件 find /usr/ -path “*local*”
基于正则表达式匹配文件路径 find . -regex “.*\(\.txt\|\.pdf\)$”
同上,但忽略大小写 find . -iregex “.*\(\.txt\|\.pdf\)$”
找出/home下不是以.txt结尾的文件 find /home ! -name “*.txt”
根据文件类型进行搜索find . -type 类型参数
类型参数列表:
f 普通文件
l 符号连接
d 目录
c 字符设备
b 块设备
s 套接字
p Fifo
基于目录深度搜索
向下最大深度限制为3 find . -maxdepth 3 -type f
搜索出深度距离当前目录至少2个子目录的所有文件 find . -mindepth 2 -type f
根据文件时间戳进行搜索 find . -type f 时间戳
UNIX/Linux文件系统每个文件都有三种时间戳:
访问时间(-atime/天,-amin/分钟):用户最近一次访问时间。
修改时间(-mtime/天,-mmin/分钟):文件最后一次修改时间。
变化时间(-ctime/天,-cmin/分钟):文件数据元(例如权限等)最后一次修改时间。
搜索最近七天内被访问过的所有文件
find . -type f -atime -7 搜索恰好在七天前被访问过的所有文件
find . -type f -atime 7 搜索超过七天内被访问过的所有文件
find . -type f -atime +7 搜索访问时间超过10分钟的所有文件
find . -type f -amin +10 找出比file.log修改时间更长的所有文件
find . -type f -newer file.log 根据文件大小进行匹配
find . -type f -size 文件大小单元 文件大小单元:
b —— 块(512字节)
c —— 字节
w —— 字(2字节)
k —— 千字节
M —— 兆字节
G —— 吉字节
搜索大于10KB的文件find . -type f -size +10k
搜索小于10KB的文件find . -type f -size -10k
搜索等于10KB的文件find . -type f -size 10k
删除匹配文件
删除当前目录下所有.txt文件 find . -type f -name “*.txt” -delete
根据文件权限/所有权进行匹配
当前目录下搜索出权限为777的文件 find . -type f -perm 777
找出当前目录下权限不是644的php文件 find . -type f -name “*.php” ! -perm 644
找出当前目录用户tom拥有的所有文件 find . -type f -user tom
将当前目录下所有以“.txt”结尾的文件打印出来,再追问,除了“.txt”再加上“.abc”结尾的也打印出来。
find . -name “*.txt”
grep
====
在文件内查找字符串
grep “字符串” filename
文件权限
====
r:可读(4)
w:可写(2),对于目录来说表示可在目录中新建文件
x:可执行(1),对于目录来说为可进入到该目录中
-:表示无对应位上的权限
4代表读权限,2代表写权限,1代表执行权限
7=4+2+1,表示拥有可读可写可执行权限
5=4+1,表示拥有可读可执行权限,但是没有写权限
4 代表拥有可读权限
0 代表没有任何权限
chmod 修改文件属性
============
chmod 777 /home/berry
chmod u+x /home/berry
u 表示“用户(user)”,即文件或目录的所有者。
g 表示“同组(group)用户”,即与文件属主有相同组ID的所有用户。
o 表示“其他(others)用户”。
a 表示“所有(all)用户”。它是系统默认值。
chown 修改文件的属主与属组
================
chown guest:guest a.txt
chown -R guest /home/berry (把berry文件下的所有文件都改成guest这个组)
chgrp 修改文件的所属的用户组
=================
chgrp -R guest /var/tmp/f.txt
chgrp - R root /home/berry/file/a.txt
iostat(查看各个设备的IO状态,查看磁盘读写性能)
============================
直接输入iostat:
tps是每秒的IO请求数,这是IO消耗情况值得关注的数字。
Blk_read/s是指每秒读取的块数量,通过块的大小是512字节
Blk_read是指总共读取的块数量
iostat –x xvda 3 5 定时采样查看IO消耗情况
首先要关注的是CPU中的iowait%所占的百分比,当iowait占据主要的百分比时,就表示要关注IO方面的消耗状况了。
pidstat(查看某个线程的IO状态)
====================
pidstat –d –t –p [pid] 1 100
KB_rd/s 表示每秒读取的KB数
KB_wd/s 表示每秒写入的KB数
通过pidstat直接找到文件IO操作多的线程,之后结合jstack找到对应的Java代码。
cp/mv的区别
========
1、功能上的区别
mv:用户可以使用该命令为文件或目录重命名或将文件由一个目录移入另一个目录中。
cp: 该命令的功能是将给出的文件或目录拷贝到另一文件或目录中。
2、从inode角度来区分
mv:会将存储于indoe索引节点上的文件元信息也移动到新文件中。
cp : 只会复制文件数据,不会复制inode索引节点上的文件元信息。
cp 的时候是真正意义上的内容copy,对于 inode 节点却是不会变化的。
mv 的时候是把源文件直接删除了(inode 删除了),新的文件其实已经不是以前的文件了,只是名字一样而已。
网络
==
netstat(端口)
查看tcp连接数状态
netstat -n | awk ‘/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}’
统计8080端口上有多少个TCP连接,命令:
netstat –nat | grep 8080 | wc –l
TCP连接中有多少个连接状态是ESTABLISHED,命令:
netstat –nat | grep 8080 | grep ESTABLISHED| wc -l
TCP连接中有多少个连接状态是CLOSE_WAIT
netstat –nat | grep 8080 | grep CLOSE_WAIT| wc -l
TCP连接中有多少个连接状态是TIME_WAIT
netstat –nat | grep 8080 | grep TIME_WAIT| wc -l
使用awk来完成统计信息,命令如下
netstat –nat | grep 8080 | awk ‘{++S[$NF]} END {for (a in S) print a, S[a]}’
sar
sar –n FULL 1 2 执行后以1s为频率,总共输出两次网络IO的消耗情况。
输出信息包含三部分:网卡上成功的接包和发包的信息 网卡上失败的接包和发包信息 sockets上的统计信息(tcpsck、udpsck)
如需详细跟踪tcp/ip通信过程的信息,则可通过tcpdump来进行。
tcpdump
tcpdump [ -DenNqvX ] [ -c count ] [ -F file ] [ -i interface ] [ -r file ]
[ -s snaplen ] [ -w file ] [ expression ]
抓包选项:
-c:指定要抓取的包数量。注意,是最终要获取这么多个包。例如,指定"-c 10"将获取10个包,但可能已经处理了100个包,只不过只有10个包是满足条件的包。
-i interface:指定tcpdump需要监听的端口。若未指定该选项,将从系统接口列表中搜寻编号最小的已配置好的接口(不包括loopback端口,要抓取loopback接口使用tcpdump -i lo),
:一旦找到第一个符合条件的端口,搜寻马上结束。可以使用’any’关键字表示所有网络接口。
-n:对地址以数字方式显式,否则显式为主机名,也就是说-n选项不做主机名解析。
-nn:除了-n的作用外,还把端口显示为数值,否则显示端口服务名。
-N:不打印出host的域名部分。例如tcpdump将会打印’nic’而不是’nic.ddn.mil’。
-P:指定要抓取的包是流入还是流出的包。可以给定的值为"in"、“out"和"inout”,默认为"inout"。
-s len:设置tcpdump的数据包抓取长度为len,如果不设置默认将会是65535字节。对于要抓取的数据包较大时,长度设置不够可能会产生包截断,若出现包截断,
:输出行中会出现"[|proto]"的标志(proto实际会显示为协议名)。但是抓取len越长,包的处理时间越长,并且会减少tcpdump可缓存的数据包的数量,
:从而会导致数据包的丢失,所以在能抓取我们想要的包的前提下,抓取长度越小越好。
输出选项:
-e:输出的每行中都将包括数据链路层头部信息,例如源MAC和目标MAC。
-q:快速打印输出。即打印很少的协议相关信息,从而输出行都比较简短。
-X:输出包的头部数据,会以16进制和ASCII两种方式同时输出。
-XX:输出包的头部数据,会以16进制和ASCII两种方式同时输出,更详细。
-v:当分析和打印的时候,产生详细的输出。
-vv:产生比-v更详细的输出。
-vvv:产生比-vv更详细的输出。
其他功能性选项:
-D:列出可用于抓包的接口。将会列出接口的数值编号和接口名,它们都可以用于"-i"后。
-F:从文件中读取抓包的表达式。若使用该选项,则命令行中给定的其他表达式都将失效。
-w:将抓包数据输出到文件中而不是标准输出。可以同时配合"-G time"选项使得输出文件每time秒就自动切换到另一个文件。可通过"-r"选项载入这些文件以进行分析和打印。
-r:从给定的数据包文件中读取数据。使用"-"表示从标准输入中读取。
(1).默认启动
tcpdump
默认情况下,直接启动tcpdump将监视第一个网络接口(非lo口)上所有流通的数据包。这样抓取的结果会非常多,滚动非常快。
(2).监视指定网络接口的数据包
tcpdump -i eth1
如果不指定网卡,默认tcpdump只会监视第一个网络接口,如eth0。
(3).监视指定主机的数据包,例如所有进入或离开longshuai的数据包
tcpdump host longshuai
(4).打印helios<–>hot或helios<–>ace之间通信的数据包
tcpdump host helios and \( hot or ace \)
(5).打印ace与任何其他主机之间通信的IP数据包,但不包括与helios之间的数据包
tcpdump ip host ace and not helios
(6).截获主机hostname发送的所有数据
tcpdump src host hostname
(7).监视所有发送到主机hostname的数据包
tcpdump dst host hostname
(8).监视指定主机和端口的数据包