Linux常用命令
1.系统信息
uname -m #显示机器的处理器架构
uname -r #显示正在使用的内核版本
dmidecode -q #显示硬件系统部件 - (SMBIOS / DMI)
hdparm -i /dev/hda #罗列一个磁盘的架构特性hdparm -tT /dev/sda #在磁盘上执行测试性读取操作cat /proc/cpuinfo #显示CPU info的信息cat /proc/interrupts #显示中断
cat /proc/meminfo #校验内存使用
cat /proc/swaps #显示哪些swap被使用
cat /proc/version #显示内核的版本
cat /proc/net/dev #显示网络适配器及统计
cat /proc/mounts #显示已加载的文件系统
lspci -tv #罗列PCI设备
lsusb -tv #显示USB设备```
## data显示系统日期
```cal 2007 #显示2007年的日历表
date 041217002007.00 #设置日期和时间 - 月日时分年.秒
clock -w #将时间修改保存到 BIOS```
## 关机 (系统的关机、重启以及登出 )
```shutdown -h now #关闭系统
(1)init 0 #关闭系统
(2)telinit 0 #关闭系统
(3)shutdown -h hours:minutes & #按预定时间关闭系统shutdown -c #取消按预定时间关闭系统shutdown -r now #重启
(1)reboot #重启
(2)logout #注销
2.文件和目录
cd .. #返回上一级目录
cd ../.. #返回上两级目录
cd #进入个人的主目录
cd ~user1 #进入个人的主目录
cd - #返回上次所在的目录
pwd #显示工作路径
ls #查看目录中的文件
ls -F #查看目录中的文件
ls -l #显示文件和目录的详细资料
ls -a #显示隐藏文件
ls *[0-9]* #显示包含数字的文件名和目录名
tree #显示文件和目录由根目录开始的树形结构(1)lstree #显示文件和目录由根目录开始的树形结构
(2)mkdir dir1 #创建一个叫做 'dir1' 的目录'
mkdir dir1 dir2 #同时创建两个目录
mkdir -p /tmp/dir1/dir2 #创建一个目录树
rm -f file1 #删除一个叫做 'file1' 的文件'
rmdir dir1 #删除一个叫做 'dir1' 的目录'
rm -rf dir1 #删除一个叫做 'dir1' 的目录并同时删除其内容
rm -rf dir1 dir2 #同时删除两个目录及它们的内容
mv dir1 new_dir #重命名/移动 一个目录
cp file1 file2 #复制一个文件
cp dir/* . #复制一个目录下的所有文件到当前工作目录
cp -a /tmp/dir1 . #复制一个目录到当前工作目录
cp -a dir1 dir2 #复制一个目录
ln -s file1 lnk1 #创建一个指向文件或目录的软链接ln file1 lnk1 #创建一个指向文件或目录的物理链接touch -t 0712250000 file1 #修改一个文件或目录的时间戳 - (YYMMDDhhmm)
file file1 outputs the mime type of the file as texticonv -l #列出已知的编码
iconv -f fromEncoding -t toEncoding inputFile > outputFile creates a new from the given input file by assuming it is encoded in fromEncoding and converting it to toEncoding.
find . -maxdepth 1 -name *.jpg -print -exec convert "{}" -resize 80x60 "thumbs/{}" \; batch resize files in the current directory and send them to a thumbnails directory (requires convert from Imagemagick)
2.文件搜索
find / -user user1 #搜索属于用户 'user1' 的文件和目录
find /home/user1 -name \*.bin #在目录 '/ home/user1' 中搜索带有'.bin' 结尾的文件
find /usr/bin -type f -atime +100 #搜索在过去100天内未被使用过的执行文件
find /usr/bin -type f -mtime -10 #搜索在10天内被创建或者修改过的文件
find / -name \*.rpm -exec chmod 755 '{}' \; #搜索以 '.rpm' 结尾的文件并定义其权限
find / -xdev -name \*.rpm #搜索以 '.rpm' 结尾的文件,忽略光驱、捷盘等可移动设备
locate \*.ps #寻找以 '.ps' 结尾的文件 - 先运行'updatedb' 命令
whereis halt #显示一个二进制文件、源码或man的位置
which halt #显示一个二进制文件或可执行文件的完整路径
3.挂载一个文件系统
umount /dev/hda2 #卸载一个叫做hda2的盘 - 先从挂载点 '/ mnt/hda2' 退出fuser -km /mnt/hda2 #当设备繁忙时强制卸载
umount -n /mnt/hda2 #运行卸载操作而不写入 /etc/mtab 文件- 当文件为只读或当磁盘写满时非常有用
mount /dev/fd0 /mnt/floppy #挂载一个软盘
mount /dev/cdrom /mnt/cdrom #挂载一个cdrom或dvdrom
mount /dev/hdc /mnt/cdrecorder #挂载一个cdrw或dvdrom
mount /dev/hdb /mnt/cdrecorder #挂载一个cdrw或dvdrom
mount -o loop file.iso /mnt/cdrom #挂载一个文件或ISO镜像文件
mount -t vfat /dev/hda5 /mnt/hda5 #挂载一个Windows FAT32文件系统
mount /dev/sda1 /mnt/usbdisk #挂载一个usb 捷盘或闪存设备
mount -t smbfs -o username=user,password=pass //WinClient/share /mnt/share #挂载一个windows网络共享
磁盘空间
ls -lSr |more #以尺寸大小排列文件和目录
du -sh dir1 #估算目录 'dir1' 已经使用的磁盘空间'
du -sk * | sort -rn #以容量大小为依据依次显示文件和目录的大小
rpm -q -a --qf '%10{SIZE}t%{NAME}n' | sort -k1,1n #以大小为依据依次显示已安装的rpm包所使用的空间 (fedora, redhat类系统)
dpkg-query -W -f='${Installed-Size;10}t${Package}n' | sort -k1,1n #以大小为依据显示已安装的deb包所使用的空间 (ubuntu, debian类系统)
用户和群组
groupmod -n new_group_name old_group_name #重命名一个用户组
useradd -c "Name Surname " -g admin -d /home/user1 -s /bin/bash user1 #创建一个属于 "admin"用户和群组
useradd user1 #创建一个新用户
userdel -r user1 #删除一个用户 ( '-r' 排除主目录)
usermod -c "User FTP" -g system -d /ftp/user1 -s /bin/nologin user1 #修改用户属性
passwd #修改口令
passwd user1 #修改一个用户的口令 (只允许root执行)
chage -E 2005-12-31 user1 #设置用户口令的失效期限
pwck #检查 '/etc/passwd' 的文件格式和语法修正以及存在的用户
grpck #检查 '/etc/passwd' 的文件格式和语法修正以及存在的群组
newgrp group_name #登陆进一个新的群组以改变新创建文件的预设群组文件的权限使用 "+" 设置权限,使用 "-" 用于取消ls -lh #显示权限
ls /tmp | pr -T5 -W$COLUMNS #将终端划分成5栏显示
chmod ugo+rwx directory1 #设置目录的所有人(u)、群组(g)以及其他人(o)以读(r )、写(w)和执行(x)的权限
chmod go-rwx directory1 #删除群组(g)与其他人(o)对目录的读写执行权限
chown user1 file1 #改变一个文件的所有人属性
chown -R user1 directory1 #改变一个目录的所有人属性并同时改变改目录下所有文件的属性
chgrp group1 file1 #改变文件的群组chown user1:group1 file1 #改变一个文件的所有人和群组属性
find / -perm -u+s #罗列一个系统中所有使用了SUID控制的文件
chmod u+s /bin/file1 #设置一个二进制文件的 SUID 位 - 运行该文件的用户也被赋予和所有者同样的权限
chmod u-s /bin/file1 #禁用一个二进制文件的 SUID位
chmod g+s /home/public #设置一个目录的SGID 位 - 类似SUID ,不过这是针对目录的chmod g-s /home/public #禁用一个目录的 SGID 位
chmod o+t /home/public #设置一个文件的 STIKY 位 - 只允许合法所有人删除文件chmod o-t /home/public #禁用一个目录的 STIKY 位文件的特殊属性- 使用 "+" 设置权限,使用 "-" 用于取消
chattr +a file1 #只允许以追加方式读写文件chattr +c file1 #允许这个文件能被内核自动压缩/解压
chattr +d file1 #在进行文件系统备份时,dump程序将忽略这个文件
chattr +i file1 #设置成不可变的文件,不能被删除、修改、重命名或者链接
chattr +s file1 #允许一个文件被安全地删除chattr +S file1 #一旦应用程序对这个文件执行了写操作,使系统立刻把修改的结果写到磁盘
chattr +u file1 #若文件被删除,系统会允许你在以后恢复这个被删除的文件
lsattr #显示特殊的属性
打包和压缩文件
bzip2 file1 #压缩一个叫做 'file1' 的文件gunzip file1.gz #解压一个叫做 'file1.gz'的文件
gzip file1 #压缩一个叫做 'file1'的文件
gzip -9 file1 #最大程度压缩
rar a file1.rar test_file #创建一个叫做 'file1.rar' 的包
rar a file1.rar file1 file2 dir1 #同时压缩 'file1', 'file2' 以及目录 'dir1'
rar x file1.rar #解压rar包
unrar x file1.rar #解压rar包
tar -cvf archive.tar file1 #创建一个非压缩的 tarball
tar -cvf archive.tar file1 file2 dir1 #创建一个包含了 'file1', 'file2' 以及 'dir1'的档案文件
tar -tf archive.tar #显示一个包中的内容
tar -xvf archive.tar #释放一个包
tar -xvf archive.tar -C /tmp #将压缩包释放到 /tmp目录下
tar -cvfj archive.tar.bz2 dir1 #创建一个bzip2格式的压缩包
tar -jxvf archive.tar.bz2 #解压一个bzip2格式的压缩包
tar -cvfz archive.tar.gz dir1 #创建一个gzip格式的压缩包
tar -zxvf archive.tar.gz #解压一个gzip格式的压缩包
zip file1.zip file1 #创建一个zip格式的压缩包
zip -r file1.zip file1 file2 dir1 #将几个文件和目录同时压缩成一个zip格式的压缩包
unzip file1.zip #解压一个zip格式压缩包
RPM 包 - (Fedora, Redhat及类似系统)
rpm -ivh --nodeeps package.rpm #安装一个rpm包而忽略依赖关系警告
rpm -U package.rpm #更新一个rpm包但不改变其配置文件
rpm -F package.rpm #更新一个确定已经安装的rpm包
rpm -e package_name.rpm #删除一个rpm包
rpm -qa #显示系统中所有已经安装的rpm包
rpm -qa | grep httpd #显示所有名称中包含 "httpd" 字样的rpm包
rpm -qi package_name #获取一个已安装包的特殊信息
rpm -qg "System Environment/Daemons" #显示一个组件的rpm包
rpm -ql package_name #显示一个已经安装的rpm包提供的文件列表
rpm -qc package_name #显示一个已经安装的rpm包提供的配置文件列表
rpm -q package_name --whatrequires #显示与一个rpm包存在依赖关系的列表
rpm -q package_name --whatprovides #显示一个rpm包所占的体积
rpm -q package_name --scripts #显示在安装/删除期间所执行的脚本l
rpm -q package_name --changelog #显示一个rpm包的修改历史
rpm -qf /etc/httpd/conf/httpd.conf #确认所给的文件由哪个rpm包所提供
rpm -qp package.rpm -l #显示由一个尚未安装的rpm包提供的文件列表
rpm --import /media/cdrom/RPM-GPG-KEY #导入公钥数字证书
rpm --checksig package.rpm #确认一个rpm包的完整性
rpm -qa gpg-pubkey #确认已安装的所有rpm包的完整性
rpm -V package_name #检查文件尺寸、 许可、类型、所有者、群组、MD5检查以及最后修改时间
rpm -Va #检查系统中所有已安装的rpm包- 小心使用
rpm -Vp package.rpm #确认一个rpm包还未安装
rpm2cpio package.rpm | cpio --extract --make-directories *bin* #从一个rpm包运行可执行文件
rpm -ivh /usr/src/redhat/RPMS/`arch`/package.rpm #从一个rpm源码安装一个构建好的包
rpmbuild --rebuild package_name.src.rpm
YUM 软件包升级器 - (Fedora, RedHat及类似系统)
yum localinstall package_name.rpm #将安装一个rpm包,使用你自己的软件仓库为你解决所有依赖关系
yum update package_name.rpm #更新当前系统中所有安装的rpm包
yum update package_name #更新一个rpm包
yum remove package_name #删除一个rpm包
yum list #列出当前系统中安装的所有包
yum search package_name #在rpm仓库中搜寻软件包
yum clean packages #清理
rpm缓存删除下载的包
yum clean headers #删除所有头文件yum clean all #删除所有缓存的包和头文件
DEB 包 (Debian, Ubuntu 以及类似系统)
dpkg -r package_name #从系统删除一个 deb 包dpkg -l #显示系统中所有已经安装的 deb 包dpkg -l | grep httpd #显示所有名称中包含 "httpd" 字样的deb包dpkg -s package_name #获得已经安装在系统中一个特殊包的信息dpkg -L package_name #显示系统中已经安装的一个deb包所提供的文件列表dpkg --contents package.deb #显示尚未安装的一个包所提供的文件列表dpkg -S /bin/ping #确认所给的文件由哪个deb包提供```
## APT 软件工具 (Debian, Ubuntu 以及类似系统)
```apt-get install package_name #安装/更新一个 deb 包
apt-cdrom install package_name #从光盘安装/更新一个 deb 包apt-get update #升级列表中的软件包apt-get upgrade #升级所有已安装的软件apt-get remove package_name #从系统删除一个deb包apt-get check #确认依赖的软件仓库正确apt-get clean #从下载的软件包中清理缓存apt-cache search searched-package #返回包含所要搜索字符串的软件包名称
查看文件内容
tac file1 #从最后一行开始反向查看一个文件的内容
more file1 #查看一个长文件的内容
less file1 #类似于 'more' 命令,但是它允许在文件中和正向操作一样的反向操作
head -2 file1 #查看一个文件的前两行
tail -2 file1 #查看一个文件的最后两行
tail -f /var/log/messages #实时查看被添加到一个文件中的内容
文本处理
cat file1 | command( sed, grep, awk, grep, etc...) > result.txt #合并一个文件的详细说明文本,并将简介写入一个新文件中cat file1 | command( sed, grep, awk, grep, etc...) >> result.txt #合并一个文件的详细说明文本,并将简介写入一个已有的文件中
grep Aug /var/log/messages #在文件'/var/log/messages'中查找关键词"Aug"
grep ^Aug /var/log/messages #在文件 '/var/log/messages'中查找以"Aug"开始的词汇
grep [0-9] /var/log/messages #选择 '/var/log/messages' 文件中所有包含数字的行grep Aug -R /var/log/* #在目录 '/var/log' 及随后的目录中搜索字符串"Aug"
sed 's/stringa1/stringa2/g' example.txt #将example.txt文件中的 "string1" 替换成 "string2"
sed '/^$/d' example.txt #从example.txt文件中删除所有空白行
sed '/ *#/d; /^$/d' example.txt #从example.txt文件中删除所有注释和空白行
echo 'esempio' | tr '[:lower:]' '[:upper:]' #合并上下单元格内容
sed -e '1d' result.txt #从文件example.txt 中排第一行
sed -n '/stringa1/p' #查看只包含词汇"string1"的行
sed -e 's/ *$//' example.txt #删除每一行最后的空白字符
sed -e 's/stringa1//g' example.txt #从文档中只删除词汇 "string1" 并保留剩余全部
sed -n '1,5p;5q' example.txt #查看从第一行到第5行内容sed -n '5p;5q' example.txt #查看第5行
sed -e 's/00*/0/g' example.txt #用单个零替换多个零
cat -n file1 #标示文件的行数
cat example.txt | awk 'NR%2==1' #删除example.txt文件中的所有偶数行
echo a b c | awk '{print $1}' #查看一行第一栏
echo a b c | awk '{print $1,$3}' #查看一行的第一和第三栏paste file1 file2 #合并两个文件或两栏的内容paste -d '+' file1 file2 #合并两个文件或两栏的内容,中间用"+"区分
sort file1 file2 #排序两个文件的内容
sort file1 file2 | uniq #取出两个文件的并集(重复的行只保留一份)
sort file1 file2 | uniq -u #删除交集,留下其他的行
sort file1 file2 | uniq -d #取出两个文件的交集(只留下同时存在于两个文件中的文件)
comm -1 file1 file2 #比较两个文件的内容只删除 'file1' 所包含的内容
comm -2 file1 file2 #比较两个文件的内容只删除 'file2' 所包含的内容
comm -3 file1 file2 #比较两个文件的内容只删除两个文件共有的部分
字符设置和文件格式转换
dos2unix filedos.txt fileunix.txt #将一个文本文件的格式从MSDOS转换成UNIXunix2dos fileunix.txt filedos.txt #将一个文本文件的格式从UNIX转换成MSDOSrecode ..HTML < page.txt > page.html #将一个文本文件转换成htmlrecode -l | more #显示所有允许的转换格式
文件系统分析
fsck /dev/hda1 #修复/检查hda1磁盘上linux文件系统的完整性
fsck.ext2 /dev/hda1 #修复/检查hda1磁盘上ext2文件系统的完整性
e2fsck /dev/hda1 #修复/检查hda1磁盘上ext2文件系统的完整性
e2fsck -j /dev/hda1 #修复/检查hda1磁盘上ext3文件系统的完整性
fsck.ext3 /dev/hda1 #修复/检查hda1磁盘上ext3文件系统的完整性
fsck.vfat /dev/hda1 #修复/检查hda1磁盘上fat文件系统的完整性
fsck.msdos /dev/hda1 #修复/检查hda1磁盘上dos文件系统的完整性
dosfsck /dev/hda1 #修复/检查hda1磁盘上dos文件系统的完整性
初始化一个文件系统
mke2fs /dev/hda1 #在hda1分区创建一个linux ext2的文件系统
mke2fs -j /dev/hda1 #在hda1分区创建一个linux ext3(日志型)的文件系统
mkfs -t vfat 32 -F /dev/hda1 #创建一个 FAT32 文件系统
fdformat -n /dev/fd0 #格式化一个软盘
mkswap /dev/hda3 #创建一个swap文件系统SWAP文件系统```
## SWAP文件系统
```mkswap /dev/hda3 #创建一个swap文件系统
swapon /dev/hda3 #启用一个新的swap文件系统
swapon /dev/hda2 /dev/hdb3 #启用两个swap分区
备份
dump -1aj -f /tmp/home0.bak /home #制作一个 '/home' 目录的交互式备份restore -if /tmp/home0.bak #还原一个交互式备份
rsync -rogpav --delete /home /tmp #同步两边的目录
rsync -rogpav -e ssh --delete /home ip_address:/tmp #通过SSH通道
rsyncrsync -az -e ssh --delete ip_addr:/home/public /home/local #通过ssh和压缩将一个远程目录同步到本地目录
rsync -az -e ssh --delete /home/local ip_addr:/home/public #通过ssh和压缩将本地目录同步到远程目录
dd bs=1M if=/dev/hda | gzip | ssh user@ip_addr 'dd of=hda.gz' #通过ssh在远程主机上执行一次备份本地磁盘的操作dd if=/dev/sda of=/tmp/file1 #备份磁盘内容到一个文件
tar -Puf backup.tar /home/user 执行一次对 '/home/user' #目录的交互式备份操作
( cd /tmp/local/ && tar c . ) | ssh -C user@ip_addr 'cd /home/share/ && tar x -p' #通过ssh在远程目录中复制一个目录内容
( tar c /home ) | ssh -C user@ip_addr 'cd /home/backup-home && tar x -p' #通过ssh在远程目录中复制一个本地目录
tar cf - . | (cd /tmp/backup ; tar xf - ) #本地将一个目录复制到另一个地方,保留原有权限及链接
find /home/user1 -name '*.txt' | xargs cp -av --target-directory=/home/backup/ --parents #从一个目录查找并复制所有以 '.txt' 结尾的文件到另一个目录
find /var/log -name '*.log' | tar cv --files-from=- | bzip2 > log.tar.bz2 #查找所有以 '.log' 结尾的文件并做成一个bzip包
dd if=/dev/hda of=/dev/fd0 bs=512 count=1 #做一个将 MBR (Master Boot Record)内容复制到软盘的动作
dd if=/dev/fd0 of=/dev/hda bs=512 count=1 #从已经保存到软盘的备份中恢复MBR内容
光盘
cdrecord -v gracetime=2 dev=/dev/cdrom -eject blank=fast -force #清空一个可复写的光盘内容
mkisofs /dev/cdrom > cd.iso #在磁盘上创建一个光盘的iso镜像文件
mkisofs /dev/cdrom | gzip > cd_iso.gz #在磁盘上创建一个压缩了的光盘iso镜像文件
mkisofs -J -allow-leading-dots -R -V "Label CD" -iso-level 4 -o ./cd.iso data_cd #创建一个目录的iso镜像文件
cdrecord -v dev=/dev/cdrom cd.iso #刻录一个ISO镜像文件gzip -dc cd_iso.gz | cdrecord dev=/dev/cdrom - #刻录一个压缩了的ISO镜像文件
mount -o loop cd.iso /mnt/iso #挂载一个ISO镜像文件
cd-paranoia -B #从一个CD光盘转录音轨到 wav 文件中
cd-paranoia -- "-3" #从一个CD光盘转录音轨到 wav 文件中(参数-3)
cdrecord --scanbus #扫描总线以识别scsi通道
dd if=/dev/hdc | md5sum #校验一个设备的md5sum编码,例如一张 CD
网络 - (以太网和WIFI无线)
ifconfig eth0 #显示一个以太网卡的配置
ifup eth0 #启用一个 'eth0' 网络设备
ifdown eth0 #禁用一个 'eth0' 网络设备
ifconfig eth0 192.168.1.1 netmask 255.255.255.0 #控制IP地址
ifconfig eth0 promisc #设置 'eth0' 成混杂模式以嗅探数据包 (sniffing)dhclient eth0 #以dhcp模式启用 'eth0'
route -n #查看路由表
route add -net 0/0 gw IP_Gateway #配置默认网关
route add -net 192.168.0.0 netmask 255.255.0.0 gw 192.168.1.1 #配置静态路由到达网络'192.168.0.0/16'
route del 0/0 gw IP_gateway #删除静态路由hostname #查看机器名host www.example.com #把一个主机名解析到一个网际地址或把一个网际地址解析到一个主机名。
nslookup www.example.com #用于查询DNS的记录,查看域名解析是否正常,在网络故障的时候用来诊断网络问题。
ip link show #查看网卡信息
mii-tool #用于查看、管理介质的网络接口的状态
ethtool #用于查询和设置网卡配置
netstat -tupl #用于显示TCP/UDP的状态信息tcpdump tcp port 80
查看进程状态
Top 动态查看进程
Ps aux
Ps -ef
jps
linux 三剑客
grep 、sed、awk被称为linux中的"三剑客"。
grep 更适合单纯的查找或匹配文本
sed 更适合编辑匹配到的文本
awk 更适合格式化文本,对文本进行较复杂格式处理
系统三剑客-grep
正则查找 grep -v "^#|^$" 不显示注释行和空行
- a 或 -- text : 不要忽略二进制的数据。
- A<显示行数> 或 -- after-context=<显示行数> : 除了显示符合范本样式的那一列之外,并显示该行之后的内容。
- b 或 -- byte-offset : 在显示符合样式的那一行之前,标示出该行第一个字符的编号。
- B<显示行数> 或 -- before-context=<显示行数> : 除了显示符合样式的那一行之外,并显示该行之前的内容。
- c 或 -- count : 计算符合样式的列数。
- C<显示行数> 或 -- context=<显示行数>或- <显示行数> : 除了显示符合样式的那一行之外,并显示该行之前后的内容。
- d <动作> 或 -- directories=<动作> : 当指定要查找的是目录而非文件时,必须使用这项参数,否则grep指令将回报信息并停止动作。
- e<范本样式> 或 -- regexp=<范本样式> : 指定字符串做为查找文件内容的样式。
- E 或 -- extended-regexp : 将样式为延伸的正则表达式来使用。
- f<规则文件> 或 -- file=<规则文件> : 指定规则文件,其内容含有一个或多个规则样式,让grep查找符合规则条件的文件内容,格式为每行一个规则样式。
- F 或 -- fixed-regexp : 将样式视为固定字符串的列表。
- G 或 -- basic-regexp : 将样式视为普通的表示法来使用。
- h 或 -- no-filename : 在显示符合样式的那一行之前,不标示该行所属的文件名称。
- H 或 -- with-filename : 在显示符合样式的那一行之前,表示该行所属的文件名称。
- i 或 -- ignore-case : 忽略字符大小写的差别。
- l 或 -- file-with-matches : 列出文件内容符合指定的样式的文件名称。
- L 或 -- files-without-match : 列出文件内容不符合指定的样式的文件名称。
- n 或 -- line-number : 在显示符合样式的那一行之前,标示出该行的列数编号。
- o 或 -- only-matching : 只显示匹配PATTERN 部分。
- q 或 -- quiet或-- silent : 不显示任何信息。
- r 或 -- recursive : 此参数的效果和指定"-d recurse" 参数相同。
- s 或 -- no-messages : 不显示错误信息。
- v 或 -- invert-match : 显示不包含匹配文本的所有行。
- V 或 -- version : 显示版本信息。
- w 或 -- word-regexp : 只显示全字符合的列。
- x -- line-regexp : 只显示全列符合的列。
- y : 此参数的效果和指定"-i" 参数相同。
系统三剑客-sed
sed 字符流的编辑器,处理每行的字符
全屏编辑工具 vi/vim
cat >>xxx<<EOF...EOF
编辑脚本:修改文件内容时
1)擅长对行进行操作处理 (增删改查)
2)擅长将文件的内容信息进行修改调整/删除
脚本幂等性!!!!
vim network.sh
#!/bin/bash
#修改ip地址,把1.2修改成1.3
sed -i "s#192.168.1.2#192..168.1.3#g" /etc/sysconfig/network-scripts/ifcfg-eth0
sed -i "s#(.*)0(.*)#\110\2#g" /etc/sysconfig/network-scripts/ifcfg-eth0
#重启网络
systemctl restart network
#获取主机ip地址
echo "服务器地址修改后IP地址:$(hostname -I)" >> /tmp/tip.txt
sed [OPTION]... {script-only-if-no-other-script} [input-file]...
命令 参数 条件-处理 文件
2.sed的工作原理
是一种在线编辑器,它一次处理一行内容。处理时,把当前处理的行存储在临时缓
冲区中,称为“模式空间”(pattern space),接着用sed命令处理缓冲区中的内容,处理
完成后,把缓冲区的内容送往屏幕。接着处理下一行,这样不断重复,直到文件末尾。文件
内容并没有改变,除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件;简化
对文件的反复操作
不加-i参数默认值是操作内存中的数据,不修改磁盘中的内容
sed命令实战
查 -n取消默认输出 (模式空间)
sed -n '3p' preson.txt 显示第三行并显示
sed -n '1p,3p' preson.txt 显示一行到三行
sed -n '1p;3p' preson.txt 显示一行和三行
sed -n '/odlboy/p' preson.txt 查看含有odlboy并输出p
sed -n '/odlboy/,/alx/p' preson.txt 查看含有odlboy到alx
添加
sed -i '1i100,oldg,CEO' preson.txt 在首行插入
sed -i '$a100,oldg,CEO' preson.txt 在文件的末尾添加
sed -e '/odlboy/iodlg -e /alx/aalxboy' 多个操作指令,在odlboy前插入odlg,在alx后添加alxboy
sed '$a100\n102' 添加多行信息
删除
sed -i '3d' preson.txt 删除第三行
sed -n '^$/!p' 取消空行显示 '!取反'
修改信息
sed 's#原有内容#修改后内容#g' preson.txt
sed 's/原有内容/修改后内容/g' preson.txt
sed 's#()#\n#g' preson.txt 后项引用后项,\n代表第几个小括号
sed -i.bak 's/原有内容/修改后内容/g' preson.txt 修改前进行备份
&调用匹配的信息ls file*.txt
ls file*.txt |sed -r 's#(.*)txt#mv & \1jpg#gp'|bash
取ip地址
ip a s eth0 |sed -rn '3s#^.*net(.*)/24.*#\1#gp'
批量专业重命名
rename .jpg .txt file*.jpg
命令 需要修改的 修改后的 原来的
touch file{1..10}.txt 批量创建
p print 输出信息
i insert 插入信息在指定行
a append 附加信息在指定行
d delete 删除指定行
s substitute 替换 s###g(g全局替换)
c 替换修改一整行的内容
总结:sed参数信息
-n 取消默认输出
-r 识别扩展正则
-i 将内存中的 信息覆盖到磁盘中
-e 识别sed命令多个操作指令
说明:-ni同时用,会把文件清空
- e<script>或-- expression=<script> 以选项中指定的script来处理输入的文本文件。
- f<script文件>或-- file=<script文件> 以选项中指定的script文件来处理输入的文本文件。
- i直接修改文件内容(危险操作)
- h或-- help 显示帮助。
- n或-- quiet或-- silent 仅显示script处理后的结果。
- V或-- version 显示版本信息。
a :新增, a 的后面可以接字串,而这些字串会在新的一行出现( 目前的下一行) ~
c :取代, c 的后面可以接字串,这些字串可以取代 n1, n2 之间的行!
d :删除,因为是删除啊,所以 d 后面通常不接任何咚咚;
i :插入, i 的后面可以接字串,而这些字串会在新的一行出现( 目前的上一行) ;
p :打印,亦即将某个选择的数据印出。通常 p 会与参数 sed - n 一起运行~
s :取代,可以直接进行取代的工作哩!通常这个 s 的动作可以搭配正规表示法!例如 1, 20s/old/new/g 就是啦!
系统三剑客-awk
作用特点:1.排除信息 2.查询信息 3.统计信息 4.替换信息
语法格式:awk '{pattern + action}' {filenames}
命令 参数 模式-动作 文件
查
例子: zhang san 1234567 :100:160:170
awk 'NR==2,NR==4' test.txt 查看第二行到第四行
awk 'NR==2;NR==4' test.txt 查看第二行和第四行
awk '/odlboy/' test.txt 按字符查找
awk '/odlboy/{print $1,$3}' test.txt 显示第一列和第三列信息
awk '/odlboy/{print $NF}' test.txt 倒数第一列(NF-1倒数第二列)
awk -F ':'{print $2} test.txt 自定义分割,以冒号为分割
awk -F ":" '/^zhang/{print $3}' test.txt :100:160:170 取160
awk -F "[ :]+" '/^zhang/{print $1,$2,$(NF-1)}' test.txt 匹配 zhang san 160
awk '$3~/^123/{print}' test.txt 匹配第三列以123开头的$
awk '$3~/7$|5$/{print}' test.txt 匹配第三列5或7结尾的(5|7)$或[57]$
gsub(/需要替换的信息/,替换成什么,对哪列进行操作) 替换
awk '$3~/^123/{gsub(/:/,"$",$N)F;print}' test.txt $100$160$170 把:替换成$
awk高级功能
a)对日志信息进行统计计数,上传下载 消耗网络流量
b)数组进行排序分析
普通模式
NR==2
NR>=2
NR<=2
特殊模式
BEGIN{} 在awk执行前干什么
awk BEGIN{FS=":"}{print} == awk -F ":" == -vFS=":"
awk 'BEGIN{print "姓","名","qq","捐款记录"}$2~/[sw]/{print}' test.txt |column -t
column -t 表格格式输出
END{} 在awk结束后干什么
awk "/^#/{i=i+1;print i}" /etc/yum.conf 统计井号开头的行数
awk '$NF~/bash/{i=i+1}END{print i}' /etc/passwd 统计普通用户的数量
sum=sum+$1 第一列求和
awk -F ':' '$2~/[sw]/{sum=sum+$4}END{print sum}' test.txt
- F fs or -- field-separator fs
指定输入文件折分隔符,fs是一个字符串或者是一个正则表达式,如- F:。
- v var =value or -- asign var =value
赋值一个用户定义变量。
- f scripfile or -- file scriptfile
从脚本文件中读取awk命令。
- mf nnn and - mr nnn
对nnn值设置内在限制,- mf选项限制分配给nnn的最大块数目;- mr选项限制记录的最大数目。这两个功能是Bell实验室版awk的扩展功能,在标准awk中不适用。
- W compact or -- compat, - W traditional or -- traditional
在兼容模式下运行awk。所以gawk的行为和标准的awk完全一样,所有的awk扩展都被忽略。
- W copyleft or -- copyleft, - W copyright or -- copyright
打印简短的版权信息。
- W help or -- help, - W usage or -- usage
打印全部awk选项和每个选项的简短说明。
- W lint or -- lint
打印不能向传统unix平台移植的结构的警告。
- W lint-old or -- lint-old
打印关于不能向传统unix平台移植的结构的警告。
- W posix
打开兼容模式。但有以下限制,不识别:/ x、函数关键字、func、换码序列以及当fs是一个空格时,将新行作为一个域分隔符;操作符* * 和* *= 不能代替^和^=;fflush无效。
- W re-interval or -- re-inerval
允许间隔正则表达式的使用,参考( grep中的Posix字符类) ,如括号表达式[ [ :alpha:] ] 。
- W source program-text or -- source program-text
使用program-text作为源代码,可与- f命令混用。
- W version or -- version
打印bug报告信息的版本。