常用命令-linux

wc 命令计数

在默认的情况下，wc将计算指定文件的行数、字数，以及字节数。使用的命令为：

 wc testfile           # testfile文件的统计信息  
3 92 598 testfile       # testfile文件的行数为3、单词数92、字节数598 wc testfile

wc -l xxx 统计行数

使用 统计有多少xxx 服务相关的进程

对压缩文件的操作

  1. 使用 zcat 查看压缩文件。
  2. 使用 zless / zmore 对压缩文件进行分页。
  3. 使用 zgrep / zegrep 在压缩文件中搜索。
  4. 使用 zdiff / zcmp 比较文件
  
  more less grep  
  less 命令的作用和 more 十分类似，都用来浏览文本文件中的内容，不同之处在于，使用 more 命令浏览文件内容时，只能不断向后翻看，而使用 less 命令浏览，既可以向后翻看，也可以向前翻看。
  
  zmore zless zgrep  
  组合使用  对压缩文件进行搜索 可能会查找到很多，可以结合zless 分页 
  zgrep 'start' probe.log_20230311155733.tar.gz | less
  

日志查看 https://www.cnblogs.com/codelogs/p/16410363.html

 查找ERROR日志，以及它的后10行
$ grep -A 10 ERROR app.log
查找ERROR日志，以及它的前10行
$ grep -B 10 ERROR app.log
 查找ERROR日志 以及前10行和后10行
$ grep -C 10 ERROR app.log


需要查看某个时间段的日志，比如凌晨2点15分系统出现报警，方法如下：
# 导出02:14到02:16分的日志
awk '/2022-06-24T02:14/,/2022-06-24T02:1[6-9]/' app.log > app0215.log

# 使用sed也是可以的
sed -n '/2022-06-24T02:14/,/2022-06-24T02:1[6-9]/p' app.log > app0215.log

网络相关命令

测试端口联通性

telnet ip port
说明：ip：是测试主机的ip地址  port：是端口，比如80

ssh username@ip  port  

ssh -v -p port username@ip
说明：
-v 调试模式(会打印日志).
-p 指定端口
username:远程主机的登录用户
ip:远程主机

curl ip:port
curl -kv ip:port
wget ip:port  wget名称的由来是“World Wide Web”与“get”的结合 

awk 命令

介绍

awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。

awk有3个不同版本: awk、nawk和gawk，未作特别说明，一般指gawk，gawk 是 AWK 的 GNU 版本。

awk其名称得自于它的创始人 Alfred Aho 、Peter Weinberger 和 Brian Kernighan 姓氏的首个字母。实际上 AWK 的确拥有自己的语言： AWK 程序设计语言 ， 三位创建者已将它正式定义为“样式扫描和处理语言”。它允许您创建简短的程序，这些程序读取输入文件、为数据排序、处理数据、对输入执行计算以及生成报表，还有无数其他的功能

使用方法

awk '{pattern + action}' {filenames}
pattern 表示 AWK 在数据中查找的内容，而 action 是在找到匹配内容时所执行的一系列命令。花括号（{}）不需要在程序中始终出现，但它们用于根据特定的模式对一系列指令进行分组。 pattern就是要表示的正则表达式，用斜杠括起来。

工作流程

简单来说awk就是把文件逐行的读入，然后将每行记录按指定的域分隔符划分域，填充域（默认以空格为分隔符），切开的部分再进行各种分析处理。每行都执行对应的action动作，直到结束。$0则表示所有域(郑浩记录),$1表示第一个域,$n表示第n个域。

实例

awk + action

[root@www ~]# last -n 5 <==仅取出前五行
root     pts/1   192.168.1.100  Tue Feb 10 11:21   still logged in
root     pts/1   192.168.1.100  Tue Feb 10 00:46 - 02:28  (01:41)
root     pts/1   192.168.1.100  Mon Feb  9 11:41 - 18:30  (06:48)
dmtsai   pts/1   192.168.1.100  Mon Feb  9 11:41 - 11:41  (00:00)
root     tty1                   Fri Sep  5 14:09 - 14:10  (00:01)

如果只是显示最近登录的5个帐号
#last -n 5 | awk  '{print $1}'
root
root
root
dmtsai
root

awk工作流程是这样的：读入有'\n'换行符分割的一条记录，然后将记录按指定的域分隔符划分域，填充域，$0则表示所有域,$1表示第一个域,$n表示第n个域。默认域分隔符是"空白键" 或 "[tab]键",所以$1表示登录用户，$3表示登录用户ip,以此类推。 


默认域分隔符是"空白键" 或 "[tab]键"  也可以指定分割符
awk [-F  field-separator]  'commands'  input-file(s)

awk + pattern

#awk -F: '/root/' /etc/passwd
root:x:0:0:root:/root:/bin/bash
 
这种是pattern的使用示例，匹配了pattern(这里是root)的行才会执行action(没有指定action，默认输出每行的内容)。

搜索支持正则，例如找root开头的: awk -F: '/^root/' /etc/passwd

awk 内置变量

ARGC               命令行参数个数
ARGV               命令行参数排列
ENVIRON            支持队列中系统环境变量的使用
FILENAME           awk浏览的文件名
FNR                浏览文件的记录数
FS                 设置输入域分隔符，等价于命令行 -F选项
NF                 浏览记录的域的个数
NR                 已读的记录数
OFS                输出域分隔符
ORS                输出记录分隔符
RS                 控制记录分隔符

print和printf

awk中同时提供了print和printf两种打印输出的函数。

其中print函数的参数可以是变量、数值或者字符串。字符串必须用双引号引用，参数用逗号分隔。如果没有逗号，参数就串联在一起而无法区分。这里，逗号的作用与输出文件的分隔符的作用是一样的，只是后者是空格而已。

printf函数，其用法和c语言中printf基本相似,可以格式化字符串,输出复杂时，printf更加好用，代码更易懂。

#awk  -F ':'  '{print "filename:" FILENAME ",linenumber:" NR ",columns:" NF ",linecontent:"$0}' /etc/passwd
filename:/etc/passwd,linenumber:1,columns:7,linecontent:root:x:0:0:root:/root:/bin/bash
filename:/etc/passwd,linenumber:2,columns:7,linecontent:daemon:x:1:1:daemon:/usr/sbin:/bin/sh
filename:/etc/passwd,linenumber:3,columns:7,linecontent:bin:x:2:2:bin:/bin:/bin/sh
filename:/etc/passwd,linenumber:4,columns:7,linecontent:sys:x:3:3:sys:/dev:/bin/sh


 awk  -F ':'  '{printf("filename:%10s,linenumber:%s,columns:%s,linecontent:%s\n",FILENAME,NR,NF,$0)}' /etc/passwd

查看系统资源使用

df -hl