2024全网最全面及最新且最为详细的网络安全技巧 十一：应急响应系列之Windows，Linux及Web日志分析入侵排查；（2）[含2024护网行动各厂商面试精题及全网查杀工具整合]

于 2024-08-28 23:30:56 发布
阅读量386 收藏 8
点赞数 11
分类专栏： 24网络安全-LJS 文章标签： web安全 windows linux bash 网络安全 安全威胁分析 系统安全
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_74796680/article/details/141617211
版权

  • 日志分析篇

  • 11.6 Windows日志分析

  • 11.6.1 Windows事件日志简介

  • Windows系统日志是记录系统中硬件、软件和系统问题的信息，同时还可以监视系统中发生的事件。用户可以通过它来检查错误发生的原因，或者寻找受到攻击时攻击者留下的痕迹。
  • Windows主要有以下三类日志记录系统事件：应用程序日志、系统日志和安全日志。

  • 系统日志

  • 记录操作系统组件产生的事件，主要包括驱动程序、系统组件和应用软件的崩溃以及数据丢失错误等。系统日志中记录的时间类型由Windows NT/2000操作系统预先定义。

默认位置： %SystemRoot%\System32\Winevt\Logs\System.evtx

  • 应用程序日志

  • 包含由应用程序或系统程序记录的事件，主要记录程序运行方面的事件，例如数据库程序可以在应用程序日志中记录文件错误，程序开发人员可以自行决定监视哪些事件。如果某个应用程序出现崩溃情况，那么我们可以从程序事件日志中找到相应的记录，也许会有助于你解决问题。 

默认位置：%SystemRoot%\System32\Winevt\Logs\Application.evtx

  • 安全日志

  • 记录系统的安全审计事件，包含各种类型的登录日志、对象访问日志、进程追踪日志、特权使用、帐号管理、策略变更、系统事件。安全日志也是调查取证中最常用到的日志。默认设置下，安全性日志是关闭的，管理员可以使用组策略来启动安全性日志，或者在注册表中设置审核策略，以便当安全性日志满后使系统停止响应。

默认位置：%SystemRoot%\System32\Winevt\Logs\Security.evtx
  • 系统和应用程序日志存储着故障排除信息，对于系统管理员更为有用。 安全日志记录着事件审计信息，包括用户验证（登录、远程访问等）和特定用户在认证后对系统做了什么，对于调查人员而言，更有帮助。

  • 11.6.2 审核策略与事件查看器

  • Windows Server 2008 R2 系统的审核功能在默认状态下并没有启用 ，建议开启审核策略，若日后系统出现故障、安全事故则可以查看系统的日志文件，排除故障，追查入侵者的信息等。
  • PS：默认状态下，也会记录一些简单的日志，日志默认大小20M
  • 设置1：开始 → 管理工具 → 本地安全策略 → 本地策略 → 审核策略，参考配置操作：
  • 设置2：设置合理的日志属性，即日志最大大小、事件覆盖阀值等：

  • 查看系统日志方法：

  • 在“开始”菜单上，依次指向“所有程序”、“管理工具”，然后单击“事件查看器”

  • 按 "Window+R"，输入 ”eventvwr.msc“ 也可以直接进入“事件查看器”

  • 11.6.3 事件日志分析

  • 对于Windows事件日志分析，不同的EVENT ID代表了不同的意义，摘录一些常见的安全事件的说明：
    • 事件ID
    • 说明
    • 4624
    • 登录成功
    • 4625
    • 登录失败
    • 4634
    • 注销成功
    • 4647
    • 用户启动的注销
    • 4672
    • 使用超级用户（如管理员）进行登录
    • 4720
    • 创建用户
  • 每个成功登录的事件都会标记一个登录类型，不同登录类型代表不同的方式：
    • 登录类型
    • 描述
    • 说明
    • 2
    • 交互式登录（Interactive）
    • 用户在本地进行登录。
    • 3
    • 网络（Network）
    • 最常见的情况就是连接到共享文件夹或共享打印机时。
    • 4
    • 批处理（Batch）
    • 通常表明某计划任务启动。
    • 5
    • 服务（Service）
    • 每种服务都被配置在某个特定的用户账号下运行。
    • 6
    • 解锁（Unlock）
    • 屏保解锁。
    • 7
    • 网络明文（NetworkCleartext）
    • 登录的密码在网络上是通过明文传输的，如FTP。
    • 8
    • 网络明文（NetworkCleartext）
    • 使用带/Netonly参数的RUNAS命令运行一个程序。
    • 9
    • 远程交互，（RemoteInteractive）
    • 通过终端服务、远程桌面或远程协助访问计算机。
    • 10
    • 缓存交互（CachedInteractive
    • 通过终端服务、远程桌面或远程协助访问计算机。
  • 关于更多EVENT ID，详见微软官方网站上找到了“Windows 7 和 Windows Server 2008 中的安全事件的说明”。
  • 举例1：可以利用eventlog事件来查看系统账号登录情况：

  • 在“开始”菜单上，依次指向“所有程序”、“管理工具”，然后单击“事件查看器”；

  • 在事件查看器中，单击“安全”，查看安全日志；

  • 在安全日志右侧操作中，点击“筛选当前日志”，输入事件ID进行筛选。

    4624 --登录成功 4625 --登录失败 4634 -- 注销成功 4647 -- 用户启动的注销 4672 -- 使用超级用户（如管理员）进行登录

  • 我们输入事件ID：4625进行日志筛选，发现事件ID：4625，事件数175904，即用户登录失败了175904次，那么这台服务器管理员账号可能遭遇了暴力猜解。
  • 举例2：可以利用eventlog事件来查看计算机开关机的记录：（步骤同上）
  • 1、在“开始”菜单上，依次指向“所有程序”、“管理工具”，然后单击“事件查看器”；
  • 2、在事件查看器中，单击“系统”，查看系统日志；
  • 3、在系统日志右侧操作中，点击“筛选当前日志”，输入事件ID进行筛选。
  • 其中事件ID 6006 ID6005、 ID 6009就表示不同状态的机器的情况（开关机）。 6005 信息 EventLog 事件日志服务已启动。(开机) 6006 信息 EventLog 事件日志服务已停止。(关机) 6009 信息 EventLog 按ctrl、alt、delete键(非正常)关机
  • 我们输入事件ID：6005-6006进行日志筛选，发现了两条在2024/8/24:10:51左右的记录，也就是我刚才对系统进行重启的时间。
  •  

  • 11.6.4 日志分析工具

  • Log Parser

  • Log Parser（是微软公司出品的日志分析工具，它功能强大，使用简单，可以分析基于文本的日志文件、XML 文件、CSV（逗号分隔符）文件，以及操作系统的事件日志、注册表、文件系统、Active Directory。它可以像使用 SQL 语句一样查询分析这些数据，甚至可以把分析结果以各种图表的形式展现出来。
  • Log Parser 2.2下载地址：https://www.microsoft.com/en-us/download/details.aspx?id=24659
  • Log Parser 使用示例：Log Parser Rocks! More than 50 Examples! | LichtenBytes

  • 基本查询结构

  • Logparser.exe –i:EVT –o:DATAGRID "SELECT * FROM c:\xx.evtx"

  • 使用Log Parser分析日志

  • 1、查询登录成功的事件
  • 登录成功的所有事件
LogParser.exe -i:EVT –o:DATAGRID  "SELECT *  FROM c:\Security.evtx where EventID=4624"

指定登录时间范围的事件：
LogParser.exe -i:EVT –o:DATAGRID  "SELECT *  FROM c:\Security.evtx where TimeGenerated>'2018-06-19 23:32:11' and TimeGenerated<'2018-06-20 23:34:00' and EventID=4624"

提取登录成功的用户名和IP：
LogParser.exe -i:EVT –o:DATAGRID  "SELECT EXTRACT_TOKEN(Message,13,' ') as EventType,TimeGenerated as LoginTime,EXTRACT_TOKEN(Strings,5,'|') as Username,EXTRACT_TOKEN(Message,38,' ') as Loginip FROM c:\Security.evtx where EventID=4624"
  • 2、查询登录失败的事件
  • 登录失败的所有事件：
LogParser.exe -i:EVT –o:DATAGRID  "SELECT *  FROM c:\Security.evtx where EventID=4625"

提取登录失败用户名进行聚合统计：
LogParser.exe  -i:EVT "SELECT  EXTRACT_TOKEN(Message,13,' ')  as EventType,EXTRACT_TOKEN(Message,19,' ') as user,count(EXTRACT_TOKEN(Message,19,' ')) as Times,EXTRACT_TOKEN(Message,39,' ') as Loginip FROM c:\Security.evtx where EventID=4625 GROUP BY Message"
  • 3、系统历史开关机记录：
  • LogParser.exe -i:EVT –o:DATAGRID  "SELECT TimeGenerated,EventID,Message FROM c:\System.evtx where EventID=6005 or EventID=6006"

  • LogParser Lizard

  • 对于GUI环境的Log Parser Lizard，其特点是比较易于使用，甚至不需要记忆繁琐的命令，只需要做好设置，写好基本的SQL语句，就可以直观的得到结果。
  • 下载地址：Log Parser Lizard: Advanced SQL Analysis for Log Files
  • 依赖包：Microsoft .NET Framework 4 .5
  • 下载地址：https://www.microsoft.com/en-us/download/details.aspx?id=42642

  • Event Log Explorer

  • Event Log Explorer是一款非常好用的Windows日志分析工具。可用于查看，监视和分析跟事件记录，包括安全，系统，应用程序和其他微软Windows 的记录被记载的事件，其强大的过滤功能可以快速的过滤出有价值的信息。
  • 下载地址：Event Log Explorer - Download
  • 参考链接：
  • Windows日志分析 第三十一期 取证实战篇-Windows日志分析

  • 11.7 Linux日志分析

  • 11.7.1 前言

  • Linux系统拥有非常灵活和强大的日志功能，可以保存几乎所有的操作记录，并可以从中检索出我们需要的信息。 本文简介一下Linux系统日志及日志分析技巧。

  • 11.8.1 日志简介

  • 日志默认存放位置：/var/log/

  • 查看日志配置情况：more /etc/rsyslog.conf

  • 日志文件
  • 说明
  • /var/log/cron
  • 记录了系统定时任务相关的日志
  • /var/log/cups
  • 记录打印信息的日志
  • /var/log/dmesg
  • 记录了系统在开机时内核自检的信息，也可以使用dmesg命令直接查看内核自检信息
  • var/log/mailog
  • 记录邮件信息
  • /var/log/message
  • 记录系统重要信息的日志。这个日志文件中会记录Linux系统的绝大多数重要信息，如果系统出现问题时，首先要检查的就应该是这个日志文件
  • /var/log/btmp
  • 记录错误登录日志，这个文件是二进制文件，不能直接vi查看，而要使用lastb命令查看
  • var/log/lastlog
  • 记录系统中所有用户最后一次登录时间的日志，这个文件是二进制文件，不能直接vi，而要使用lastlog命令查看
  • /var/log/wtmp
  • 永久记录所有用户的登录、注销信息，同时记录系统的启动、重启、关机事件。同样这个文件也是一个二进制文件，不能直接vi，而需要使用last命令来查看
  • /var/log/utmp
  • 记录当前已经登录的用户信息，这个文件会随着用户的登录和注销不断变化，只记录当前登录用户的信息。同样这个文件不能直接vi，而要使用w,who,users等命令来查询
  • /var/log/secure
  • 记录验证和授权方面的信息，只要涉及账号和密码的程序都会记录，比如SSH登录，su切换用户，sudo授权，甚至添加用户和修改用户密码都会记录在这个日志文件中

  • 比较重要的几个日志：

  • 登录失败记录：
  • /var/log/btmp //lastb
  • 最后一次登录：
  • /var/log/lastlog //lastlog
  • 登录成功记录:
  •  /var/log/wtmp //last
  • 登录日志记录：
  • /var/log/secure
  • 目前登录用户信息：
  • /var/run/utmp //w、who、users
  • 历史命令记录：history
  • ​ 仅清理当前用户：
  •  history -c

  •  11.9.1日志分析技巧

  •  A、常用的shell命令

  • Linux下常用的shell命令如：find、grep 、egrep、awk、sed
  • 小技巧：
  • 1、grep显示前后几行信息:
  • 	标准unix/linux下的grep通过下面參数控制上下文：
​	grep -C 5 foo file 显示file文件里匹配foo字串那行以及上下5行
​	grep -B 5 foo file 显示foo及前5行
​	grep -A 5 foo file 显示foo及后5行
​	查看grep版本号的方法是
​	grep -V
  • 2、grep 查找含有某字符串的所有文件
  • 	grep -rn "hello,world!" 
	* : 表示当前目录所有文件，也可以是某个文件名
	-r 是递归查找
	-n 是显示行号
	-R 查找所有文件包含子目录
	-i 忽略大小写
  • 3、如何显示一个文件的某几行：
  • 	cat input_file | tail -n +1000 | head -n 2000
	#从第1000行开始，显示2000行。即显示1000~2999行
  • 4、在目录/etc中查找文件init
  • find /etc -name init
  • 5、只是显示/etc/passwd的账户
  • `cat /etc/passwd |awk  -F ':'  '{print $1}'`  
//awk -F指定域分隔符为':'，将记录按指定的域分隔符划分域，填充域，​$0则表示所有域,$1表示第一个域,​$n表示第n个域。
  • 6.删除历史操作记录，只保留前153行
  • sed -i '153,$d' .bash_history

  • B、日志分析技巧

  • 1、/var/log/secure
  • 1、定位有多少IP在爆破主机的root帐号：    
grep "Failed password for root" /var/log/secure | awk '{print $11}' | sort | uniq -c | sort -nr | more

定位有哪些IP在爆破：
grep "Failed password" /var/log/secure|grep -E -o "(25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)\.(25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)\.(25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)\.(25[0-5]|2[0-4][0-9]|[01]?[0-9][0-9]?)"|uniq -c

爆破用户名字典是什么？
 grep "Failed password" /var/log/secure|perl -e 'while($_=<>){ /for(.*?) from/; print "$1\n";}'|uniq -c|sort -nr
 
2、登录成功的IP有哪些： 	
grep "Accepted " /var/log/secure | awk '{print $11}' | sort | uniq -c | sort -nr | more

登录成功的日期、用户名、IP：
grep "Accepted " /var/log/secure | awk '{print $1,$2,$3,$9,$11}' 

3、增加一个用户kali日志：
Jul 10 00:12:15 localhost useradd[2382]: new group: name=kali, GID=1001
Jul 10 00:12:15 localhost useradd[2382]: new user: name=kali, UID=1001, GID=1001, home=/home/kali
, shell=/bin/bash
Jul 10 00:12:58 localhost passwd: pam_unix(passwd:chauthtok): password changed for kali
#grep "useradd" /var/log/secure 

4、删除用户kali日志：
Jul 10 00:14:17 localhost userdel[2393]: delete user 'kali'
Jul 10 00:14:17 localhost userdel[2393]: removed group 'kali' owned by 'kali'
Jul 10 00:14:17 localhost userdel[2393]: removed shadow group 'kali' owned by 'kali'
# grep "userdel" /var/log/secure

5、su切换用户：
Jul 10 00:38:13 localhost su: pam_unix(su-l:session): session opened for user good by root(uid=0)

sudo授权执行:
sudo -l
Jul 10 00:43:09 localhost sudo:    good : TTY=pts/4 ; PWD=/home/good ; USER=root ; COMMAND=/sbin/shutdown -r now
  • 2、/var/log/yum.log
  • 软件安装升级卸载日志：
  • yum install gcc

[root@bogon ~]# more /var/log/yum.log

Jul 10 00:18:23 Updated: cpp-4.8.5-28.el7_5.1.x86_64
Jul 10 00:18:24 Updated: libgcc-4.8.5-28.el7_5.1.x86_64
Jul 10 00:18:24 Updated: libgomp-4.8.5-28.el7_5.1.x86_64
Jul 10 00:18:28 Updated: gcc-4.8.5-28.el7_5.1.x86_64
Jul 10 00:18:28 Updated: libgcc-4.8.5-28.el7_5.1.i686

  • 11.8 Web日志分析

  • 11.8.1 Web日志

  • Web访问日志记录了Web服务器接收处理请求及运行时错误等各种原始信息。通过对WEB日志进行的安全分析，不仅可以帮助我们定位攻击者，还可以帮助我们还原攻击路径，找到网站存在的安全漏洞并进行修复。
  • 我们来看一条Apache的访问日志：
  • `127.0.0.1 - - [11/Jun/2018:12:47:22 +0800] "GET /login.html HTTP/1.1" 200 786 "-" "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/66.0.3359.139 Safari/537.36"`
  • 通过这条Web访问日志，我们可以清楚的得知用户在什么IP、什么时间、用什么操作系统、什么浏览器的情况下访问了你网站的哪个页面，是否访问成功。
  • 本文通过介绍Web日志安全分析时的思路和常用的一些技巧。

  • 11.8.2 日志分析技巧

  • 在对WEB日志进行安全分析时，一般可以按照两种思路展开，逐步深入，还原整个攻击过程。
  • 第一种：确定入侵的时间范围
  • 以此为线索，查找这个时间范围内可疑的日志，进一步排查，最终确定攻击者，还原攻击过程。
  • 第二种：攻击者在入侵网站后，通常会留下后门维持权限，以方便再次访问，我们可以找到该文件，并以此为线索来展开分析。
  • 常用分析工具：
  • Window下，推荐用 EmEditor 进行日志分析，支持大文本，搜索效率还不错。
  • Linux下，使用Shell命令组合查询分析。
  • Shell+Linux命令实现日志分析，一般结合grep、awk等命令等实现了几个常用的日志分析统计技巧。
  • Apache日志分析技巧：
  • 1、列出当天访问次数最多的IP命令：
cut -d- -f 1 log_file|uniq -c | sort -rn | head -20

2、查看当天有多少个IP访问：
awk '{print $1}' log_file|sort|uniq|wc -l

3、查看某一个页面被访问的次数：
grep "/index.php" log_file | wc -l

4、查看每一个IP访问了多少个页面：
awk '{++S[$1]} END {for (a in S) print a,S[a]}' log_file

5、将每个IP访问的页面数进行从小到大排序：
awk '{++S[$1]} END {for (a in S) print S[a],a}' log_file | sort -n

6、查看某一个IP访问了哪些页面：
grep ^111.111.111.111 log_file| awk '{print $1,$7}'

7、去掉搜索引擎统计当天的页面：
awk '{print $12,$1}' log_file | grep ^\"Mozilla | awk '{print $2}' |sort | uniq | wc -l

8、查看2018年6月21日14时这一个小时内有多少IP访问:
awk '{print $4,$1}' log_file | grep 21/Jun/2018:14 | awk '{print $2}'| sort | uniq | wc -l

  • 11.8.3 日志分析举例

  • Web日志分析实例：通过nginx代理转发到内网某服务器，内网服务器某站点目录下被上传了多个图片木马，虽然II7下不能解析，但还是想找出谁通过什么路径上传的。
  • 在这里，我们遇到了一个问题：由于设置了代理转发，只记录了代理服务器的ip，并没有记录访问者IP？这时候，如何去识别不同的访问者和攻击源呢？
  • 这是管理员日志配置不当的问题，但好在我们可以通过浏览器指纹来定位不同的访问来源，还原攻击路径。

  • 1、定位攻击源

  • 首先访问图片木马的记录，只找到了一条，由于所有访问日志只记录了代理IP，并不能通过IP来还原攻击路径，这时候，可以利用浏览器指纹来定位。
  • 浏览器指纹：
  • `Mozilla/4.0+(compatible;+MSIE+7.0;+Windows+NT+6.1;+WOW64;+Trident/7.0;+SLCC2;+.NET+CLR+2.0.50727;+.NET+CLR+3.5.30729;+.NET+CLR+3.0.30729;+.NET4.0C;+.NET4.0E)`

  • 2、搜索相关日志记录

  • 通过筛选与该浏览器指纹有关的日志记录，可以清晰地看到攻击者的攻击路径。

  • 3、对找到的访问日志进行解读

  • 攻击者大致的访问路径如下：
  • A、攻击者访问首页和登录页
B、攻击者访问MsgSjlb.aspx和MsgSebd.aspx
C、攻击者访问Xzuser.aspx
D、攻击者多次POST（怀疑通过这个页面上传模块缺陷）
E、攻击者访问了图片木马

//打开网站，访问Xzuser.aspx，确认攻击者通过该页面的进行文件上传了图片木马，

同时，发现网站了存在越权访问漏洞，攻击者访问特定URL，无需登录即可进入后台界面。

通过日志分析找到网站的漏洞位置并进行修复。

  • 11.8.4 日志统计分析技巧

  • 统计爬虫：

  • grep -E 'Googlebot|Baiduspider'  /www/logs/access.2019-02-23.log | awk '{ print $1 }' | sort | uniq

# 从日志文件中提取包含 "Googlebot" 或 "Baiduspider" 的行
grep -E 'Googlebot|Baiduspider' /www/logs/access.2019-02-23.log | 

# 从这些行中提取第一个字段 (通常是 IP 地址)
awk '{ print $1 }' | 

# 对提取出的 IP 地址进行排序
sort | 

# 去除重复的 IP 地址，保留唯一的 IP
uniq

  • 统计浏览器：

  • cat /www/logs/access.2019-02-23.log | grep -v -E 'MSIE|Firefox|Chrome|Opera|Safari|Gecko|Maxthon' | sort | uniq -c | sort -r -n | head -n 100		



# 显示日志文件内容，并传递给管道的下一个命令
cat /www/logs/access.2019-02-23.log | 

# 排除包含指定浏览器标识的行
grep -v -E 'MSIE|Firefox|Chrome|Opera|Safari|Gecko|Maxthon' | 

# 对排除后的记录进行排序
sort | 

# 对排序后的记录进行去重，并统计每个唯一记录的出现次数
uniq -c | 

# 根据出现次数对结果进行降序排序
sort -r -n | 

# 输出出现次数最多的前100条记录
head -n 100

  • IP 统计：

  • grep '23/May/2019' /www/logs/access.2019-02-23.log | awk '{print $1}' | awk -F'.' '{print $1"."$2"."$3"."$4}' | sort | uniq -c | sort -r -n | head -n 10
   2206 219.136.134.13
   1497 182.34.15.248
   1431 211.140.143.100
   1431 119.145.149.106
   1427 61.183.15.179
   1427 218.6.8.189
   1422 124.232.150.171
   1421 106.187.47.224
   1420 61.160.220.252
   1418 114.80.201.18			


# 从日志文件中提取包含特定日期 (23/May/2019) 的所有行
grep '23/May/2019' /www/logs/access.2019-02-23.log | 

# 从这些行中提取第一个字段 (假设为 IP 地址)
awk '{print $1}' | 

# 将 IP 地址转换为网络前缀格式 (例如，192.168.1.1 转换为 192.168.1.0)
awk -F'.' '{print $1"."$2"."$3"."$4}' | 

# 对网络前缀格式的 IP 地址进行排序
sort | 

# 统计每个网络前缀的出现次数，并显示这些次数
uniq -c | 

# 按出现次数的降序对统计结果进行排序
sort -r -n | 

# 提取出现次数最多的前 10 个网络前缀及其出现次数
head -n 10

  • 统计网段：

  • cat /www/logs/access.2019-02-23.log | awk '{print $1}' | awk -F'.' '{print $1"."$2"."$3".0"}' | sort | uniq -c | sort -r -n | head -n 200	

# 显示日志文件的内容
cat /www/logs/access.2019-02-23.log | 

# 提取每一行的第一个字段 (假设为 IP 地址)
awk '{print $1}' | 

# 将 IP 地址转换为网络前缀格式 (例如，192.168.1.5 转换为 192.168.1.0)
awk -F'.' '{print $1"."$2"."$3".0"}' | 

# 对网络前缀格式的 IP 地址进行排序
sort | 

# 统计每个网络前缀的出现次数，并显示这些次数
uniq -c | 

# 按出现次数的降序对统计结果进行排序
sort -r -n | 

# 提取出现次数最多的前 200 个网络前缀及其出现次数
head -n 200

  • 统计域名：

  • cat  /www/logs/access.2019-02-23.log |awk '{print $2}'|sort|uniq -c|sort -rn|more	


# 显示日志文件内容，并传递给管道的下一个命令
cat /www/logs/access.2019-02-23.log | 

# 排除包含指定浏览器标识的行
grep -v -E 'MSIE|Firefox|Chrome|Opera|Safari|Gecko|Maxthon' | 

# 对排除后的记录进行排序
sort | 

# 对排序后的记录进行去重，并统计每个唯一记录的出现次数
uniq -c | 

# 根据出现次数对结果进行降序排序
sort -r -n | 

# 输出出现次数最多的前100条记录
head -n 100

  • HTTP Status：

  • cat  /www/logs/access.2019-02-23.log |awk '{print $9}'|sort|uniq -c|sort -rn|more
5056585 304
1125579 200
   7602 400
      5 301	



# 显示日志文件的内容
cat /www/logs/access.2019-02-23.log | 

# 提取每一行的第九个字段 (通常是 HTTP 响应状态码)
awk '{print $9}' | 

# 对提取出的状态码进行排序
sort | 

# 统计每个唯一状态码的出现次数，并显示这些次数
uniq -c | 

# 按出现次数的降序对统计结果进行排序
sort -rn | 

# 分页显示排序后的结果，便于查看
more

  • URL 统计：

  • cat  /www/logs/access.2019-02-23.log |awk '{print $7}'|sort|uniq -c|sort -rn|more			
#同统计网段

  • 文件流量统计：

  • cat /www/logs/access.2019-02-23.log |awk '{sum[$7]+=$10}END{for(i in sum){print sum[i],i}}'|sort -rn|more

grep ' 200 ' /www/logs/access.2019-02-23.log |awk '{sum[$7]+=$10}END{for(i in sum){print sum[i],i}}'|sort -rn|more			


#第一部分
# 显示日志文件的内容
cat /www/logs/access.2019-02-23.log | 

# 使用 awk 计算每个 URL 路径的总响应字节数，并打印结果
awk '{sum[$7]+=$10} END {for(i in sum) {print sum[i], i}}' | 

# 对计算结果按总响应字节数降序排序
sort -rn | 

# 分页显示排序后的结果，便于查看
more

#第二部分
# 从日志文件中过滤出状态码为 200 的行
grep ' 200 ' /www/logs/access.2019-02-23.log | 

# 使用 awk 计算每个 URL 路径的总响应字节数，并打印结果
awk '{sum[$7]+=$10} END {for(i in sum) {print sum[i], i}}' | 

# 对计算结果按总响应字节数降序排序
sort -rn | 

# 分页显示排序后的结果，便于查看
more

  • URL访问量统计：

  • cat /www/logs/access.2019-02-23.log | awk '{print $7}' | egrep '\?|&' | sort | uniq -c | sort -rn | more			

# 显示日志文件的内容并提取 URL 路径
cat /www/logs/access.2019-02-23.log | 

# 使用 awk 打印 URL 路径
awk '{print $7}' | 

# 使用 egrep 过滤出包含问号或与号的 URL 路径
egrep '\?|&' | 

# 对过滤后的 URL 路径进行排序
sort | 

# 统计每个 URL 路径的出现次数，并去重
uniq -c | 

# 对统计结果按出现次数降序排序
sort -rn | 

# 分页显示排序后的结果，以便逐页查看
more

  • 脚本运行速度：查出运行速度最慢的脚本

  • grep -v 0$ /www/logs/access.2019-02-23.log | awk -F '\" ' '{print $4" " $1}' web.log | awk '{print $1" "$8}' | sort -n -k 1 -r | uniq > /tmp/slow_url.txt			

# 从日志文件中排除结尾为0的行，并将结果传递给下一条命令
grep -v 0$ /www/logs/access.2019-02-23.log |

# 使用 awk 以双引号后的空格作为分隔符，提取第四列和第一列，格式化为"第四列 第一列"，并将结果输出到 web.log 文件
awk -F '\" ' '{print $4" " $1}' web.log |

# 使用 awk 从每行中提取第一列和第八列，格式化为"第一列 第八列"
awk '{print $1" "$8}' |

# 对提取后的数据按第一列（数字）进行降序排序
sort -n -k 1 -r |

# 对排序后的结果进行去重
uniq >

# 将最终的结果输出到临时文件 /tmp/slow_url.txt
/ tmp/slow_url.txt

  • IP, URL 抽取

  • tail -f /www/logs/access.2019-02-23.log | grep '/test.html' | awk '{print $1" "$7}'			

# 实时监控日志文件的新增内容
tail -f /www/logs/access.2019-02-23.log | 

# 过滤出包含 '/test.html' 的行
grep '/test.html' | 

# 使用 awk 提取每行的 IP 地址和 URL 路径
awk '{print $1" "$7}'
  • \tan \csc \sin

肾透侧视攻城狮
关注
  • 11
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
网络安全事件应急响应实战二
悦分享
09-14 1万+
当企业发生黑客入侵、系统崩溃或其它影响业务正常运行的安全事件时，急需第一时间进行处理，使企业的网络信息系统在最短时间内恢复正常工作，进一步查找入侵来源，还原入侵事故过程，同时给出解决方案与防范措施，为企业。新闻源网站一般权重较高，收录快，能够被搜索引擎优先收录，是黑灰产推广引流的必争之地，很容易成为被攻击的对象。短连接（short connnection）是相对于长连接而言的概念，指的是在数据传送过程中，只在需要发送数据时，才去建立一个连接，数据发送完成后，则断开此连接，即每次连接只完成一项业务的发送。
2024年信息安全管理与评估竞赛——网络安全应急响应案例①解题过程_受攻击的server服务器已整体打包成虚拟机文件保存
2401_84281638的博客
05-02 1005
A 集团的 WebServer 服务器被黑客入侵，该服务器的 Web 应用系统被上传恶意软件，系统文件被恶意软件破坏，您的团队需要帮助该公司追踪此网络攻击的来源，在服务器上进行全面的检查，包括日志信息、进程信息、系统文件、恶意文件等，从而分析黑客的攻击行为，14和残留的关键证据信息。服务器虚拟机受攻击的Server 服务器已整体打包成虚拟机文件保存，请选手自行导入分析。虚拟机用户名：root，密码：p@ssw0rd123，若题目中未明确规定，请使用默认配置。
2024全网最全面及最新且最为详细的网络安全技巧 十一：应急响应系列之Windows，Linux入侵排查（1）[含2024护网行动各厂商面试精题及全网查杀工具整合]
最新发布
weixin_74796680的博客
08-28 514
2024应急响应系列之Windows，Linux入侵排查（1）[含2024护网行动各厂商面试精题及常用查杀工具]
蓝队应急响应-Linux日志分析及常用命令总结
网络安全
07-12 849
玄机靶场地址：https://xj.edisec.net/第一章应急响应-Linux日志分析1.有多少IP在爆破主机ssh的root帐号，如果有多个使用","分割2.ssh爆破成功登陆的IP是多少，如果有多个使用","分割 3.爆破用户名字典是什么？如果有多个使用","分割 4.登陆成功的IP共爆破了多少次 5.黑客登陆主机后新建了一个后门用户，用户名是多少在Linux系统下，日志默认存...
网络安全----应急响应入侵排查
qq_51690690的博客
09-09 1207
一屋不扫何以扫天下?
最新全网最详细最基础的网络安全入门教程_csdn网络安全入门
2401_84301389的博客
05-02 639
img编辑反序列化漏洞RCE综合靶场实操项目内网渗透流量分析日志分析恶意代码分析应急响应实战训练。
网络安全应急响应(归纳)
2401_84264244的博客
04-29 642
net user：查看用户账户信息（看不到以$结尾的隐藏用户）；net userusername：查看用户名为username用户的详细信息；lusrmgr.msc：打开本地用户与组，可查看隐藏用户；打开计算机管理-本地用户与组可查看隐藏用户；wmic useraccount get name,sid：查看系统中的所有用户；注册表查看是否存在克隆账户：regedit打开注册表，选择HKEY_LOCAL_MACHHINE下的SAM选项，为该项添加允许父项的继承权限传播到该对象和所有子对象。
2024全国职业技能大赛-网络安全赛题解析总结②（超详细）_中间件服务安全加固vsftpd httpd bind(linux)
2401_84253089的博客
05-05 562
还有兄弟不知道网络安全面试可以提前刷题吗？费时一周整理的160+网络安全面试题，金九银十，做网络安全面试里的显眼包！王岚嵚工程师面试题（附答案），只能帮兄弟们到这儿了！如果你能答对70%，找一个安全工作，问题不大。对于有1-3年工作经验，想要跳槽的朋友来说，也是很好的温习资料！【完整版领取方式在文末！！内容实在太多，不一一截图了。
【通信安全CACE-管理类基础级】第8章 网络安全应急响应
qq_43681877的博客
07-04 1735
中国通信企业协会网络安全人员能力认证考试知识点大纲—管理类基础级，第8章 网络安全应急响应
2021护网日记（第二天）-攻防演练红、蓝方职责、linux 和 Windows 如何应急
渗透、攻防、CTF、编程
04-14 8442
来源：微信公众号Hacking黑白红 4月8日，阳光明媚，春风拂面 HW第一天，奋战（划水）12小时，处置7个预警，钉钉、微信一共建了12个群，开了6场腾讯会议，微信好友新增31人，最终6个为误报，还有1个疑似漏报。 这些都不重要，都不如“韩毅”的瓜来的凛冽。 事情经过是这样的，“韩毅”第一次出现在我的微信群是在4月6日（星期二），那天我正在去HW城市的路上，印象深刻。微信记录如下： “韩毅”同学4月6日（周二）15点，第一次出现在我的微信群，向红队发出...
图解支付-金融级密钥管理系统：构建支付系统的安全基石
2401_84252281的博客
04-29 983
上面写得有虚，但确实是指导思路，一个完备、安全的密钥管理系统需要达到上述要求。
阿里云主要产品及功能介绍，阿里云产品分为6大分类：云计算基础／安全／大数据／人工智能／企业应用／物联网
热门推荐
m0_58207718的博客
05-14 1万+
目录 云计算基础（Cloud Essentials）： 安全（Security）： 大数据（Data Technology）： 人工智能（AI）： 企业应用（Enterprise Applications）： 物联网（IOT）： 云计算基础（Cloud Essentials）： 云基础产品体系完整度全球领先，基础产品及功能持续投入建设，源源不断的通过新技术提高企业云上的计算、运维、开发和管理能力。...
2024年入职/转行网络安全，该如何规划？_网络安全职业规划
2401_85023531的博客
08-23 1311
前段时间，知名机构麦可思研究院发布了《2022年中国本科生就业报告》，其中详细列出近五年的本科绿牌专业，其中，信息安全位列第一。
网络安全（黑客）自学
白帽子凯哥聊黑客
08-22 1484
网络安全可以基于攻击和防御视角来分类，我们经常听到的 “红队”、“渗透测试” 等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。无论网络、Web、移动、桌面、云等哪个领域，都有攻与防两面性，例如 Web安全技术，既有 Web 渗透，也有 Web 防御技术（WAF）。作为一个合格的网络安全工程师，应该做到攻守兼备，毕竟知己知彼，才能百战百胜。
网络安全威胁2024年中报告
2301_76786857的博客
08-24 262
未知威胁组织（UTG）也对新能源、低轨卫星、人工智能等领域构成威胁。0day 漏洞利用：上半年 0day 漏洞数量达25个，攻击焦点从传统三巨头（微软、谷歌、苹果）转向边界设备，且攻击者在尝试新攻击角度。互联网黑产：不法分子利用网络技术形成黑色产业链，攻击手法多样，目标包括 IT 运维人员、线上考试系统等，目的为获取经济利益。勒索软件：全球勒索软件家族数量众多，新型变种频出，采用“双重勒索”模式，利用漏洞、恶意软件等手段进行攻击。，内容涵盖高级持续性威胁（APT）、勒索软件、互联网黑产、漏洞利用等几方面。
网络安全售前入门01——产品了解
打工人
08-23 680
为方便初入网络安全售前工作的小伙伴了解网安行业情况，我制作一系统售前入门（安全产品，安全服务，法律法规等）介绍，希望能给初进职场小伙伴提供一点帮助。
网络安全系统性学习路线「全文字详细介绍」
HUANGXIN9898的博客
08-27 893
🤟 基于入门网络安全打造的：👉黑客&网络安全入门&进阶学习资源包 一、基础与准备 网络安全行业与法规 想要从事网络安全行业，必然要先对行业建立一个整体的认知，了解网络安全对于国家和社会的作用，避免出现“一叶障目，不见森林”的情况。 Linux 操作系统（网安） 很多初学者也常忽略Linux的重要性，认为学习的重头戏在框架等方面，但其实Linux也是重中之重。 计算机网络基础 计算机网络基础是网络/运维工程师都需掌握的知识，但往往会被忽略。但是它是非常重要的。 HTML（
网络安全之渗透测试实战-DC-3-靶机入侵
DoubleJing的博客
08-27 732
（2）但是目标主机处于内网环境是不可以被外网直接访问,只能主动将shell反弹出来.这种方式称作反弹shell，反弹shell（reverse shell），就是控制端监听在某TCP/UDP端口，被控端发起请求到该端口，并将其命令行的输入输出转到控制端,本质上是网络概念的客户端与服务端的角色反转。Web指纹定义：Web指纹是一种对目标网站的识别技术，通过识别网站所使用的服务器、运行的脚本、安装的CMS等信息对目标进行精准的分类和定位。获取本网段的主机信息，根据MAC地址比对来获取DC-3的IP地址。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值