shell获取指定日期的nginx日志

最新推荐文章于 2023-12-07 14:33:36 发布
最新推荐文章于 2023-12-07 14:33:36 发布
阅读量2.1w 收藏 1
点赞数 1
分类专栏： 脚本 文章标签： nginx linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_35921773/article/details/120652778
版权
本文介绍了如何进入Nginx日志目录，通过shell命令`sed`筛选特定日期范围（2021年9月10日至12日）的日志并保存到log.txt文件中，接着利用notepad进行正则表达式过滤，删除指定字符前后的所有内容。这些技巧对于日志分析和数据提取至关重要。
摘要由CSDN通过智能技术生成

1. 进入nginx的日志目录

2. 执行shell命令

 sed -n '/10\/Sep\/2021/','/12\/Sep\/2021/p' /usr/local/nginx/logs/access.log > log.txt

3. notepad正则过滤文本

删除X之后的所有字符用：X.*$
删除X之前的所有字符用：^([^s]*)X

RedEric
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
将某个时间段的nginx的access.log日志进行收集
weixin_43934170的博客
06-07 2726
1. 将某个时间段的nginx的access.log日志进行收集 access.log日志格式如： 1 10.0.0.1 - - [14/May/2020:16:25:15 +0800] "GET /undefined HTTP/1.1" 404 153 "http://10.0.0.127:8801/" "Mozilla/5.0 (Windows NT 6.1; WOW64; Trident/7.0; rv:11.0) like Gecko Core/1.63.6735.400 QQBrowser/10.
按照时间截取nginx日志
Alex
12-12 1661
按照时间截取nginx日志 cat access.log_ |egrep "12/Dec/2019" |sed -n '/14:40:00/,/15:36:00/p' >201912.log sed -n '/11\/Dec\/2019/,/12\/Feb\/2019/p' access.log>20160216.log
shell 分析nginx日志
weixin_42562106的博客
01-18 2503
从nginx日志中获取2021:01:17日 21:30至21:50的日志内容 #sed中取的两个时间点21:31:36与21:50:08必须是日志中实际存在的，用21:30:01与21:50:01获取不到数据； cat access.log | egrep '17/Jan/2021' | sed -n '/21:31:36/,/21:50:08/p' > t.txt 时间段查询日志时间段的情况 cat log_file | egrep '15/Aug/2015|16/Aug/2015' |awk
linux下的shell脚本分割nginx日志并且删除三十天范围外的其他日志
小白轩的博客
05-16 862
1、shell脚本分割nginx日志脚本如下：（注意路径换成自己的） #!/bin/bash # 日志保存位置 base_path='/www/wwwlogs' xuan='nginx' # 获取当前年信息和月信息 log_path=$(date -d yesterday +"%Y%m%d") # 获取昨天的日信息 day=$(date -d yesterday +"%d") # 按年月创建文件夹...
Linux查看nginx最新日志时间,shell获取某个时间段的nginx日志内容
weixin_39616416的博客
05-03 1608
shell获取某个时间段的nginx日志内容小醉90s 2014-04-06 16:40:36 15297 收藏 1分类专栏： linux版权从nginx日志中获取2014:04:01日 21:30至21:50的日志内容# cat web.log192.168.16.105 - - [01/Apr/2014:21:26:21 +0800] "GET / HTTP/1.1" 502 172192.1...
shell版Nginx日志蜘蛛爬取查看脚本
09-15
在这个特定的场景中，我们有一个专门用于查看Nginx日志中搜索引擎蜘蛛爬取活动的shell脚本。Nginx是一个流行的Web服务器，它的日志记录了所有对网站的请求，包括搜索引擎爬虫的访问。 脚本的主要目的是统计不同蜘蛛...
Crontab+Shell做Nginx日志切割脚本实例代码
09-30
【Crontab+Shell做Nginx日志切割脚本】是Linux系统中常见的日志管理方式，主要用于解决日志文件过大导致的问题。Nginx作为一款广泛应用的Web服务器，其产生的日志文件可能会随着时间积累变得非常庞大，占用大量磁盘...
centos中nginx按日期自动分割访问日志的方法
09-15
为了应对上述挑战，我们可以编写Shell脚本来实现Nginx日志的自动按日期分割功能。具体步骤如下： ##### 3.1 编写Shell脚本 首先，我们需要创建一个Shell脚本来实现日志文件的自动分割。以下是一个简单的示例脚本： ...
详解nginx日志定时备份和删除
09-30
为了解决这一问题，可以编写shell脚本来实现Nginx日志的定时备份和删除。 本篇文章介绍的shell脚本旨在自动备份当前的日志文件，并删除7天前的旧备份，以保持日志存储的整洁和高效。以下是对脚本内容的详细解释： ...
shell脚本定时统计Nginx下access.log的PV并发送给API保存到数据库
09-30
# 统计指定日期的PV cat access.log | sed -n '/20/Sep/2018/p' | wc -l ``` 同时，我们还可以分析访问日志中不同IP地址的访问次数。例如，查看访问次数最多的前10个IP： ```bash cat access.log.1 | cut -d ' ' -...
如何快速截取某段时间内的日志
weixin_30916125的博客
09-04 307
在排除故障时，需要分析发生故障的原因，避免再次出现同样的问题，需要对日志进行分析，截取故障前后时间段的日志。通常用正则表达式来获取某段时间的内的日志，比较繁琐。可以通过awk方便简捷的实现。 我这里以截取nginx访问日志为例： 查看21/Jul/2014:14:37:50到21/Jul/2014:14:38:00时间段内bbs.ttlsa.com的访问日志。 ...
awk和sed截取nginx和tomcat时间段日志
08-22 774
nginx日志截取示例 日志路径：/usr/local/nginx/logs, 截取access.log中2019年3月24日17点00~02之间的日志：　写法1： cat access.log | awk '$4 >="[24/Mar/2019:17:00:00" && $4 <="[24/Mar/2019:17:02:00"' 　写法2： cat access.lo...
快速提取NGINX/apache 给定时间段的日志
ikko的博客
05-05 904
生产环境有时候会因为访问量很大，记录下来超大的日志，晚高峰出现问题时候要通过检查日志来排查问题，面对几百G以上甚至T级别的日志，使用less 查看会和搜索会非常慢，最好的方法是通过行编辑工具（grep、awk）将需要的日志提取出来查看，但是行编辑工具有一个缺陷就是要按行读取，从首行开始读取到晚高峰的日志也需要耗费大量的读IO以及时间。这里举例使用的是nginx日志。为了能提高效率我写了这个脚本，通过二分查找法检查每一行的日志的时间，迅速定位到需要提取的日志首行和尾行，将需要的日志提取出来。
linux用grep、awk分析nginx的access.log的日志，根据时间段截取日志、统计某接口/关键字访问成功数量及平均响应时间。
勇往直泉的博客
03-18 8255
衍生文章链接：https://blog.csdn.net/enjoyphp/article/details/100024220 项目中亲测，命令全部有效 日志截取，从总日志文件中截取昨天已整天的数据出来，并覆盖到新文件中： cat access.log | awk '$4 >="[14/Mar/2019:00:00:00" && $4 <="[14/Ma...
Nginx——nginx日志类型（Centos7通过yum方式安装）
小志的博客
07-04 3540
目录一、nginx的日志类型二、nginx的日志位置三、nginx的日志内容查看四、access.log是如何实现的五、log_format的详解六、nginx的日志变量有哪些1、HTTP请求变量2、HTTP请求变量配置到日志变量示例3、内置变量4、自定义变量 一、nginx的日志类型 nginx日志包括error.log和access.log ; error.log主要记录nginx处理http请求的错误状态以及nginx本身错误服务的运行状态； access.log 主要记录nginx处理http请求
Xshell中直接获取时间范围内日志的方法
最新发布
m0_69338947的博客
12-07 1446
Xshell中直接获取时间范围内日志的方法
shell分析nginx日志
百鸣的专栏
12-13 773
日志格式： 178.255.215.86 - - [04/Jul/2013:00:00:31 +0800] "GET /tag/316/PostgreSQL HTTP/1.1" 200 4779 "-" "Mozilla/5.0 (compatible; Exabot/3.0 (BiggerBetter); +http://www.exabot.com/go/robot)" "-"- 178.2...
nginx日志切割脚本（shell）
weixin_57400332的博客
10-21 1144
nginx日志切割
shell写一个nginx日志切割脚本
03-08
你好，我可以回答这个问题。以下是一个 shell 脚本，可以实现 nginx 日志的切割： ``` #!/bin/bash # nginx 日志文件路径 log_path="/var/log/nginx/access.log" # 切割后的日志文件名 log_name="access-$(date +%Y%m%d).log" # 切割命令 mv $log_path $log_path.$log_name && kill -USR1 $(cat /run/nginx.pid) # 删除 7 天前的日志文件 find /var/log/nginx/ -name "access-*.log" -mtime +7 -exec rm -f {} \; ``` 这个脚本会将当前的 nginx 日志文件重命名为 `access-年月日.log` 的格式，并重新生成一个新的日志文件。同时，它会删除 7 天前的日志文件，以保持磁盘空间的合理使用。 希望这个脚本能够帮助到你。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

RedEric

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值