利用awk筛选给定时间范围内的日志

最新推荐文章于 2023-08-08 21:47:20 发布
最新推荐文章于 2023-08-08 21:47:20 发布
阅读量737 收藏
点赞数
分类专栏： 安全 文章标签： 安全
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_55822200/article/details/132125732
版权

文章目录

筛选给定时间范围内的日志

时间

时间的表示方法：

  • 时间戳
  • 系统时间（年月日时间）

时间戳

什么是时间戳？

​ 时间戳是指格林威治时间自1970年1月1日（00:00:00 GMT）至当前时间的总秒数。它也被称为Unix时间戳（Unix Timestamp）。通俗的讲，时间戳是一份能够表示一份数据在一个特定时间点已经存在的完整的可验证的数据。

查看当前的时间戳

date +%s

在这里插入图片描述

系统时间

​ 一般说来就是我们执行 date命令看到的时间，linux系统下所有的时间调用都是使用的这个时间。

​ 组成部分：主要由年月日时分秒，以及时区组成

查看当前时间

date

在这里插入图片描述

筛选日志时间示例

简单示例

grep/sed/awk用正则去筛选日志时，如果要精确到小时、分钟、秒，则非常难以实现。

最低0.47元/天 解锁文章
awk 截取某段时间的日志
weixin_33748818的博客
09-28 2186
好久没有截取nginx/haproxy 中 的日志了，竟有点不熟悉了。 记录一下，以免以后忘记。 NGINX 日志格式： 192.168.1.26 - - [14/Sep/2017:16:48:42 +0800] "GET /ui/favicons/favicon-16x16.png HTTP/1.1" 304 0 "http://192.168.1.124/app/kibana" ...
awk的经典实战案例——筛选给定时间范围内的日志
weixin_53960460的博客
08-06 684
时间戳（Timestamp）是一种表示时间的方式，通常是一个整数或浮点数，代表从某个固定时间点（通常是1970年1月1日00:00:00 UTC）起经过的秒数或毫秒数。在计算机中，时间可以使用时间戳表示，也可以使用日期时间格式表示。实例1: 2023-08-05 12:30:15 实例2: 2023-08-06 09:15:20 实例3: 2023-08-06 09:15:25。现在我们要筛选出在 2023年8月6日 00:00:00 到 2023年8月6日 12:00:00 之间的日志。
使用awk通过时间筛选日志
最新发布
AG_money的博客
08-08 611
时间戳是用来表示时间的数字化信息，通常以秒或毫秒为单位。它与具体的时间单位（如年、月、日、小时、分钟和秒）无关，它只代表一种能让计算机识别的一串时间数字，可以精确到毫秒级别。时间戳的起始点通常是一个特定的时间点，开始于1970年1月1日00:00:00，表示从1970年1月1日00:00:00到现在经过的秒数。
利用awk筛选给定时间范围的日志
weixin_57507186的博客
08-05 390
grep/sed/awk用正则去筛选日志时，如果要精确到小时、分钟、秒，非常难以实现。 但awk提供了`mktime()`函数，它可以将时间字符串转换成epoch时间值。
使用awk截取某时间段的日志
weixin_30823227的博客
03-09 1169
想要取出文件里面时间是9点到12点的数据，文件内容如下： 2012-09-05 01:48:47,150 WARN [WorkManager(3)-72] [service.PhoneRangeManager] phone range domain object not found id 1834930 2012-09-05 02:48:47,293 WARN ...
linux awk 时间范围,linux下使用awk命令按时间段筛选日志
weixin_33737261的博客
05-06 348
需求很多时候我们需要按照时间段来进行日志的分析，比如说查看上午的，或者某月某日的的具体日志，就不能简单实用tail -f或者head -n命令了。这个时候我们需要借用awk。命令zcat com.log20160529.gz | grep 'dianping_reply.log'| awk '{split($4,array,"[");if(array[2]>="29/May/2016:00:...
awk筛选给定时间范围内的日志
m0_74344277的博客
08-08 213
awk、grep、sed是linux操作文本的三大利器，合称文本三剑客，也是必须掌握的linux命令之一。三者的功能都是处理文本，但侧重点各不相同，其中属awk功能最强大，但也最复杂。grep更适合单纯的查找或匹配文本，sed更适合编辑匹配到的文本，awk更适合格式化文本，对文本进行较复杂格式处理grep/sed/awk用正则去筛选日志时，如果要精确到小时、分钟、秒，则非常难以实现。
AWK实战案例——筛选给定时间范围内的日志
weixin_52635036的博客
08-08 625
首先考虑的就是把时间转换成一个时间戳，再和目前的时间做一个比较，这样才能筛选出我想要的某个时间之前的数据，现在问题就是这个时间戳怎么转换。时间戳的应用非常广泛，例如在日志文件中记录事件发生的时间，在数据库中记录数据的创建、修改或访问时间，以及在通信系统中同步时间等。通过时间戳，我们可以方便地追踪事件发生的顺序，计算时间间隔，或者对数据进行时间排序等操作。函数中，先将日期时间字符串中的时间部分进行格式化，然后用空格分隔开，分别提取年、月、日、时、分、秒，最后返回对应的Unix时间戳。
8.5---筛选给定时间范围内的日志
m0_63596823的博客
08-05 302
新纪元（epoch）：UNIX及Linux的时间系统是由「新纪元时间」Epoch开始计算起，单位为秒，Epoch则是指定为1970年一月一日凌晨零点零分零秒，格林威治时间。夏时制（Daylight Saving Time：DST）：又称“日光节约时制”和“夏令时间”，是一种为节约能源而人为规定地方时间的制度，在这一制度实行期间所采用的统一时间称为“夏令时间”。一般在天亮早的夏季人为将时间提前一小时，可以使人早起早睡，减少照明量，以充分利用光照资源，从而节约照明用电。时区：世界按照经度被划分为24个时区；
过滤某一段时间之间的日志
weixin_30765319的博客
12-28 342
#!/bin/bash log_file=$1 start_time=`date -d "$2" +%H:%M:%S` [[ $3 == '$' ]] && end_time='$' || end_time=`date -d "$3 1 min" +%H:%M:%S` year=`date +%Y%m%d` cut_log(){ first_num=$1...
linux awk 时间范围,如何用awk从日志文件中找到时间范围的记录
weixin_28789303的博客
05-06 929
日志格式如下2013/08/16 01:10:11.111 E12345678900-0 6513 123 0 IN OK() 0 0 0 0 0 02013/08/16 01:11:22.222 E12345678900-0 6513 123 0 IN OK() 0 ...
linux下使用awk命令按时间段筛选日志
weixin_30315723的博客
10-31 562
zcat com.log20160529.gz | grep 'dianping_reply'| awk '{split($4,array,"[");if(array[2]>="29/May/2016:00:00:26" && array[2]<="29/May/2016:00:01:14"){print $0}}' 解释 扫描gz压缩文件，从中寻找带有`dianpi...
Linux下按照时间段过滤日志
ceshell的博客
06-18 3200
中文博客资料基本上都是sed命令，不过用起来略为麻烦。对于不同种类的时间格式，使用起来不是很方便。这里推荐Stack Overflow上面的过滤方法，可以无缝适配各类时间格式，只需要给出自己想要任意时间段即可。 具体来说，是使用grep与正则表达式，非常简单。 grep "2021/05/18 15:20:5[1-5]" logfile grep "2021-05-18 15:2[1-5]" logfile grep "31/May/2021:19:3[1-5]" logfile grep "2[3-7
Linux工具：awk按时间范围分析日志
Brave_heart4pzj的博客
05-07 462
Linux
如何用awk等方法截取时间段日志
m0_64303422的博客
07-27 553
日志信息格式如上图，怎么可以快速截取出某个时间段的日志，例如我要7月26日的日志，就可以直接截取出所有26日的日志，要26-27日，就会可以截取出26-27日所有日志信息。
linux 日志搜索时间过滤_Linux学习26linux查看某个时间段的日志(sed n)史上最详细...
weixin_36355328的博客
01-30 1930
前言在linux上查找日志的时候，如果我想找出某个时间段的日志，比如查找今天早上8点到下午2点的日志。用grep不太方便直接过滤出来，可以使用sed根据时间去查找sed -n ‘/开始时间日期/,/结束时间日期/p’ all.log查找日志比如下面这段日志,前面的时间格式都是类似 2019-10-21 07:44:202019-10-24 21:33:31,678 [django.re...
用awk筛选掉指定行
05-30
可以使用 awk 命令来筛选指定的行。以下是一个简单的示例，演示如何使用 awk 命令从一个文件中筛选掉指定的行： 假设我们有一个名为 file.txt 的文件，其中包含以下内容： ``` Line 1 Line 2 Line 3 Line 4 Line 5 ``` 如果我们想要筛选掉第三行，可以使用以下命令： ``` awk 'NR!=3' file.txt ``` 这个命令使用了 awk 的 NR 变量，该变量表示当前正在处理的行号。通过将条件设置为 'NR!=3'，我们可以告诉 awk 只输出行号不等于 3 的行。因此，这个命令的输出将是： ``` Line 1 Line 2 Line 4 Line 5 ``` 你可以根据自己的需要修改条件，以便筛选出你想要的行。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值