Shell截取文本一段区间的方法

最新推荐文章于 2023-12-17 18:09:23 发布
最新推荐文章于 2023-12-17 18:09:23 发布
阅读量3.7k 收藏 7
点赞数 1
分类专栏： shell
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/diyiday/article/details/102758007
版权

假设有一段日志，我需要截取 2019/09/23到2019/09/29 之间期间的日志。
那么，我利用shell怎么去截取呢
在这里插入图片描述

2019/09/16 09:56:00 [warn] 11#11: could not build optimal proxy_hea
2019/09/16 09:56:00 [warn] 11#11: could not build optimal proxy_hea
2019/09/16 09:56:00 [warn] 11#11: could not build optimal proxy_hea
2019/09/16 09:56:00 [warn] 11#11: could not build optimal proxy_hea
2019/09/23 04:47:27 [crit] 12#12: *5741 SSL_do_handshake() failed (
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/29 20:02:05 [crit] 11#11: *3083 SSL_do_handshake() failed (
2019/09/30 17:36:46 [warn] 10#10: could not build optimal proxy_hea
2019/09/30 17:36:46 [warn] 10#10: could not build optimal proxy_hea
2019/09/30 17:36:46 [warn] 10#10: could not build optimal proxy_hea

实现方法

先利用sed -n截取2019/09/23和2019/09/29 关键词

sed -n '/^2019\/09\/23/,/2019\/09\/29/p' log.txt

这里是利用sed -n 截取2019/09/23和2019/09/29 区间的日志
因为有/字符,需要在 /前面加上\转义一下。就变成了\/，有些特殊字符在shell中都需要转义，否则会与偶问题。具体有哪些字符需要转义，可以百度shell转义字符

sed -n '/^a/,/bp/'  file

这个就是截取a和b之间的字符，包括a和b

为什么在a前面加上一个^这个是一个正则，表示从a开头开始匹配

以上的结果为：

[root@aliyun test]# sed -n '/^2019\/09\/23/,/2019\/09\/29/p' log.txt
2019/09/23 04:47:27 [crit] 12#12: *5741 SSL_do_handshake() failed (
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/29 20:02:05 [crit] 11#11: *3083 SSL_do_handshake() failed (
[root@aliyun test]#

在这里插入图片描述

接下来，可以过滤 2019/09/23和2019/09/29 了

sed -n '/^2019\/09\/23/,/2019\/09\/29/p' log.txt | grep -Ev '(^2019\/09\/23 |2019\/09\/29)'

用grep过滤即可 grep -E 表示过滤带有正则表达式的内容 -v 表示不显示

结果为：

[root@aliyun test]# sed -n '/^2019\/09\/23/,/2019\/09\/29/p' log.txt | grep -Ev '(^2019\/09\/23 |2019\/09\/29)'
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
2019/09/25 12:41:35 [warn] 10#10: could not build optimal proxy_hea
[root@aliyun test]#

正是我想要的内容

在这里插入图片描述

diyiday
关注
专栏目录
shell sed 或awk 截取段落内容方法_2019_lcf
cbuy888的博客
01-26 4207
有时候我们会有截取内容段的需求，下面就简单介绍下用法，主要以实例说明为主 1、先介绍awk的用法说明 awk  "/开始行字符串/，/结束行字符串/"  文件   （ 这种写法sed 基本是一样的） 字符串可以是正则 还有一种做标记的写法 awk  "/开始行字符串/{标记A=0/1}，/结束行字符串/{标记A=0/1}标记A"  文件 标记A可以相当于一个自定义变量名，这种用法相对难...
Linux shell脚本编程-将一行中的某个部分去重
不忘初心
10-09 2353
一，背景。 今天遇到了一个使用场景，获取文件中每一行的某个属性数据，然后将该属性数据去重。 二，shell脚本编写。bash 1 #!/bin/bash 2 for line in `cat test1|awk -F "|" '{print $4}'|awk -F "[" '{print $2}'|awk -F "\]" '{print $1}'` 3 do 4
Shell脚本8种字符串截取方法总结
香梦沉酣2012的专栏
04-10 4985
本文转自：http://www.jb51.net/article/56563.htm Linux 的字符串截取很有用。有八种方法。 假设有变量 var=http://www.aaa.com/123.htm. 1. # 号截取，删除左边字符，保留右边字符。 复制代码代码如下: echo ${var#*//} 其中 var 是变量名，# 号是运算符，*// 表示从左边开始删除第
怎样提取文本中指定两个字符中间的内容（每行开头和结尾相同，中间待提取长度不一样）
沧海明月的博客
05-09 2168
文本内容 例如： lib-hello.so lib.world.so lib_python-so 方法一：利用python list 截取 line[3:-2] 方法二：python 正则匹配 import re m1 = re.search(r'lib(.*)so',line) print((m1.group(1))) 方法三：shell 处理 sed-nr'/lib/{(.+)so\1/;p}'yourfile ...
Linux Shell_cut命令（按列提取文本字符）
探索C++编程的奥秘，分享深入的技术见解和实践，旨在激发读者创造力与解决问题的思维。
06-03 2535
Linux Shell_cut命令（按列提取文本字符）
【shell】shell字符串分割|文件分割|剪切|截取
小鱼菜鸟的博客
07-22 6402
目录 一、字符串分割 1、awk分割 2、利用shell 中 变量 的字符串替换成空格分割 3、设置分隔符，通过 IFS 变量 4、利用tr 指令实现字符替换 二、文件分割 按行切割 按时间切割(符合条件的切割) 三、行截取|截取匹配字符(串)前半段/后半段 附录 linux下awk内置函数的使用(split/substr/le...
Shell脚本学习-阶段一
qq_43058317的博客
06-09 812
文章目录阶段一前言Shell脚本实例1.hello world2.创建用户:2.1 通过位置变量创建用户2.2提示用户输入用户名和密码创建用户2.3读取user.txt文件中的用户名批量创建用户2.4 读取list.txt文件中的账号密码批量创建用户3.显示当前计算机中所有账户的用户名4.统计当前Linux系统中可以登陆计算机的账户数量5.找出/etc/passwd中能登陆的用户,并将对应在/etc/shadow中第二列密码提出处理6.检查当前用户是否为超级管理员7.测试用户名与密码是否正确8.将Lin..
Shell脚本 - sed命令
Yusheng9527的博客
12-28 369
Shell脚本 - sed命令sed编辑器概述工作流程sed命令格式常用格式常用操作具体操作打印操作删除行替换插入 sed编辑器 概述 sed是一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一组规则来编辑数据流 sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要么存储在一个命令文本文件中 工作流程 读取：sed从输入流 (文件、管道、标准输入) 中读取一行内容并存储到临时的缓冲区中(又称模式空间，pattern space) 执行：默认情况下，所有的sed命
shell脚本一百例
Dzixiaobai的博客
03-26 1042
查找 Linux 系统中的僵尸进程 #!/bin/bash #awk 判断 ps 命令输出的第 8 列为 Z 是，显示该进程的 PID 和进程命令 ps aux |awk ‘{if($8 == “Z”){print $2,$11}}’ 提示用户输入年份后测试判断是否为闰年 #!/bin/bash #Author:丁丁历险(Jacob) #能被 4 整除并且并 100 整除的年是闰年 #能被 40...
shell学习笔记---awk命令
热巴的小哥哥博客
12-14 851
功能： 可以用来处理行和列组成的文本数据。可称之为一种编程语言，因为它支持正则表达式匹配，流程控制，变量，函数运算符等。 格式： 如果该条记录符合匹配模式便执行后续定义的动作命令 awk '匹配模式 {动作命令}' 文本文件#左大括号必须和匹配模式为同一行 工作流程： 首先从指定文本中读取文本，然后更新awk的内置系统变量的值（列数变量NF，行数变量NR，行变量$0，列变量$n等），接着一次执行定义的匹配模式和动作命令，最后读取后续文本反复执行。注意的一点是读取文本是一行一行读取的，但是处理是却是以一条记
shell截取指定字符
xdkprosperous的博客
08-30 3021
一、八种基本字符截取方法： 1、使用#号操作符。从左边删除第一次出现substr 左边字符（包括substr ），保留右边字符。 用法为 #*substr 例如： 即删除从左边开始到第一个"//"及其左边所有字符 2、使用##号操作符。从左边删除最后一次出现substr 左边字符（包括substr ），保留右边字符。 ...
linux shell文件截取前几行，后几行，中间几行命令
u012972294的博客
02-08 5481
如果你只想看文件的前100行，可以使用head命令，如 head-100 filename 如果你想查看文件的后100行，可以使用tail命令，如： tail-100 filename 或 tail -n 100 filename 查看文件中间一段，你可以使用sed命令，如： sed-n ‘100,200p’ filename 这样你就可以只查看文件的第100行到第200行 ...
【linuxshell实战案例】awk截取字符串中的部分内容
最新发布
qq_35902025的博客
12-17 2362
awk截取字符串中的部分内容，本质上截取的方法也按列截取该字段的1-5列，只不过一列只有一个字符，看到列数据的提取我们想到用awk，awk可以解决大部分提取列数据的问题
shell脚本实现字符串截取
dong18292000671的博客
07-05 9645
shell脚本截取字符串有8种方法： 1.# 号截取，删除左边字符，保留右边字符。代码： ch=abcd1234 echo ${ch#*d}其中 ch 是变量名，# 号是运算符，*d 表示从左边开始删除第一个 字符d 及左边的所有字符 结果是 ：1234 2.## 号截取，删除左边字符，保留右边字符。 代码：echo ${ch##*,} ##*, 表示从左边开始删除最后（最右边）一个
shell字符串截取（cut）
centor的博客
08-04 3811
字符串截取操作cut，cut以行为单位进行操作。 cut命令主要是接受三个定位方法： 第一，字节（bytes），用选项-b 第二，字符（characters），用选项-c 第三，域（fields），用选项-f-b，下面代码块中详述-b操作//目标操作串-b [lj@localhost script]$ ps PID TTY TIME CMD 2
shell脚本字符串截取的8种方法
热门推荐
yizhiniu_xuyw的专栏
02-23 1万+
shell脚本字符串截取的8种方法 假设有变量 var=http://www.aaa.com/123.htm. 1. # 号截取，删除左边字符，保留右边字符。 1 echo ${var#*//} 其中 var 是变量名，# 号是运算符，*// 表示从左边开始删除第一个 // 号及左边的所有字符 即删除 http:// 结果是 ：www.aaa.com/123.htm 2. ## 号截取，删除左边字符，保留右边字符。 1 ec.
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值