日志分析之输入分隔符m修饰符

最新推荐文章于 2021-11-06 21:17:53 发布
最新推荐文章于 2021-11-06 21:17:53 发布
阅读量2.6k 收藏
点赞数
分类专栏： Perl 文章标签： 正则表达式 query perl mozilla templates 脚本
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/utopia_wang/article/details/2026423
版权
本文介绍了如何使用Perl处理多行日志文件，特别是日志中SQL查询的时间分析。通过改变输入记录分隔符$/为';'，并结合正则表达式的/m修饰符，可以从日志中匹配Query_time为1的SQL语句。讲解了/m修饰符使得^和$能匹配多行文本的开头和结尾，以及/s修饰符使'.'能匹配包括换行符在内的所有字符。
摘要由CSDN通过智能技术生成

Perl默认的内部变量

$- 当前页可打印的行数,属于Perl格式系统的一部分
$! 根据上下文内容返回错误号或者错误串
$” 列表分隔符
$# 打印数字时默认的数字输出格式
$$ Perl解释器的进程ID
$% 当前输出通道的当前页号
$& 与上个格式匹配的字符串
$( 当前进程的组ID
$) 当前进程的有效组ID
$* 设置1表示处理多行格式.现在多以/s和/m修饰符取代之.
$, 当前输出字段分隔符
$. 上次阅读的文件的当前输入行号
$/ 当前输入记录分隔符,默认情况是新行
$: 字符设置,此后的字符串将被分开,以填充连续的字段.
$; 在仿真多维数组时使用的分隔符.
$? 返回上一个外部命令的状态
$@ Perl解释器从eval语句返回的错误消息
$[ 数组中第一个元素的索引号
$/ 当前输出记录的分隔符
$] Perl解释器的子版本号
$^ 当前通道最上面的页面输出格式名字
$^A 打印前用于保存格式化数据的变量
$^D调试标志的值
$^E在非UNIX环境中的操作系统扩展错误信息
$^F最大的文件捆述符数值
$^H由编译器激活的语法检查状态
$^I内置控制编辑器的值
$^L发送到输出通道的走纸换页符
$^M备用内存池的大小
$^O操作系统名

最低0.47元/天 解锁文章
utopia_wang
关注
专栏目录
面向对象 元类 gil log 协程 垃圾回收 描述符 property
m0_61634551的博客
11-12 208
Build-in Function,启动python解释器，输入。
PERL内置变量表
12-11 843
从网上搜索总结的PERL内置变量，可以在程序中引用 $- 当前页可打印的行数,属于Perl格式系统的一部分 $! 根据上下文内容返回错误号或者错误串 $" 列表分隔符 $# 打印数字时默认的数字输出格式 $$ Perl解释器的进程ID $% 当前输出通道的当前页号 $& 与上个格式匹配的字符串 $( 当前进程的组ID $) 当前进程的有效组ID $* 设置1表示处理多行格式.现在多以/s和/m
PERL的特殊系统变量
garygao的专栏
03-11 394
$- 当前页可打印的行数,属于Perl格式系统的一部分 $! 根据上下文内容返回错误号或者错误串 $” 列表分隔符 $# 打印数字时默认的数字输出格式 $$ Perl解释器的进程ID $% 当前输出通道的当前页号 $& 与上个格式匹配的字符串 $( 当前进程的组ID $) 当前进程的有效组ID $* 设置1表示处理多行格式.现在多以/s和/m修饰符取代之. $, 当前输出字段分隔符 $. 上次阅读
Perl内部保留变量（系统变量）
weixin_33749131的博客
11-21 97
$- 当前页可打印的行数,属于Perl格式系统的一部分 $! 根据上下文内容返回错误号或者错误串 $” 列表分隔符 $# 打印数字时默认的数字输出格式 $$ Perl解释器的进程ID $% 当前输出通道的当前页号 $& 与上个格式匹配的字符串 $( 当前进程的组ID $) 当前进程的有效组ID $* 设置1表示处理多行格式.现在多以/s和/m...
perl中的内置变量($系统变量)
weixin_34153893的博客
08-09 283
$. 跟踪当前记录号.. 列表构建操作符 my @number=(1..100);$/ 输入记录分隔符 默认：$/='\n',在进行文件读操作<FILE>时，一次读取一行时就会引用。可以修改，但修改后记得改回，修改会得到一个警告，也会提高BUG查找的难度。$\ 输出记录分隔符$@ 返回eval的最后一个错误（eval为抛出异常，不...
关于日志分隔符，不要使用^
大家都很努力
01-09 996
今天线上排查错误，始终找不能准确定位问题，使用grep搜索了应该出错的日志，怎么都搜不到，最后还是用vim直接打开日志文件才看出来，原来日志里面使用了^^^字符，grep搜索的时候怎么都搜不到。。。 打印的日志：该用户不存在^^^UserId=$UserId 以后大家千万别在日志中用^了。。。搜索不到 建议可以使用 中竖线| 中划线- 下划线_ 星号是通配符，最好也不要用 或者...
Java日志系统
写写写写写博客
10-24 4825
本篇文章的部分代码0. 概述在项目开发中，为了跟踪代码的运行情况，常常要使用日志来记录信息。 在Java世界中，有很多的日志工具库来实现日志功能，避免我们重复造轮子，下面我们就来逐一了解日志工具。1. 最原始的日志记录方式最早期的Java程序中，使用System.out.println()把需要显示的内容打印到屏幕，这种方式使用起来非常简单，但是缺点却是非常多的： - 输出内容不可控 - 可读
2021-11-06大数据学习日志——数据埋点+网络爬虫——数据提取
tingbaobaoo的博客
11-06 741
数据提取 本章节主要会学习在爬虫中的如何去解析数据的方法，要学习的内容有： 响应数据的分类 结构化数据如何提取 非结构化数据如何提取 正则表达式的语法以及使用 jsonpath解析嵌套层次比较复杂的json数据 XPath语法 在Python代码中借助lxml模块使用XPath语法提取非结构化数据 01_数据提取概述 知识点： 了解 响应内容的分类 了解 xml和html的区别 了解 常用的数据解析方法 1.1 认识xml以及和html的区别 要搞清楚html和xml的区别，首先
大数据之Hive总结篇及Hive优化
juan777的博客
02-04 1573
Hive学习也有一段时间了，今天来对Hive进行一个总结，谈谈自己的理解，作者还是个小白，有不对的地方请大家指出相互学习，共同进步。今天来谈一谈什么是Hive，产生背景，优势等一系列问题。 什么是Hive 先来谈谈自己的理解： 有些人可能会说Hive不就是写SQL的吗，那我们其实可以从另一个角度来理解:Hive就是那么强大啊，只要写SQL就能解决问题，其实这些人说的也没错Hive...
Logtail从入门到精通（五）：分隔符Nginx访问日志采集实战
weixin_33670713的博客
05-20 741
前言 上一节中我们介绍了如何使用正则表达式的方式来解析日志)，将非结构化的日志转化为半结构的数据。除正则表达式方式外，日志服务还支持分隔符模式的日志，分隔符支持单字符和多字符两种方式。本文通过Nginx分隔符访问日志为大家介绍如何使用Logtail采集分隔符类型的日志。 分隔符日志介绍 分隔符日志使用分隔符（Separator）将一条日志切分成多个字段，...
以行为记录项，空格为分隔符的日志文件解析
yuanbinquan的专栏
11-25 977
在实际应用中往往会发现这样一些日志文件，它们以一行表示一个记录项，记录项中的每个字段间以空格来分隔。比如，如下日记文件      name1 sex1 age1 height1 weight1      name2 sex2 age2 height2 weight2     对于该类文件的解析可参考如下代码模块： /* 从Line中读取第N个空格的位置 成功返回第N个空格位置，失败
对于大日志分割的几种方法
洛阳山
05-30 1万+
对于大日志分割的几种方法当日志容量上G的时候，用vi查看具体内容效率就会变得特别低，这个时候就需要将大日志进行分割。 为了比较各种分割方法的效果，我选取的测试日志基本信息如下：# ls -lrth test.log -rw-r--r-- 1 root root 645M 5月 30 20:42 test.log # wc -l test.log 8856340 test.log1. split方
分析日志并按分隔符分开保存
java学习者
04-20 444
/** * 读取日志文件地址,每行根据指定字符分割开,每行分割成一个数组.每20000行(可传入参数指定,linesOnce)放到一个list中, * 进行一个操作,然后list清空,重复下一个20000行(可传入参数指定,linesOnce) * 注意:现在是把传入的参数取出来在检查一下,重新付给新的map当参数传入,如果传入的map中参数齐全,就可以直接传入的map参数往下传...
关于Linux中文本出现^M问题的的原因分析和解决办法
热门推荐
梦岚如雪
01-04 2万+
之前遇到这么一个问题，在windows用Java程序生成的json数据放入Linux后对json数据进行处理出现数据不识别的情况，报错出现提示你所选中的数据不是标准的json结构，但是我将报错的json数据拿到json校验工具又能生成标准的json样式展示。当时百思不得其解，后来通过vim查看文本的时候发现每个json数据的最后有一个^M,而在正常情况下是不会看到这个的。 　　这里根本原因是编码
perl输出环境变量
海内存知己，天涯若比邻
10-10 1490
windows中my computer-->advanced->envirenment查看总是看得不是很清楚 刚做MTK平台上的开发时,老是遇到工具安装不正确的问题,大多时候是因为环境变量没设好 本程序提供将环境变量输出到一个文本里便于查看确认 #!/usr/local/bin/perl open(MYFILE,">env.txt"); foreach $field (k
日志分割，shell脚本
Dima
06-13 4003
每个#/bin/bash开始的都要单独一个文件,名字随意#/bin/bash#这个只在部署nginx的服务器上编写bakpath='/home/nginx/logs'logpath='/usr/local/nginx/logs'mkdir -p $bakpath/$(date +%Y)/$(date +%m)mv $logpath/access.log $bakpath/$(date +%Y)/$...
logrotate 日志分割工具的配置使用
sduuntion的专栏
11-03 2395
Logrotate是linux下的一个用于对日志文件分割，压缩或者发送邮件的的工具。当系统中的某个进程会定期生成大量的log文件时，logrotate可以定期（每天一次，每周一次等等）自动化的将这些log文件进行分割压缩，删除等操作。          一般情况下，logrotate是一个在/etc/corn.daily下的每天执行的cronjob，logrotate在一天之中也不会对log文件
如何利用忽略输入修饰符忽略输入分隔符
最新发布
03-13
您可以使用字符串的 split() 方法来分割输入，并使用 join() 方法来忽略分隔符。例如，如果您想要忽略空格和逗号作为分隔符，您可以使用以下代码： input_str = input().strip() # 去除输入字符串两端的空格 input_list = input_str.split() # 分割输入字符串 input_str_without_delimiters = ''.join(input_list) # 将分割后的字符串拼接起来，忽略分隔符 请注意，这只是一种方法，具体实现可能因编程语言和具体情况而异。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值