log日志分析步骤

最新推荐文章于 2024-04-15 22:05:39 发布
最新推荐文章于 2024-04-15 22:05:39 发布
阅读量3.2k 收藏 1
点赞数
分类专栏： Linux 平时积累 文章标签： log日志
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43517453/article/details/88369709
版权

cd logs
大数据组件的日志文件分为两种.log .out ,.out 不看
hadoop-hadoop-datanode-hadoop002.log
hadoop-用户-----进程名称-----机器名称
（hadoop其实是hdfs，yarn代表yarn）
ll -h 查看文件详细信息和大小

  1. vi + log名字
    : / ERROR 查找后，然后按n向下 N向上

  2. tail -200f 倒序查看200行 另外一个窗口重启进程，为了再现这个错误。

  3. sz 将log日志 上传到Windows上 进行认真分析，还可以备份

Gru杨
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Doris在日志分析中的应用
03-29 5万+
使用basic auth进行 HTTP 鉴权，用命令来计算设置，指定数据格式为 JSON设置，指定每行一个 JSON设置，指定一次写入一个分桶目前建议写入客户端一个 Batch 100MB ~ 1GB，后续版本会通过服务端 Group Commit 降低客户端 Batch 大小curl \查询Doris 支持标准 SQL，可以通过 MySQL客 户端或者通过 JDBC 等方式连接到集群，然后执行 SQL 进行查询。下面是日志分析场景中，常见的几种查询。查看最新的 10 条数据。
Docker部署graylog日志分析系统
Bertram的博客
11-12 2100
日志分析系统可以实时收集、分析、监控日志并报警，当然也可以非实时的分析日志。splunk是功能强大且用起来最省心的，但是要收费，免费版有每天500M的限制，超过500M的日志就没法处理了。ELK系统是最常见的，缺点是配置麻烦一些，比较重量级。graylog是开源免费的，配置上要比ELK系统简单。综上，本文尝试容器方式搭建一套graylog系统，不做实时收集日志和报警的配置，只完成非实时被动接收网站日志，分析日志各项指标的功能。 docker官方镜像国内速度觉得慢，改成国内镜像。新建文件daemon.j.
日志分析篇
最新发布
WX公众号-小白学安全
04-15 865
Windows系统日志是记录系统中硬件、软件和系统问题的信息，同时还可以监视系统中发生的事件。用户可以通过它来检查错误发生的原因，或者寻找受到攻击时攻击者留下的痕迹。Windows主要有以下三类日志记录系统事件：应用程序日志、系统日志和安全日志。系统日志记录操作系统组件产生的事件，主要包括驱动程序、系统组件和应用软件的崩溃以及数据丢失错误等。系统日志中记录的时间类型由Windows NT/2000操作系统预先定义。
monkey日志分析
LilGaage的博客
11-23 7492
一、Monkey 日志详解 Monkey 日志由以下几部分组成： (1) 测试命令信息：随机种子 seed、运行次数、可运行应用列表、各事件百分比。 ​​​​​​​ (2) App 切换和 Activity 跳转：可以看到切换到了哪个 App，从哪个 Activity 跳转到了哪个 Activity，如果发生了异常，就可以看出是在哪个 App 和 Activity 中发生的。注：在允...
Spring aop切面编程实现log日志步骤
qq_39736103的博客
05-28 5133
1、在spring-mvc.xml配置文件中打开切面开关：<aop:aspectj-autoproxy proxy-target-class="true"/>注意：proxy-target-class属性值决定是基于接口的还是基于类的代理被创建。如果proxy-target-class 属性值被设置为true，那么基于类的代理将起作用（这时需要cglib库）。如果proxy-targe...
linux清理log日志文件
热门推荐
qq_37082966的博客
12-01 1万+
需要清理的场景： 1、linux会自动记录日志，日志文件中包含用户的所有操作。这样虽然可以方便用户查找相关bug，但是也导致的日志文件所占据的空间越来越大。在系统能够正常满足用户使用的条件下，清理日志文件就非常有必要了 2、当我们使用命令行TAB键补全时会出现异常： bash: cannot create temp file for here-document: No space left on device 解决步骤： 1、使用命令查看硬盘空间 df -h 显示如下： 这时候根据提示，进入指定的目
Golang中log日志包的使用
Korbin的博客
12-01 3251
文章目录1.前言2.log包介绍3.log包的使用3.1 日志输出方法3.2 自定义创建日志对象3.3 封装自定义日志包3.4 log包进一步解析 1.前言 作为后端开发人员，日志文件记录了发生在操作系统或其他软件运行时的事件或状态。技术人员可以通过日志记录进而判断系统的运行状态，寻找导致系统出错、崩溃的成因等。这是我们分析程序问题常用的手段。 2.log包介绍 在Golang中记录日志非常方便，Golang提供了一个简单的日志记录包log，包中定义了一个结构体类型 Logger，是整个包的基础部分，包中的
自定义配置log日志
金蒂
02-17 3461
配置新日志文件 1.新建日志配置文件 想要自定义log日志文件的话 需要自定义一个log文件——命名很重要 Banner部分与日志部分是独立的，springboot启动后会先打印Banner部分，那么我们自然可以自定义配置Banner 的样式 步骤： 1.在resources下新建Banner.txt文件
graylog日志分析管理系统入门教程
xllntld的专栏
09-27 4032
日志分析系统可以实时收集、分析、监控日志并报警，当然也可以非实时的分析日志。splunk是功能强大且用起来最省心的，但是要收费，免费版有每天500M的限制，超过500M的日志就没法处理了。ELK系统是最常见的，缺点是配置麻烦一些，比较重量级。graylog是开源免费的，配置上要比ELK系统简单。综上，本文尝试容器方式搭建一套graylog系统，不做实时收集日志和报警的配置，只完成非实时被动接收网站日志，分析日志各项指标的功能。 docker官方镜像国内速度我觉得慢，改成国内镜像。新建文件daemon.jso
log 的抓取与分析
baidu_32472003的博客
04-04 6754
log 的抓取与分http://blog.csdn.net/yaoming168/article/details/38777727 log 的抓取与分析一、Android log框架简介二、log获取方式1、Eclipse 抓取1）根据信息类型过滤log那个显示框上面还有个下拉列表选项可以选择过滤哪些信息。a、Log.v 的调试颜色为黑色的，任何消息都会输出，这里的v代表verbose啰嗦的意思，...
Log Explorer4.2数据库日志分析
06-09
《Log Explorer 4.2：深入解析数据库日志分析》 Log Explorer 4.2是一款专为数据库日志分析设计的高效工具，它为数据库管理员提供了强大的日志查看、搜索和解析功能，使得复杂的数据库日志管理工作变得更为简单。这...
大日志log分析查看工具
08-20
当遇到软件问题或系统异常时，日志分析往往是定位问题的关键步骤。"大日志log分析查看工具"针对的就是处理大规模日志文件的场景，这些文件往往达到数百MB甚至更大，传统文本编辑器可能无法有效处理。 **日志分析的...
用c++写的 log 日志文件
01-16
创建一个简单的C++日志系统通常包括以下几个步骤： 1. **定义日志级别**：为了方便过滤和查看不同类型的日志信息，我们可以定义一系列的枚举常量，如DEBUG、INFO、WARNING、ERROR等，代表不同的日志级别。 2. **...
iis.rar_日志分析
09-22
除了ASP版本的分析工具，还有许多第三方软件和在线服务，如LogParser、WebLog Expert等，它们提供了更强大的功能和更友好的界面，适用于大规模或复杂环境的日志分析。 六、注意事项 在进行日志分析时，应尊重用户...
mysql中general_log日志知识点介绍
09-09
MySQL中的`general_log`日志是数据库管理系统用来记录所有SQL查询的一个功能，它记录了数据库服务器接收到的所有请求，包括数据...同时，定期清理和归档日志文件也是必要的维护步骤，以防止日志文件过大导致存储问题。
【大数据基础】Linux基础
Gru的博客
03-04 4796
Linux基础Linux常用命令pwd家目录cd 切换目录目录（路径）clear 清空屏幕ls查看ip创建目录文件/文件夹的移动文件/文件夹的复制复制和移动查看命令帮助查看文件内容(静态)动态（实时）查看文件内容echotouch别名及别名的创建配置全局环境变量文件配置个人环境变量文件删除 rm设置变量变量使用 Linux常用命令 pwd 用来查看当前光标所在的路径 家目录 linux系统的目录多...
Linux上手动安装MySQL
Gru的博客
03-06 1036
下载并校验md5值 // ``下载地址 链接: https://pan.baidu.com/s/1G9OPorT249LhwkZ9AHJShA 提取码: xx4p 复制这段内容后打开百度网盘手机App，操作更方便哦 cd /usr/local rz * md5sum校验文件md5看是不是有缺失 md5sum mysql-5.6.23-linux-glibc2.5-x86_64.tar.gz 6...
shell脚本的debug模式
Gru的博客
04-10 762
shell脚本的debug模式主要是为了发现引发脚本错误的原因以及定位脚本源代码中的错误行。主要使用的有 -x 模式：可以在命令行模式下 输入 sh + -x +脚本名 来启动shell脚本debug模式，也可以进入脚本，在开头第一行的末尾添加上 -x 参数。 ...
只有一个log日志
06-01
好的，如果只有一个log日志文件，可以使用Python标准库中的`tail -f`功能来实现对日志文件的实时监控。具体实现步骤如下： 1. 使用`open()`函数打开日志文件，获取文件对象； 2. 使用`seek()`函数将文件指针移动到文件末尾，以便实时读取新增加的日志信息； 3. 使用`while`循环实时读取日志文件中新增的内容，可以通过`readline()`或者`readlines()`函数来实现； 4. 对读取到的日志信息进行处理，可以将其输出到控制台或者写入其他文件等。 以下是一个简单的示例代码： ```python import time def follow(file): file.seek(0, 2) # 将文件指针移动到文件末尾 while True: line = file.readline() if not line: time.sleep(0.1) continue yield line if __name__ == '__main__': with open('log.txt', 'r') as f: for line in follow(f): print(line) ``` 在上述代码中，`follow()`函数使用`yield`关键字来实现生成器，每次读取到日志文件新增的一行内容时，通过`yield`将其返回给调用者。`if not line:`语句用于判断是否读取到文件末尾，如果是，则暂停0.1秒钟后再次尝试读取。在主函数中，通过`with open()`语句打开日志文件，然后使用`for`循环调用`follow()`函数读取日志文件中新增的内容，并将其输出到控制台。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值