debugfs和blktrace的实验

最新推荐文章于 2023-02-06 06:00:00 发布
最新推荐文章于 2023-02-06 06:00:00 发布
阅读量1.7k 收藏
点赞数
分类专栏： profile linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Bruceleexiaokan/article/details/8207443
版权
本文介绍了如何使用debugfs和blktrace工具进行磁盘IO分析，通过实验发现debugfs操作耗时且可能导致高磁盘读取。在实际诊断hot file disk IO时，需要对blkparse结果进行处理，聚合相同设备的扇区信息。同时，遇到ext4文件系统journaled模式下debugfs显示问题，始终关注同一inode。
摘要由CSDN通过智能技术生成

看了通过blktrace, debugfs分析磁盘IO大作，试图自己搞一把。花了1个多小时，果然能成功地定位到了正写入的文件。觉得有以下几点值得特别说一下：


1、用debugfs，无论icheck或ncheck，都非常耗时，并且会产生非常高的disk read。我等了将近有10分钟

rrqm/s wrqm/s r/s w/s rsec/s wsec/s avgrq-sz avgqu-sz await svctm %util 

cciss/c0d1 21880.00 0.00 432.00 0.00 178752.00 0.00 413.78 0.95 2.21 2.18 94.20 
cciss/c0d1p1 21880.00 0.00 432.00 0.00 178752.00 0.00 413.78 0.95 2.21 2.18 94.20

2、真的实际要对hot file disk IO进行诊断，其实需要对blkparse的结果进行处理，需要对相同设备的相同、临近扇区号进行聚合（假设顺序读写）

3、arrowpig同学发现，对于ext4在journey开时做debugfs还有些问题，主要是ext4总是先写journey的一个缓存区，导致debugfs总是看到同一inode号（inode=8）。不知这个应该如何解决？


[op1@SVR2084HP360 ~]$  sudo  blktrace /dev/cciss/c0d1p1

BLKTRACESTOP: Invalid argument
Device: /dev/cciss/c0d1p1
  CPU  0:              
最低0.47元/天 解锁文章
Bruceleexiaokan
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Linux下block层的监控工具blktrace +btt
02-14
Linux下block层的监控工具blktrace +btt btt的使用命令及步骤.pdf gelato_ICE06apr_blktrace_brunelle_hp.pdf Linux下block层的监控工具blktrace .pdf 了解IO协议栈.pptx
Linux内核里的DebugFS
weixin_30571465的博客
01-17 1393
DebugFS，顾名思义，是一种用于内核调试的虚拟文件系统，内核开发者通过debugfs和用户空间交换数据。类似的虚拟文件系统还有procfs和sysfs等，这几种虚拟文件系统都并不实际存储在硬盘上，而是Linux内核运行起来后才建立起来。 通常情况下，最常用的内核调试手段是printk。但printk并不是所有情况都好用，比如打印的数据可能过多，我们真正关心的数据在大量的输出里不是那么一目了然...
服务器cpu和磁盘规律毛刺问题排查
starandsea的专栏
12-03 901
问题现象： 每天凌晨2点，CPU和磁盘读写，都有一波毛刺。 每天固定时间点，首先想到的是定时任务。 但是生产环境将近10台机器，每一台都是这样，可以排除是分布式调度job，而我们业务代码的任务都是xxl job，可以排除。 那么有可能是别的地方的调度任务，调用这个服务，请求分散到每一台。 查询2点15分左右的ELK日志量： 跟其他时间没有明显的异常。 日志量没有明显问题。 那么读写的是什么呢？ 查看云后台，有两块硬盘： 点进去查看 磁盘IO异常高是60G的...
Centos 6下通过blktrace监控IO
bobpen的专栏
09-13 1155
1. blktrace安装 #yum install blktrace #mount a /sys/kernel/debug -t debugfs 2. blktrace使用 1.通过blkiomon，可以告诉你IO size,完成花费时间,吞吐量, 还可以统计出这次关键参数的分布 #blktrace /dev/sde -a issue -a complete -w 3600 -o -
利用blktrace分析磁盘I/O
天行健，地势坤
07-31 1497
原文：https://blog.csdn.net/ygtlovezf/article/details/80528300 blktrace对于分析block I/O是个非常好的工具，本篇文章记录了如何使用blktrace。 blktrace原理 blktrace是对通用块层（block layer）的I/O跟踪机制，它能抓取详细的I/O请求（request），发送到用户空间。 blktrace主要由...
IO神器blktrace使用介绍
QTM_Gitee的博客
09-19 2077
监控mmcblk0p1块设备，将生成的文件存储在/data目录下，一共生成4个文件，文件以trace开头，分别为trace.blktrace.0 trace.blktrace.1 trace.blktrace.2trace.blktrace.3分别对应cpu0、cpu1、cpu2、cpu3。这里会对IO进行一点优化， 但是程度很低，因为等待的时间很短，是纳秒级别的。P（plugging）：插入：即等待即将到来的更多的io请求进入队列，以便系统能进行IO优化，减少执行IO请求时花的时间。
blktrace 使用说明
06-09
通过监视内核中的块 I/O 层，blktrace 可以帮助开发者和性能分析工程师深入了解每个 I/O 请求的详细信息。这一工具由 Jens Axboe 开发和维护，他也是块 I/O 层的主要维护者之一。Alan D. Brunelle 在此基础上增加了...
blktrace监控系统IO工具
12-05
2. blktrace 需要 debugfs 文件系统来存储监控结果。 3. blktrace 的监控结果可能会很大，需要合理地处理和分析结果。 blktrace 是一个功能强大且灵活的监控系统 IO 工具，可以帮助用户深入了解系统的 IO 行为，...
blktrace-1.0.1-6.el6.i686.rpm
06-19
blktrace-1.0.1-6.el6.i686.rpm是centos工具包。
blktrace-1.0.5-8.el7.x86_64.rpm
11-30
离线安装包，亲测可用
Centos 7下通过blktrace了解io各阶段性能
bobpen的专栏
01-16 1410
操作环境 Centos 7.0 DELL R720 操作步骤 blktrace使用方法 使用blktrace之前需要挂载debugfs #mount -t debugfs debugfs /sys/kernel/debug 通过blktrace实时收集并显示硬盘操作数据，Ctrl+c退出收集 [root@localhost ~]# blktrace -d /
debugfs查找文件读写
qq_39333816的博客
07-29 716
/etc/init.d/syslog stop echo 1 > /proc/sys/vm/block_dump sleep 60 dmesg | awk '/(READ|WRITE|dirtied)/ {process[$1]++} END {for (x in process) \ print process[x],x}' |sort -nr |awk '{print $2 " " $1}' | \ head -n 10 #dmesg | egrep "READ|WRITE|dirtied"
一文带你熟悉内核调试工具 --Ftrace
最新发布
珂珂可爱多
02-06 3009
👆👀前言Ftrace是一个内部跟踪程序，旨在帮助软件开发人员和系统的设计者去发现内核内部发生了什么。它可以用于调试或分析延迟和发生在用户空间之外的性能问题。ftrace通常被认为是函数跟踪程序，但它实际上是由几个不同的跟踪实用程序组成的框架。ftrace最常见的用法之一是事件跟踪。可以通过tracefs文件系统启用贯穿内核的是数百个静态事件点，查看是内核的哪些接口被调用。
blktrace debugfs blkparse btt iostat 相关知识以及使用debugfs和blktrace来抓取占用内存的文件方法。
swrjlxc的博客
04-06 501
先看看blktrace怎么使用再去修改。debugfs是ext2  ext3 ext4文件系统提供的文件系统访问工具，通过debugfs，可以不用mount文件系统就可以直接访问，但是有一点，就是用于不通过文件系统直接对文件系统格式化过的设备进行操作。blkparse将blktrace产生的信息进行了处理 如果没有btt是不好分析处理结果的，即使blkparse进行了解析。 安装过程都是普通的...
Quickly find which file(s) belongs to a specific inode number
weixin_39833509的博客
01-19 56
For an ext4 filesystem, you can usedebugfsas in the following example: $ sudo debugfs -R 'ncheck 393094' /dev/sda2 2>/dev/null Inode Pathname 393094 /home/enzotib/examples.desktop The output obtained can be easily parsed to obtain the filename....
通过blktrace, debugfs分析磁盘IO
youling_lh的专栏
11-18 1447
前几天微博上有同学问我磁盘util达到了100%时程序性能下降的问题，由于信息实在有限，我也没有办法帮太大的忙，这篇blog只是想给他列一下在磁盘util很高的时候如何通过blktrace+debugfs找到发生IO的文件，然后再结合自己的应用程序，分析出这些IO到底是谁产生的，最终目的当然是尽量减少不必要的IO干扰，提高程序的性能。 blktrace是Jens Axobe写的一个跟踪IO请
通过blktrace, debugfs分析磁盘IO负载
qq_55722755的博客
12-08 256
通过blktrace, debugfs分析磁盘IO
debugfs 查找文件的 inode block 信息
周健华的专栏
11-01 4862
//查找设备 [root@localhost jz]# df -h Filesystem Size Used Avail Use% Mounted on /dev/sda2 18G 4.3G 13G 26% / tmpfs 495M 0 495M 0% /dev/shm /dev/sda1 291M 58M 21
Ftrace debugfs 接口使用说明（内核文档 ftrace.rst）
看我眼色行事的博客
12-01 2710
本文主要详细讲解linux下面ftrace的tracefs（debugfs）接口的使用方式，基本涵盖所有功能点的使用方式，及每个文件的具体作用，当然与之有关联的或拓展的功能如perf，kprobe等使用不在本次讲解范围。ftrace作为内核性能分析调优，跟踪内核行为等的强大工具，应该是每个内核开发人员或驱动开发人员需要掌握的一项调试手段，相信认真读完本文对ftrace的使用及帮助分析内核行为或者理解linux内核各个子模块源码是很有帮助的。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值