文件io消耗分析

最新推荐文章于 2024-02-29 13:07:32 发布
最新推荐文章于 2024-02-29 13:07:32 发布
阅读量909 收藏
点赞数
分类专栏： linux checking
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/joeyon1985/article/details/39135729
版权
linux 同时被 2 个专栏收录
199 篇文章 0 订阅
订阅专栏
checking
26 篇文章 0 订阅
订阅专栏 
Linux 3.2.0-23-generic (joeyon)    09/08/2014      _x86_64_        (8 CPU)

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           0.93    0.00    0.26    0.17    0.00   98.64

Device:            tps    kB_read/s    kB_wrtn/s    kB_read    kB_wrtn
sda               4.31        19.05        58.59  405450960 1246675495
dm-0              2.15         3.67         7.82   78042149  166417380
dm-1             12.99        15.38        50.76  327288244 1080124084

linux@joeyon:~$ pidstat
Linux 3.2.0-23-generic (joeyon)    09/08/2014      _x86_64_        (8 CPU)

12:07:27 PM       PID    %usr %system  %guest    %CPU   CPU  Command
12:07:27 PM         1    0.00    0.00    0.00    0.00     6  init
12:07:27 PM         2    0.00    0.00    0.00    0.00     7  kthreadd
12:07:27 PM         3    0.00    0.01    0.00    0.01     0  ksoftirqd/0
12:07:27 PM         7    0.00    0.00    0.00    0.00     0  watchdog/0
12:07:27 PM         9    0.00    0.12    0.00    0.12     1  kworker/1:0
12:07:27 PM        10    0.00    0.00    0.00    0.00     1  ksoftirqd/1
12:07:27 PM        12    0.00    0.00    0.00    0.00     1  watchdog/1
12:07:27 PM        15    0.00    0.00    0.00    0.00     2  ksoftirqd/2
12:07:27 PM        16    0.00    0.00    0.00    0.00     2  watchdog/2
12:07:27 PM        19    0.00    0.00    0.00    0.00     3  ksoftirqd/3
12:07:27 PM        20    0.00    0.00    0.00    0.00     3  watchdog/3
12:07:27 PM        23    0.00    0.00    0.00    0.00     4  ksoftirqd/4
12:07:27 PM        24    0.00    0.00    0.00    0.00     4  watchdog/4
12:07:27 PM        25    0.00   31.57    0.00   31.57     5  migration/5
12:07:27 PM        27    0.00    0.00    0.00    0.00     5  ksoftirqd/5
12:07:27 PM        28    0.00    0.00    0.00    0.00     5  watchdog/5
12:07:27 PM        31    0.00    0.00    0.00    0.00     6  ksoftirqd/6
12:07:27 PM        32    0.00    0.00    0.00    0.00     6  watchdog/6
12:07:27 PM        35    0.00    0.00    0.00    0.00     7  ksoftirqd/7
12:07:27 PM        36    0.00    0.00    0.00    0.00     7  watchdog/7
12:07:27 PM        42    0.00    0.00    0.00    0.00     1  sync_supers
12:07:27 PM        43    0.00    0.00    0.00    0.00     7  bdi-default
12:07:27 PM        50    0.00    0.08    0.00    0.08     2  kworker/2:1
12:07:27 PM        51    0.00    0.04    0.00    0.04     3  kworker/3:1
12:07:27 PM        52    0.00    0.02    0.00    0.02     4  kworker/4:1
12:07:27 PM        54    0.00    0.02    0.00    0.02     6  kworker/6:1
12:07:27 PM        55    0.00    0.02    0.00    0.02     7  kworker/7:1
12:07:27 PM        57    0.00    0.00    0.00    0.00     6  khungtaskd
12:07:27 PM        58    0.00    0.00    0.00    0.00     2  kswapd0
12:07:27 PM        59    0.00    0.00    0.00    0.00     7  kswapd1
12:07:27 PM        62    0.00    0.00    0.00    0.00     4  fsnotify_mark
12:07:27 PM        73    0.00    0.00    0.00    0.00     6  scsi_eh_0
12:07:27 PM        74    0.00    0.00    0.00    0.00     7  scsi_eh_1
12:07:27 PM        77    0.00    0.00    0.00    0.00     7  scsi_eh_3
12:07:27 PM       328    0.00    0.03    0.00    0.03     4  kworker/4:2
12:07:27 PM       350    0.00    0.00    0.00    0.00     0  kjournald
12:07:27 PM       437    0.00    0.00    0.00    0.00     0  upstart-udev-br
12:07:27 PM       443    0.00    0.00    0.00    0.00     5  udevd
12:07:27 PM       932    0.00    0.00    0.00    0.00     0  kjournald
12:07:27 PM       943    0.00    0.01    0.00    0.01     0  kjournald
12:07:27 PM       967    0.00    0.00    0.00    0.00     2  flush-252:0
12:07:27 PM       969    0.00    0.00    0.00    0.00     4  sshd
12:07:27 PM      1071    0.00    0.00    0.00    0.00     5  dbus-daemon
12:07:27 PM      1077    0.00    0.00    0.00    0.01     2  rsyslogd
12:07:27 PM      1166    0.00    0.00    0.00    0.00     5  cron
12:07:27 PM      1167    0.00    0.00    0.00    0.00     2  atd
12:07:27 PM      1171    0.01    0.02    0.00    0.02     5  irqbalance
12:07:27 PM      1182    0.00    0.01    0.00    0.01     7  nrpe
12:07:27 PM      1203    0.00    0.00    0.00    0.00     1  nginx
12:07:27 PM      2278    0.00    0.02    0.00    0.02     0  kworker/0:1
12:07:27 PM      7400    0.00    0.00    0.00    0.00     4  flush-252:1
12:07:27 PM      8384    0.00    0.00    0.00    0.00     6  sshd
12:07:27 PM      8398    0.00    0.00    0.00    0.00     5  sshd
12:07:27 PM      8542    0.00    0.00    0.00    0.00     1  bash
12:07:27 PM      8663    0.00    0.00    0.00    0.00     2  bash
12:07:27 PM      8812    0.00    0.00    0.00    0.00     1  sshd
12:07:27 PM      8826    0.00    0.00    0.00    0.00     4  sshd
12:07:27 PM      8827    0.00    0.00    0.00    0.00     7  bash
12:07:27 PM      8950    0.00    0.00    0.00    0.00     6  bash
12:07:27 PM      9788    0.00    0.00    0.00    0.00     5  sshd
12:07:27 PM      9802    0.00    0.00    0.00    0.00     5  sshd
12:07:27 PM     10786    0.00    0.00    0.00    0.00     6  bash
12:07:27 PM     12636    0.00    0.00    0.00    0.00     0  kworker/0:2
12:07:27 PM     15792    0.02    0.01    0.00    0.03     5  java
12:07:27 PM     15860    0.02    0.01    0.00    0.03     6  java
12:07:27 PM     15919    0.01    0.00    0.00    0.01     5  java
12:07:27 PM     16014    0.01    0.00    0.00    0.01     5  java
12:07:27 PM     16071    0.00    0.00    0.00    0.00     5  nginx
12:07:27 PM     16072    0.00    0.00    0.00    0.00     1  nginx
12:07:27 PM     16073    0.00    0.00    0.00    0.00     6  nginx
12:07:27 PM     16074    0.00    0.00    0.00    0.00     2  nginx
12:07:27 PM     16075    0.00    0.00    0.00    0.00     4  nginx
12:07:27 PM     16076    0.00    0.00    0.00    0.00     5  nginx
12:07:27 PM     16077    0.00    0.00    0.00    0.00     2  nginx
12:07:27 PM     16078    0.00    0.00    0.00    0.00     3  nginx
12:07:27 PM     16101    0.01    0.00    0.00    0.01     3  java
12:07:27 PM     16150    0.01    0.00    0.00    0.01     5  java
12:07:27 PM     16452    0.02    0.01    0.00    0.03     5  java
12:07:27 PM     18571    0.00    0.02    0.00    0.02     5  kworker/5:1
12:07:27 PM     26970    0.00    0.00    0.00    0.00     6  kworker/u:1
12:07:27 PM     29523    0.00    0.00    0.00    0.00     4  kworker/u:2
linux@joeyon:~$ pidstat  -d -t -p 15792
Linux 3.2.0-23-generic (joeyon)    09/08/2014      _x86_64_        (8 CPU)

12:08:24 PM      TGID       TID   kB_rd/s   kB_wr/s kB_ccwr/s  Command
12:08:24 PM     15792         -      0.00      0.09      0.00  java
12:08:24 PM         -     15792      0.00      0.00      0.00  |__java
12:08:24 PM         -     15793      0.00      0.00      0.00  |__java
12:08:24 PM         -     15794      0.00      0.00      0.00  |__java
12:08:24 PM         -     15795      0.00      0.00      0.00  |__java
12:08:24 PM         -     15796      0.00      0.00      0.00  |__java
12:08:24 PM         -     15797      0.00      0.00      0.00  |__java
12:08:24 PM         -     15798      0.00      0.00      0.00  |__java
12:08:24 PM         -     15799      0.00      0.00      0.00  |__java
12:08:24 PM         -     15800      0.00      0.00      0.00  |__java
12:08:24 PM         -     15801      0.00      0.00      0.00  |__java
12:08:24 PM         -     15802      0.00      0.00      0.00  |__java
12:08:24 PM         -     15803      0.00      0.00      0.00  |__java
12:08:24 PM         -     15804      0.00      0.00      0.00  |__java
12:08:24 PM         -     15805      0.00      0.00      0.00  |__java
12:08:24 PM         -     15806      0.00      0.00      0.00  |__java
12:08:24 PM         -     15807      0.00      0.00      0.00  |__java
12:08:24 PM         -     15808      0.00      0.00      0.00  |__java
12:08:24 PM         -     15809      0.00      0.00      0.00  |__java
12:08:24 PM         -     15810      0.00      0.00      0.00  |__java
12:08:24 PM         -     15811      0.00      0.00      0.00  |__java
12:08:24 PM         -     15812      0.00      0.01      0.00  |__java
12:08:24 PM         -     15830      0.00      0.00      0.00  |__java
12:08:24 PM         -     15843      0.00      0.00      0.00  |__java
12:08:24 PM         -     15844      0.00      0.00      0.00  |__java
12:08:24 PM         -     15845      0.00      0.00      0.00  |__java
12:08:24 PM         -     15846      0.00      0.00      0.00  |__java
12:08:24 PM         -     15847      0.00      0.00      0.00  |__java
12:08:24 PM         -     15848      0.00      0.00      0.00  |__java
12:08:24 PM         -     15881      0.00      0.08      0.00  |__java
12:08:24 PM         -     15882      0.00      0.00      0.00  |__java
12:08:24 PM         -     15883      0.00      0.00      0.00  |__java
12:08:24 PM         -     15884      0.00      0.00      0.00  |__java
12:08:24 PM         -     15885      0.00      0.00      0.00  |__java
12:08:24 PM         -     15886      0.00      0.00      0.00  |__java
12:08:24 PM         -     15887      0.00      0.00      0.00  |__java
12:08:24 PM         -     15888      0.00      0.00      0.00  |__java
12:08:24 PM         -     15889      0.00      0.00      0.00  |__java
12:08:24 PM         -     15890      0.00      0.00      0.00  |__java
12:08:24 PM         -     15891      0.00      0.00      0.00  |__java
12:08:24 PM         -     15892      0.00      0.00      0.00  |__java
12:08:24 PM         -     15893      0.00      0.00      0.00  |__java
12:08:24 PM         -     15894      0.00      0.00      0.00  |__java
12:08:24 PM         -     15895      0.00      0.00      0.00  |__java
12:08:24 PM         -     28454      0.00      0.00      0.00  |__java

追寻北极
关注
专栏目录
4. 文件IO效率问题与解决技巧
weixin_41207499的博客
10-17 741
一. 如何读写文本文件 实际案列 某文本文件编码格式(如UTF-8, GBK, BIG5), 在python2和python3 中分别如何读取该文件？ 原理 字符串的语义变化 python2 python3 -------------------------- str -> bytes unicode -> ...
文件IO消耗分析
glamour2015的博客
03-22 968
Linux文件IO消耗分析工具介绍 Linux在操作文件时，将数据放入文件缓存区，直到内存不够或系统要释放内存给用户进程使用时，才写入文件中。因此在查看Linux内存状况时经常会发现可用(free)的物理内存不多，但cached用了很多，这是Linux提升文件IO速度的一种做法，在这种做法下，如物理空闲内存够用，通常在Linux上只有写文件和第一次读取文件时会产生真正的文件IO. 在Linux中要...
Linux查询谁在消耗IO
IT汪的博客
06-10 775
pidstat -dl 5（每5秒打一次） cat /proc/902/io （902为进程号） lsof -p 902 （902为进程号）
各种读取方式对CPU的消耗
cotchte0421的博客
09-06 502
表大小136 BLOCKS17,408 cpu_time代表百万分之一秒 读取方式 ...
Linux 不同方法查看进程消耗CPU IO 等
weixin_33720078的博客
05-27 118
1、用top命令指定固定的PID top -p 10997 查询指定进程的PID ps -ef | grep zookeeper jim 10997 1959 0 12月14 pts/2 00:00:01 /usr/lib/jvm/java-8-oracle/bin/java -Dzookeeper.log.dir=. -Dzookeeper.root.logger=I...
IO消耗和处理器消耗
后台开发
08-24 1万+
linux操作系统博大精深，对操作系统的掌握的掌握程度对编写代码非常有帮助。下面看一下IO消耗和处理器消耗的不同。I/O消耗型进程：程序运行时的大部分时间都在提交或者等待I/O请求，因此这样的进程要经常处于运行状态，但通常都是短短的一会儿，所以处理器倾向于优先调度I/O消耗型的进程。该类进程优先级高，时间片长。而优先调度该类进程是为了让该类进程是为了尽可能地消耗其所需要的处理器资源，从而让该进程阻塞住，这样只要用户一完成I/O操作，该进程就会被唤醒，从而立刻处理I/O操作，那么在用户看来，该进程响应非常快，
Oracle数据库服务器IO高的分析方案.docx
10-15
此时可以通过优化这条SQL语句来降低其IO消耗，从而提高整体性能。 #### 谨记于心——ORACLE DBA判断IO性能问题的标准 为了判断Oracle数据库服务器是否存在IO性能问题，通常需要关注以下几个指标： **知识点：** ...
linux IO 系统的开销比较（文件逆序）
06-14
然而，内存映射可能会消耗大量内存，如果文件过大，可能会对系统资源造成压力。 `lio.c`可能使用了Linux的异步I/O（Asynchronous I/O，AIO）模型。异步I/O允许程序在发起I/O操作后立即返回，而不是等待操作完成，...
Linux磁盘性能方法以及磁盘io性能分析
最新发布
李姓门徒
02-29 4133
磁盘性能是衡量计算机系统运行状况的关键因素之一。对于磁盘性能的测试和分析，Fio 和 dd 是两个常用的工具。在这篇文章中，将介绍如何使用 Fio 进行磁盘 I/O 测试，以及如何分析磁盘性能。同时，还会简单介绍 dd 工具的使用。 Fio 是一个灵活的 I/O 测试工具，支持多种工作模式，包括顺序读写、随机读写等。在安装 Fio 时，可以选择通过 yum 或编译源码进行安装。Fio 的测试报告中包含了丰富的信息，包括吞吐量和时延等指标。 除了 Fio 以外，dd 也是一个常用的磁盘测试工具。dd 可以
JavaIO性能分析[定义].pdf
10-11
Java IO性能分析主要关注如何有效地处理输入和输出操作，这对于任何软件开发，特别是涉及大量数据交换的...在处理大文件或者高并发的I/O操作时，优化I/O性能显得尤为重要，能够显著减少资源消耗，提升应用响应速度。
【总结】性能调优：IO消耗分析
阿利在努力
04-23 9296
如何分析IO消耗？IO消耗分文件IO和网络IO。对于文件IO，主要是输入输出流与内存的消耗。而网络IO，一般是网卡的吞吐量，java程序一般不会产生网络IO消耗....
文件io和网络io
qq_37436172的博客
09-18 1266
文件Io 一、输入及输出的概念 1.1 什么是 I/O 是指程序与外部设备或其他计算机进行交互的操作。 几乎所有的程序都具有输入与输出操作。 如从键盘上读取数据，从本地或网络_上的文件读取数据或写入数据等。 通过输入和输出操作可以从外界接收信息，或者是把信息传递给外界。 Java把这些输入与输出操作用流来实现，通过统一的接口来表示，从而使程序设计更为简单。 1.2 输入输出(I/0) 入还是出事相对于内存 把数据读到内存中，称为输入，即 input，进行数据的 read 操作 往内存外部设备写数据，称为输出
记一次iotop分析磁盘占用io问题
why_me310的博客
03-21 8791
问题描述                     某一台服务器上面 程序在每小时内偶尔丢包 排查服务器所有性能瓶颈之后发现一个奇怪的问题 程序丢包前后 会有IO过高的情况 于是使用iotop命令排查是哪个程序偶尔占用过高的磁盘IO所用命令                   iotop相关参数  -o：只显示有io操作的进程 -b：批量显示，无交互，主要用作记录到文件 -...
CPU、内存、磁盘IO之间的关系
不学习，永远发现不了自己的潜力
04-29 1万+
CPU和内存的关系： CPU是负责运算和处理的，内存是交换数据的。        当程序或者操作者对CPU发出指令，这些指令和数据暂存在内存里，在CPU空闲时传送给CPU，CPU处理后把结果输出到输出设备上，输出设备就是显示器，打印机等。在没有显示完之前，这些数据也保存在内存里，如果内存不足，那么系统自动从硬盘上划分一部分空...
JAVA CPU,IO 消耗分析
kevin_Luan的专栏
11-30 1万+
使用 TOP 查看CPU的消耗情况 top - 11:32:49 up 26 days, 45 min,  2 users,  load average: 0.20, 0.08, 0.07 Tasks: 471 total,   1 running, 470 sleeping,   0 stopped,   0 zombie Cpu(s):  1.4%us,  0.2%sy,  0.0%n
文件IO操作的最佳实践
gt9000的博客
01-04 528
文章概要 已经过去的中间件性能挑战赛，和正在进行中的 第一届 PolarDB 数据性能大赛 都涉及到了文件操作，合理地设计架构以及正确地压榨机器的读写性能成了比赛中获取较好成绩的关键。正在参赛的我收到了几位公众号读者朋友的反馈，他们大多表达出了这样的烦恼：“对比赛很感兴趣，但不知道怎么入门”，“能跑出成绩，但相比前排的选手，成绩相差10倍有余”…为了能让更多的读者参与到之后相类似的比赛中来，我简单...
Linux服务器内存、CPU、文件系统、磁盘IO性能以及网络连通性shell巡检
热门推荐
谷洪的博客
09-27 4万+
shell自动巡检服务器基础配置         每个项目都要部署在服务器上，那么服务器的安全性能和一些基本情况是我们需要了解的，比如服务器CPU、内存、文件系统、磁盘IO、还有一些网络连通性等等，这些操作很多项目组都是安排一个特定的巡检人员来完成，那么为什么不写一个shell脚本来自动巡检服务器而代替人工操作呢，下面给出巡检的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值