io密集服务器cpu性能,IO密集型和CPU密集型 线程数的计算

最新推荐文章于 2024-09-13 12:35:54 发布
最新推荐文章于 2024-09-13 12:35:54 发布
阅读量898 收藏 3
点赞数
文章标签： io密集服务器cpu性能
本文探讨了CPU密集型和IO密集型应用的线程管理。对于CPU密集型任务，理想的线程数等于CPU核心数，以避免上下文切换开销。而对于IO密集型应用，线程数应为CPU核心数除以（1-阻塞系数），以提高并发效率。阻塞系数反映了IO操作所占的时间比例。合理的线程池大小能有效利用服务器资源，避免浪费。
摘要由CSDN通过智能技术生成

CPU密集型

每一个CPU核心都参与计算，将CPU的性能充分利用起来，这样才算是没有浪费服务器配置，如果在非常好的服务器配置上还运行着单线程程序那将是多么重大的浪费。对于计算密集型的应用，完全是靠CPU的核数来工作，所以为了让它的优势完全发挥出来，避免过多的线程上下文切换，比较理想方案是：

线程数= CPU核数

IO密集型

对于IO密集型的应用，就很好理解了，我们现在做的开发大部分都是WEB应用，涉及到大量的网络传输，不仅如此，与数据库，与缓存间的交互也涉及到IO，一旦发生IO，线程就会处于等待状态，当IO结束，数据准备好后，线程才会继续执行。因此从这里可以发现，对于IO密集型的应用，我们可以多设置一些线程池中线程的数量，这样就能让在等待的这段时间内，线程可以去做其它事，提高并发处理效率。

那么这个线程池的数据量是不是可以随便设置呢？当然不是的，请一定要记得，线程上下文切换是有代价的。目前总结了一套公式，对于IO密集型应用：

线程数= CPU核心数/(1-阻塞系数)

阻塞系数: 阻塞系数越高表明在准备数据的时间越长(阻塞时间长)。

即阻塞系数 = 阻塞时间 /(阻塞时间 + 计算时间) 如总时间 10    阻塞9 计算1 及阻塞系数=9/(9+1)=0.9

一般情况下线程数 计算型=Ncpu+1       IO型=2Ncpu

weixin_39971138
关注
线程池 核心线程数设定公式
悠忧南士
03-22 3902
1.先看下机器的CPU核数，然后在设定具体参数： System.out.println(Runtime.getRuntime().availableProcessors()); 即CPU核数 =Runtime.getRuntime().availableProcessors() 2.分析下线程池处理的程序是CPU密集型，还是IO密集型 CPU密集型：核心线程数 = CPU核数+ 1 ...
根据CPU密集型与IO密集型进程来控制线程池中的线程数量
laomumu1992的博客
05-17 2179
CPU密集型（CPU-bound） CPU密集型也叫计算密集型，指的是系统的硬盘、内存性能相对CPU要好很多，此时，系统运作大部分的状况是CPU Loading 100%，CPU要读/写I/O(硬盘/内存)，I/O在很短的时间就可以完成，而CPU还有许多运算要处理，CPU Loading很高。 在多重程序系统中，大部份时间用来做计算、逻辑判断等CPU动作的程序称之CPU...
线程与进程 计算密集型 IO密集型
心之所向
08-11 4896
线程与进程： 　　线程和进程通常都有一个主线/进程的负责分配任务和其他子线/进程负责执行任何。 　　多进程的优点在于一个子进程挂了，不会影响其他进程（主进程挂了就全挂了），但是其创建的代价较大，Apache采用的就是多进程机制； 　　而多线程一般要比多进程执行效率要高，但是由于共享内存一旦子线程挂了，就全挂了，ISS采用的就是多线程机制。 计算密集型 IO密集型 　　计算密集型任务主要消耗
多线程篇（线程池- CPU密集型 & IO密集型任务）（持续更新迭代）
最新发布
wlcass zhengge blog
09-13 1333
通常我们会开CPU核心数数倍的线程，在线程进行 I/O 操作 CPU 空闲时，启用其他线程继续使用 CPU，以提高 CPU 的使用率，充分利用。我们在选择线程池的时候，我们需要知道某一个任务是否是CPU消耗型的任务，还是说IO类型的任务，以便充分的调用CPU资源。我们需要知道某一个任务是否是CPU消耗型的任务（定容线程池），还是说IO类型的任务（缓存线程池），充分的调用CPU资源。I/O密集型相反，听名字就知道，系统运行多是CPU在等I/O (硬盘/内存) 的读写操作，此类情景下CPU负载并不高。
合理配置线程池核心线程数（IO密集型和CPU密集型）
热门推荐
Java进阶之路
08-09 1万+
1. 代码查看服务器的核心数 要合理配置线程数首先要知道公司服务器是几核的 代码查看服务器核数： System.out.println(Runtime.getRuntime().availableProcessors()); 2. 合理线程数配置之CPU密集型 CPU密集的意思是该任务需要大量的运算，而没有阻塞，CPU一直全速运行。 CPU密集任务只有在真正的多核CPU上才可能得到加速（通过多线程），而在单核CPU上，无论你开几个模拟的多线程该任务都不可能得到加速，因为CPU总的运算能力就那些。 CPU密
IO密集型任务该如何设置线程池线程数
qq_40094078的博客
10-25 3941
CPU密集 CPU密集型的话，一般配置CPU处理器个数+/-1个线程，所谓CPU密集型就是指系统大部分时间是在做程序正常的计算任务，例如数字运算、赋值、分配内存、内存拷贝、循环、查找、排序等，这些处理都需要CPU来完成。 IO密集 IO密集型的话，是指系统大部分时间在跟I/O交互，而这个时间线程不会占用CPU来处理，即在这个时间范围内，可以由其他线程来使用CPU，因而可以多配置一些线程。（线程处于io等待或则阻塞状态时,不会占用CPU资源） 混合型 混合型的话，是指两者都占有一定的时间。
IO密集型和CPU密集型程序-概念与实现
lymboy的博客
02-08 2292
大多数程序都是一种折衷的方式，即同时存在 IO 密集型和 CPU 密集型的特征。因此，在设计程序时需要适当考虑两者的平衡，以确保程序的效率和可用性。
对CPU密集型计算和IO密集型运算，应该选择多进程还是多线程？
qq_23183809的博客
06-04 2428
最近在看python多线程部分，看了一些资料说对于Python如果是CPU密集型应该用多进程模型，如果是IO密集型应该用多线程模型。后者可以理解。但是，为什么CPU密集型的要用多进程呢？不是进程占用的资源很多，进程切换就占用很多CPU资源，这样合理吗？ Neo Ko 无 12 人赞同了该回答 Python，特指CPython的实现，由于GIL的存在，CPython不能有效的利用多核处理器。表现为任意时间一个进程只有一个线程在跑，而IO密集型运算，多数是在IO读写将线程堵塞掉了，这个时候线程切换...
IO密集型线程和CPU密集型线程
TABE_的博客
09-06 3290
CPU密集任务只有在真正的多核CPU上才可能得到加速，而在单核CPU上，无论你开几个模拟的多线程该任务都不可能得到加速，因为CPU总的运算能力就只有这么多。CPU密集型也叫计算密集型，指的是系统的硬盘、内存性能相对CPU要好很多，此时，系统运作CPU读写IO(硬盘/内存)时，IO可以在很短的时间内完成，而CPU还有许多运算要处理，因此，CPU负载很高。IO密集型指的是系统的CPU性能相对硬盘、内存要好很多，此时，系统运作，大部分的状况是CPU在等IO (硬盘/内存) 的读写操作，因此，CPU负载并不高。
如何区分IO密集型、CPU密集型任务？
q66562636的博客
06-09 7867
日常开发中，我们时常会听到什么IO密集型、CPU密集型任务...那么这里提一个问题：大家知道什么样的任务或者代码会被认定为IO/CPU密集？又是用什么样的标准来认定IO/CPU密集？如果你没有明确的答案，那么就随着这篇文章一起来聊一聊吧。最近团队里有基础技术的同学对项目中的线程池进行了重新设计，调整了IO线程池等线程池的优化。因此借助这个机会也就了解了一波开篇的那些问题。这一部分经验丰富的同学都很熟悉。比如：1.1、IO密集型任务一般来说：文件读写、DB读写、网络请求等1.2、CPU密集型任务一般来说：计算
多线程的CPU密集型和IO密集型
Hai-Yang-code的博客
07-07 1931
线程是否越多越好？ 分析如下： 对于cpu密集型 一个计算为主的程序（专业一点称为CPU密集型程序）。多线程跑的时候，可以充分利用起所有的cpu核心，比如说4个核心的cpu,开4个线程的时候，可以同时跑4个线程的运算任务，此时是最大效率。 但是如果线程远远超出cpu核心数量 反而会使得任务效率下降，因为频繁的切换线程也是要消耗时间的。 因此对于cpu密集型的任务来说，线程数等于cpu数是最好的了。 对于IO密集型 如果是一个磁盘或网络为主的程序（IO密集型）。一个线程处在IO等待的时候，另一个线程还可
CPU密集型和IO密集型的多线程总结
wcfcangzhuo的博客
11-12 1358
首先要明白多线程在单核和多核CPU的运行机制： 多线程在单核CPU运行时，同一时间只能处理一个线程，系统会切换线程，给每个线程分配时间片来跑。 由于线程间的切换会增加系统的开销，所以多线程在多核CPU上跑时，除了能够在同一时间处理多个线程，还能避免线程间切换带来的开销。 CPU密集型程序 一个计算量很大的程序（也称作CPU密集型程序），多线程跑的时候，不存在阻塞的情况，可以充分利用所有的CPU的核。 假如当前CPU只有四核，要使程序运行的效率最高，需使线程池的容量为4，同时跑4个线程的计算任务。如
线程池大小设置
qq_41939859的博客
12-30 1428
一、不同场景下线程数量的选择 CPU密集型 CPU密集型也叫计算密集型，指的是系统的硬盘、内存性能相对CPU要好很多，此时，系统运作CPU读写IO(硬盘/内存)时，IO可以在很短的时间内完成，而CPU还有许多运算要处理，因此，CPU负载很高。 CPU密集表示该任务需要大量的运算，而没有阻塞，CPU一直全速运行。CPU密集任务只有在真正的多核CPU上才可能得到加速（通过多线程），而在单核CPU上，无论你开几个模拟的多线程该任务都不可能得到加速，因为CPU总的运算能力就只有这么多。 CPU使用率较高（例如:计算
第225天学习打卡（知识点回顾 线程池CPU密集型 IO密集型）
doudoutj的博客
08-21 147
知识点回顾 线程池 合理配置线程池的考虑： CPU密集型： CPU密集的意思是该任务需要大量的运算，而没有阻塞，CPU一直全速运行。 CPU密集型任务只有在真正的多核CPU上才能得到加速（通过多线程）。 而在单核上，无论开几个模拟的多线程都不可能得到加速，因为CPU总的运算能力是有限的。 CPU密集型任务配置尽可能少的线程数量： 一般公式：CPU核数+1个线程的线程池 IO密集型 IO密集型，即该任务需要大量的IO,即大量的阻塞。 在单线程上运行IO密集型的任务会导致浪费大量的CPU运算能力浪费在等待。 所
CPU密集型、IO密集型
kk阿彬
08-23 1159
CPU密集型（CPU-bound） CPU密集型也叫计算密集型，指的是系统的硬盘、内存性能相对CPU要好很多，此时，系统运作大部分的状况是CPU Loading 100%，CPU要I/O，I/O在很短的时间就可以完成，而CPU还有许多运算要处理，CPU Loading很高。 在多重程序系统中，大部份时间用来做计算、逻辑判断等CPU动作的程序称之CPU bound。例如一个计算圆周率至小数点一千位以下的程序，在执行的过程当中绝大部份时间用在三角函数和开根号的计算，便是属于CPU bound的程序。 CPU b
[线程池]CPU密集型和IO密集型对 CPU内核之间的关系
长夜烛火的博客
12-07 513
​ 在开发过程中，经常要使用到线程池，然而在自定义线程池的过程中，核心线程数应该如何设置呢？一般网上的答案是，根据IO密集型和CPU密集型进行区别设置先不说实际运用中是否按照以上公式设置，我们先来看一下什么是IO密集型程序和CPU密集型程序。
Linux通过上下文切换(ctxt_switches )判断程序属于IO密集型还是计算密集型
虚拟-Worder的博客
11-10 3427
前言 判断一个程序属于IO密集型还是计算密集型有利于后续对程序进行并行优化，尤其是Cpython解释器下的python程序（GIL锁）。本文将先介绍判断方法，再结合一个实际案例进行分析。 上下文切换 上下文切换一般指用户态和内核态间的切换，通常切换的发生是因为用户程序在运行过程中产生了系统调用。在Linux中，上下文切换可分为自愿上下文切换（voluntary_ctxt_switches）和非自愿上下文切换（nonvoluntary_ctxt_switches），自愿上下文切换如字面意思，是一种主动的
CPU io-密集型 计算密集型
每天进步一点点的专栏
08-10 3743
核心是可以分别独立运行程序指令的计算单元。 线程是操作系统能够进行运算调度的最小单位。 有一个原则是：活跃线程数为 CPU(核)数时最佳。过少的活跃线程导致 CPU 无法被充分利用，过多的活跃线程导致过大的线程上下文切换开销。 线程应该是活跃的，处于 IO 的线程，休眠的线程等均不消耗 CPU。 在Java并发编程方面，计算密集型与IO密集型是两个非常典型的例子，这次大象就来讲讲自己在这方面...
在单核centos7服务器上部署IO密集型项目
这个人很懒，什么都没有留下
03-31 190
在单核服务器上部署IO密集型项目，通过多种方式减轻服务器压力
服务器并发提速问题：io密集型，计算密集型
chitangyao7779的博客
06-24 648
服务器并发：大量客户端同时访问，响应多个客户端。 对于人数少的，数据交互量小的，单进程，单工作线程即可处理。 对于单核cpu，开多工作线程，在线程切换上是很影响效率的，但是对于不同的程序，单核多线程也可提成服务器的工作效率。 io密集型程序：工作线程处理的回调函数，处于io阻塞状态，比如...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值