超多线程初始化和启动性能测试与分析

最新推荐文章于 2021-02-24 21:20:32 发布
最新推荐文章于 2021-02-24 21:20:32 发布
阅读量666 收藏
点赞数
分类专栏： 性能测试 Java程序设计 文章标签： 越多线程测试 Java 性能 性能分析 线程初始化
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-NC-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43145361/article/details/86132769
版权

测试时间：2019/01/09
测试目的：java多线程在线程数超大时的性能
测试方法：使用运行1000, 10000, 50000, 100000和其他辅助数量的线程进行时间和内存的监视，对Thread和Runnable都进行了测试。
实验硬件：台式电脑一台，配置为 i7 3930K 6C12T, 32GB DDR 1833, 256GB SSD.
实验结论：

  1. Runnable和Thread性能差距可以忽视。
  2. 线程数在1万以下，每秒可以初始化和启动1万条线程，而总量超过1.1万条以后，每秒只能启动约2500条线程。所以建议在一个java程序中开启的线程中不要超过1万个。
  3. 另外补充了一个实验，同时运行2个程序（两个进程）各建立1万和10万条线程，发现彼此独立没有影响，所以，如果需要更多的线程。这可以采用多程序（多进程）来实现。

附：所用到的java代码和实验输出数据。

// 主程序入口
public class MassiveThreadTest {

	public static void main(String[] args) {
		int threadCount = args.length > 0 ? Integer.parseInt(args[0]) : 1000;
		int type = args.length > 1 && "0".equals(args[1]) ? 0 : 1;

		if (type == 0)
			runByThread(threadCount);
		else
			runByRunnable(threadCount);
	}


	static void runByThread(int threadCount) {

		showMemory();
		long t1 = System.currentTimeMillis();
		ThreadUnit[] arr = new ThreadUnit[threadCount];

		showMemory();
		for (int i = 0; i < arr.length; i++)
			arr[i] = new ThreadUnit();

		showMemory();
		long t2 = System.currentTimeMillis();
		for (int i = 0; i < arr.length; i++)
			arr[i].start();

		showMemory();
		long t3 = System.currentTimeMillis();

		System.out.printf("Init: %d ms. \nStart: %d ms.\n", t2 - t1, t3 - t2);
	}


	static void runByRunnable(int threadCount) {
		showMemory();
		long t1 = System.currentTimeMillis();
		RunnableUnit[] arr = new RunnableUnit[threadCount];

		showMemory();
		for (int i = 0; i < arr.length; i++)
			arr[i] = new RunnableUnit();

		showMemory();
		long t2 = System.currentTimeMillis();
		for (int i = 0; i < arr.length; i++)
			new Thread(arr[i]).start();

		showMemory();
		long t3 = System.currentTimeMillis();

		System.out.printf("Init: %d ms. \nStart: %d ms.\n", t2 - t1, t3 - t2);
	}
	
	/**
	 * Format a integer to GB, MB or KB
	 * 
	 * @param filesize
	 * @return
	 */
	public static String formatFileSize(long filesize) {
		if (filesize < 0) {
			return "Error: Current filesize is less then zero. (Size = " + filesize + ")";
		}
		long quotion = filesize;
		long mode = 0;
		double result = quotion;
		int i = 0;
		String[] name = { "B", "KB", "MB", "GB", "TB", "PB", "ZB" };
		String str = "";

		while (true) {
			if (result < 1024) {
				str = String.format("%4.2f %s", result, name[i]);
				break;
			}

			i++;
			mode = quotion % 1024;
			quotion = quotion / 1024;
			result = mode * 1.0 / 1024 + quotion;

			if (i >= name.length) {
				str = "too large to express...";
				break;
			}
		}
		return str;
	}

	/**
	 * show memory info
	 */
	public static void showMemory() {
		Runtime r = Runtime.getRuntime();
		long mfree = r.freeMemory();
		long mtotal = r.totalMemory();
		long mused = mtotal - mfree;

		System.out.printf("used = %s, free = %s, total = %s.\n", formatFileSize(mused), formatFileSize(mfree),
				formatFileSize(mtotal));
	}

}


public class RunnableUnit implements Runnable {

	@Override
	public void run() { 
		try {
			Thread.sleep(1000);
		} catch (InterruptedException e) {
			// TODO Auto-generated catch block
			e.printStackTrace();
		}
	}
	
}


public class ThreadUnit extends Thread {
	@Override
	public void run() {
		try {
			Thread.sleep(1000);
		} catch (InterruptedException e) {
			// TODO Auto-generated catch block
			e.printStackTrace();
		}
	}
}

实际运行结果。

Microsoft Windows [版本 10.0.17134.471]
(c) 2018 Microsoft Corporation。保留所有权利。

D:\data>java -jar HelloWorld.jar
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
Init: 16 ms.
Start: 84 ms.

D:\data>java -jar HelloWorld.jar 10000
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
Init: 35 ms.
Start: 904 ms.

D:\data>java -jar HelloWorld.jar 100000
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 61.68 MB, free = 429.32 MB, total = 491.00 MB.
used = 61.68 MB, free = 429.32 MB, total = 491.00 MB.
Init: 181 ms.
Start: 34217 ms.

D:\data>java -jar HelloWorld.jar 50000
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 33.41 MB, free = 457.59 MB, total = 491.00 MB.
used = 33.41 MB, free = 457.59 MB, total = 491.00 MB.
Init: 101 ms.
Start: 17386 ms.

D:\data>java -jar HelloWorld.jar 20000
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 15.42 MB, free = 475.58 MB, total = 491.00 MB.
used = 15.42 MB, free = 475.58 MB, total = 491.00 MB.
Init: 62 ms.
Start: 5061 ms.

D:\data>java -jar HelloWorld.jar 10000
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
Init: 40 ms.
Start: 899 ms.

D:\data>java -jar HelloWorld.jar 1000
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
Init: 13 ms.
Start: 90 ms.

D:\data>java -jar HelloWorld.jar 5000
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 7.71 MB, free = 483.29 MB, total = 491.00 MB.
used = 7.71 MB, free = 483.29 MB, total = 491.00 MB.
Init: 36 ms.
Start: 411 ms.

D:\data>java -jar HelloWorld.jar 10000
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
Init: 52 ms.
Start: 900 ms.

D:\data>java -jar HelloWorld.jar 15000
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 12.85 MB, free = 478.15 MB, total = 491.00 MB.
used = 12.85 MB, free = 478.15 MB, total = 491.00 MB.
Init: 48 ms.
Start: 3921 ms.

D:\data>java -jar HelloWorld.jar 12000
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 12.85 MB, free = 478.15 MB, total = 491.00 MB.
used = 12.85 MB, free = 478.15 MB, total = 491.00 MB.
Init: 41 ms.
Start: 3188 ms.

D:\data>java -jar HelloWorld.jar 10100
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
Init: 39 ms.
Start: 882 ms.

D:\data>java -jar HelloWorld.jar 11000
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
Init: 51 ms.
Start: 919 ms.

D:\data>java -jar HelloWorld.jar 11000 
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
Init: 55 ms.
Start: 3847 ms.

D:\data>java -jar HelloWorld.jar 50000 
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 33.41 MB, free = 457.59 MB, total = 491.00 MB.
used = 33.41 MB, free = 457.59 MB, total = 491.00 MB.
Init: 138 ms.
Start: 14781 ms.

D:\data>java -jar HelloWorld.jar 1000 1
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
Init: 16 ms.
Start: 85 ms.

D:\data>java -jar HelloWorld.jar 10000 1
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
used = 10.28 MB, free = 480.72 MB, total = 491.00 MB.
Init: 39 ms.
Start: 883 ms.

D:\data>java -jar HelloWorld.jar 100000 1
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 5.14 MB, free = 485.86 MB, total = 491.00 MB.
used = 61.68 MB, free = 429.32 MB, total = 491.00 MB.
used = 61.68 MB, free = 429.32 MB, total = 491.00 MB.
Init: 206 ms.
Start: 32419 ms.
郝伟博士
关注
专栏目录
druid 初始化mysql_Druid连接池初始化简单分析（一）
weixin_42389522的博客
02-23 1776
微信搜索 爪哇根据地，一起学习一起进步！Druid简介：连接池的出现解决了高并发场景下，为每次请求创建数据库连接时程序的性能消耗，以及请求响应时间的增加。之前使用过C3P0连接池，后来关注了Druid连接池，一个阿里巴巴数据库事业部出品，号称为监控而生的数据库连接池。与其他连接池相比，提供了丰富的，多维度的数据监控。Druid的初始化：常用的属性名词说明：url ...
python多线程_Python 基本功: 13. 多线程运算提速
weixin_39923262的博客
11-17 504
小编在前两天开通了一个 Python 金融的专栏，顺便用 TuShare 下载了几只 A股的数据，有兴趣的小伙伴可以去看一下：多多教Python：Python 金融: TuShare API 获取股票数据 (1)​zhuanlan.zhihu.com大概下载了十几只股票，然后在接下来的教程中做数据清洗和整理。但是一只一只股票按顺序做下来速度会很慢，所以在这之前我们先来讲一下如何在 Python 做...
线程池原理之初始化大小设置问题
weixin_39683776的博客
06-28 3758
多线程你肯定不陌生，这是很多面试官的必备提问技能，“你知道多线程吗？”，“你对多线程了解多少？”“说一说线程池的参数设置原理”,当然了，这只是初阶的，更高阶的会问你并发，或者一些场景题目，让你自己穿插一些自己的理解........ 首先我们得明确一个概念：线程是一个操作系统级别的概念。JAVA语言（包括其他编程语言）本身不创建线程；而是调用操作系统层提供的接口创...
初始化线程池大小和获取线程池实例
ahua186186的专栏
12-09 476
private void initThreadPool() { int i = Runtime.getRuntime().availableProcessors() * 2;//默认处理器的2倍，最小为5 if(threadPoolSize < i) threadPoolSize = i; if(thre...
线程堆栈大小的使用介绍
nancy的专栏
02-18 1万+
先来讲说线程内存相关的东西，主要有下面几条： 进程中的所有的线程共享相同的地址空间。任何声明为 static/extern 的变量或者堆变量可以被进程内所有的线程读写。一个线程真正拥有的唯一私有储存是处理器寄存器。线程栈可以通过暴露栈地址的方式与其它线程进行共享。 有大数据量处理的应用中，有时我们有必要在栈空间分配一个大的内存块或者要分配很多小的内存块，但是线程的栈空间的最
性能测试问题小结
iteye_12656的博客
12-18 232
1）测试代码要有延续性 我开始做aranda的时候已经是1.1.0版本，上一版本（aranda-1.0.0）的很多测试代码都没有去延用，都是自己搞了一套，不仅工作量大大增加，而且不利于回归测试。所以以前的代码一定要延用。 2）多线程去读取同一文件，造成某些线程长期饥饿，最显著的特征是响应时间过长，TPS变低。后来通过内存模拟文件流（bytearraystream） 3）jmeter传参数不能...
详解Python多线程Selenium跨浏览器测试
09-21
3. **多线程并发执行**：为每个浏览器创建一个线程，并同时启动这些线程，从而实现多线程并发测试。 4. **异常处理**：如果未能成功创建WebDriver实例，则终止程序执行。 #### 总结 通过上述示例，我们了解了如何...
C#控制台下测试多线程的方法
09-03
本文将深入探讨如何在C#控制台应用程序中创建和管理多线程，以及如何进行测试。我们将通过一个简单的实例来演示如何使用`Thread`类创建线程，并监控它们的状态。 首先，我们创建一个名为`Program`的类，其中包含`...
winfrom开发一个软件启动初始化界面
最新发布
10-25
在Windows Forms（WinForms）开发中，创建一个软件启动初始化界面是提高用户体验的重要步骤。这个过程涉及使用C#编程语言来构建一个用户界面，该界面在应用程序启动时展示，直到主界面完全加载并准备好交互为止。...
如何使用Python多线程测试并发漏洞
09-18
5. **收集结果与分析**: 在多线程环境中，线程间的通信和数据交换可能引发问题，因此你需要记录每个线程的执行结果，以便分析潜在的并发漏洞。 在实际测试中，我们可能会使用更高级的工具，如Burp Suite，这是一个...
VS2019 C语言如何同时运行多个项目，如何在一个项目中添加多个包含main函数的源文件并分别调试运行
热门推荐
m0_46179147的博客
04-03 3万+
第一个问题：如何运行多个项目 1.为什么总是运行同一个项目？ 2.VS2017怎么一次性运行多个项目？ 先说第一个问题：不管新建多少个项目，按调试运行的时候总是运行那一个，这是为什么呢？ 右键解决方案—>属性： 我们可以看到一个“单启动项目”，而已下面有一个项目，这个项目就是默认的调试项目，它就是你每次调试都运行的那个。在这里更改就可以改变每次运行的是哪个项目了。 还有另外一种方法：右键项目...
java 延迟初始化_《Java并发编程的艺术》之延迟初始化
weixin_31243809的博客
02-24 147
在Java里，有时候需要延迟初始化来降低初始化类和创建对象的开销。为众人所致的双重检查锁定是常见的延迟初始化技术，但它是一个错误的用法。比如下面的用法：public class UnsafeLazyInitialization{private static Instance instance;public static Instance getInstance(){if(instance == n...
以高德为例，超级APP启动提速的实践和思考
高德技术
12-30 2115
前言启动是门面，好的印象也助于留存率提高。苹果也在系统启动上不断努力，提升用户体验，最新的 M1 宣传中还特别强调了翻盖秒开 macOS，可以看出其对极致启动速度的追求。这篇文章(htt...
性能测试：深入理解线程数，并发量，TPS，看这一篇就够了
Z875983491的专栏
11-28 2590
并发数，线程数，吞吐量，每秒事务数（TPS）都是性能测试领域非常关键的数据和指标。 那么他们之间究竟是怎样的一个对应关系和内在联系？ 测试时，我们经常容易将线程数等同于表述为并发数，这一表述正确吗？ 本文就将对性能领域的这些关键概念做一次探讨。 文章可能会比较长，希望您保持耐心看完。 1. 走进开封菜，了解性能 ①老王开了家餐厅 我们的主角老王，在M市投资新开业了一家，前来用餐的顾...
创建两个线程实例（C语言版）
Stephen
05-07 1万+
一个非常容易理解的创建线程小例子 #include <stdio.h> #include <stdlib.h> #include <string.h> #include <pthread.h> #include <windows.h> void* printf_a(void* a); void* printf_b(void* b); int main() { HANDLE m_Handlea; HANDLE m_Handleb;
多线程性能及效率问题
cczakai的专栏
10-13 1061
一、[多线程概要]　　随着计算机技术的发展，编程模型也越来越复杂多样化。但多线程编程模型是目前计算机系统架构的最终模型。随着CPU主频的不断攀升，X86架构的硬件已经成为瓶，在这种架构的CPU主频最高为4G。事实上目前3.6G主频的CPU已经接近了顶峰。　　如果不能从根本上更新当前CPU的架构(在很长一段时间内还不太可能)，那么继续提高CPU性能的方法就是超线程CPU模式。那么，作业系统、应用程序...
多线程与多核编程：进程、线程和并发执行
"本文档主要介绍了多线程与多核编程的相关概念，特别是在...理解和掌握多线程编程以及相关的并行区域使用限制是提升软件性能和优化资源利用的重要技能，尤其在处理大数据和实时通信任务时，多线程技术显得尤为重要。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值