TOMCAT线程模型优化

内存不足也会大量消耗cpu
解释说明：向数据库请求可以做缓存优化来提高性能，但向服务器请求，每个请求开一个连接，服务器不会像数据库有缓存处理（也有：将数据或页面存在app中或浏览器中），服务器的每个请求会转换成线程

有3种线程模型：调整线程模型（bio nio aio），bio是tomcat默认的线程模型
同步阻塞IO（JAVA BIO）：  一对一
理解举例：食堂排队买饭
缺点：性能较差
同步非阻塞IO(Java NIO): 用户进程也
需要时不时的询问IO操作是否就绪，这就要求用户进程不停的去询问
理解举例：饭馆点菜（拿餐牌等待过程可以去做其他事情，每隔一段时间去看看饭好了没）
缺点：比较浪费cpu，因为每隔一段时间就会去问，这样就会使得cpu利用会增高
异步非阻塞IO: Java AIO）  等内核完成IO操作以后会通知应用程序 （额外系统平台支持）
理解举例：饿了么点菜，不需要问，不需要等待，饭好了会给你打电话
性能最好的模式
BIO模型：

NIO模型：

NIO模型参数解释：
http://blog.sina.com.cn/s/blog_605f5b4f01012ljj.html
maxThreads：tomcat起动的最大线程数，即同时处理的任务个数，默认值为200
acceptCount：当tomcat起动的线程数达到最大时，接受排队的请求个数，默认值为100
 
这两个值如何起作用，请看下面三种情况
情况1：接受一个请求，此时tomcat起动的线程数没有到达maxThreads，tomcat会起动一个线程来处理此请求。
情况2：接受一个请求，此时tomcat起动的线程数已经到达maxThreads，tomcat会把此请求放入等待队列，等待空闲线程。
情况3：接受一个请求，此时tomcat起动的线程数已经到达maxThreads，等待队列中的请求个数也达到了acceptCount，此时tomcat会直接拒绝此次请求，返回connection refused
maxThreads如何配置
一般的服务器操作都包括2方面：1计算（主要消耗cpu），2等待（io、数据库等）
第一种极端情况，如果我们的操作是纯粹的计算，那么系统响应时间的主要限制就是cpu的运算能力，此时maxThreads应该尽量设的小，降低同一时间内争抢cpu的线程个数，可以提高计算效率，提高系统的整体处理能力。
第二种极端情况，如果我们的操作纯粹是IO或者数据库，那么响应时间的主要限制就变为等待外部资源，此时maxThreads应该尽量设的大，这样 才能提高同时处理请求的个数，从而提高系统整体的处理能力。此情况下因为tomcat同时处理的请求量会比较大，所以需要关注一下tomcat的虚拟机内存设置和linux的open file限制。
我在测试时遇到一个问题，maxThreads我设置的比较大比如3000，当服务的线程数大到一定程度时，一般是2000出头，单次请求的响应时间就会急剧的增加，
百思不得其解这是为什么，四处寻求答案无果，最后我总结的原因可能是cpu在线程切换时消耗的时间随着线程数量的增加越来越大，
cpu把大多数时间都用来在这2000多个线程直接切换上了，当然cpu就没有时间来处理我们的程序了。
以前一直简单的认为多线程=高效率。。其实多线程本身并不能提高cpu效率，线程过多反而会降低cpu效率。
当cpu核心数<线程数时，cpu就需要在多个线程直接来回切换，以保证每个线程都会获得cpu时间，即通常我们说的并发执行。
所以maxThreads的配置绝对不是越大越好。
现实应用中，我们的操作都会包含以上两种类型（计算、等待），所以maxThreads的配置并没有一个最优值，一定要根据具体情况来配置。
最好的做法是：在不断测试的基础上，不断调整、优化，才能得到最合理的配置。
acceptCount的配置，我一般是设置的跟maxThreads一样大，这个值应该是主要根据应用的访问峰值与平均值来权衡配置的。
如果设的较小，可以保证接受的请求较快相应，但是超出的请求可能就直接被拒绝
如果设的较大，可能就会出现大量的请求超时的情况，因为我们系统的处理能力是一定的。