MPM--apache 的工作模式
Apache 2.0 在性能上的改善最吸引人。 在支持 POSIX 线程的 Unix 系统上, Apache 可以通过 不同的 MPM 运行在一种多进程与多线程相混合的模式下,增强部分配置的可扩充性能。 MPM(Multi -Processing Modules,多道处理模块)是 Apache2.0 中影响性能的最核心特性。 服务器可以按站点的特殊需要进行自定制。 在用户级,MPM 看起来和其它 Apache 模块非常类似。主要区别是在任意时刻只能有一种 MPM 被装载到服务器中。 以下演示一下在 Apache 2.0 中如何指定 MPM。 #tar -xvzf httpd-2.0.59.tar.gz #cd httpd-2.0.59 #./configure --help|grep mpm --with-mpm=MPM Choose the process model for Apache to use. MPM={beos|worker|prefork|mpmt_os2|perchild|leader|threadpool} 上述操作用来选择要使用的进程模型,即哪种 MPM 模块。Beos、mpmt_os2 分别是 BeOS 和 OS/2 上缺省的 MPM, perchild 主要设计目的是以不同的用户和组的身份来运行不同的 子进程。这在运行多个需要 CGI 的虚拟主机时特别有用,会比 1.3 版中的 SuExec 机制做得 更好。leader 和 threadpool 都是基于 worker 的变体,还处于实验性阶段,某些情况下并不会 按照预期设想的那样工作,所以 Apache 官方也并不推荐使用。因此,我们主要阐述 prefork 和 worker 这两种和性能关系最大的产品级 MPM。 prefork 的工作原理及配置 如果不用“--with-mpm”显式指定某种 MPM,prefork 就是 Unix 平台上缺省的 MPM。它所采 用的预派生子进程方式也是 Apache 1.3 中采用的模式。prefork 本身并没有使用到线程,2.0 版使用它是为了与 1.3 版保持兼容性; 另一方面, prefork 用单独的子进程来处理不同的请求, 进程之间是彼此独立的,这也使其成为最稳定的 MPM 之一。 若使用 prefork, make 编译和 make install 安装后, 在 使用“httpd -l”来确定当前使用的 MPM, 应该会看到 prefork.c(如果看到 worker.c 说明使用的是 worker MPM,依此类推) 。再查看缺 省生成的 httpd.conf 配置文件,里面包含如下配置段: StartServers 5 MinSpareServers 5 MaxSpareServers 10 MaxClients 150 MaxRequestsPerChild 0 prefork 的 工 作 原 理 是 , 控 制 进 程 在 最 初 建 立 “StartServers” 个 子 进 程 后 , 为 了 满 足 MinSpareServers 设置的需要创建一个进程,等待一秒钟,继续创建两个,再等待一秒钟, 继续创建四个……如此按指数级增加创建的进程数,最多达到每秒 32 个,直到满足 MinSpareServers 设置的值为止。这就是预派生(prefork)的由来。这种模式可以不必在请 求到来时再产生新的进程,从而减小了系统开销以增加性能。
MaxSpareServers 设置了最大的空闲进程数, 如果空闲进程数大于这个值, Apache 会自动 kill 掉一些多余进程。这个值不要设得过大,但如果设的值比 MinSpareServers 小,Apache 会自 动把其调整为 MinSpareServers+1。如果站点负载较大,可考虑同时加大 MinSpareServers 和 MaxSpareServers。 MaxRequestsPerChild 设 置 的 是 每 个 子 进 程 可 处 理 的 请 求 数 。 每 个 子 进 程 在 处 理 了 “MaxRequestsPerChild”个请求后将自动销毁。0 意味着无限,即子进程永不销毁。虽然缺省 设为 0 可以使每个子进程处理更多的请求,但如果设成非零值也有两点重要的好处: # 可防止意外的内存泄漏; # 在服务器负载下降的时侯会自动减少子进程数。 因此,可根据服务器的负载来调整这个值。笔者认为 10000 左右比较合适。 MaxClients 是这些指令中最为重要的一个,设定的是 Apache 可以同时处理的请求,是对 其缺省值 150 是远远不够的, 如果请求总数已达到这个值 (可 Apache 性能影响最大的参数。 ,那么后面的请求就要排队,直到某个已处理请求完毕。 通过 ps -ef|grep http|wc -l 来确认) 这就是系统资源还剩下很多而 HTTP 访问却很慢的主要原因。 系统管理员可以根据硬件配置 和负载情况来动态调整这个值。 虽然理论上这个值越大, 可以处理的请求就越多, Apache 但 默认的限制不能大于 256。如果把这个值设为大于 256,那么 Apache 将无法起动。事实上, 256 对于负载稍重的站点也是不够的。 Apache 1.3 中, 在 这是个硬限制。 如果要加大这个值, 必须在“configure”前手工修改的源代码树下的 src/include/httpd.h 中查找 256,就会发现 “#define HARD_SERVER_LIMIT 256”这行。把 256 改为要增大的值(如 4000) ,然后重新编 译 Apache 即可。在 Apache 2.0 中新加入了 ServerLimit 指令,使得无须重编译 Apache 就可 以加大 MaxClients。下面是笔者的 prefork 配置段: StartServers 10 MinSpareServers 10 MaxSpareServers 15 ServerLimit 2000 MaxClients 1000 MaxRequestsPerChild 10000 上述配置中,ServerLimit 的最大值是 2000,对于大多数站点已经足够。如果一定要再加大 这个数值,对位于源代码树下 server/mpm/prefork/prefork.c 中以下两行做相应修改即可: #define DEFAULT_SERVER_LIMIT 256 #define MAX_SERVER_LIMIT 20000
worker 的工作原理及配置 相对于 prefork,worker 是 2.0 版中全新的支持多线程和多进程混合模型的 MPM。由于使用
线程来处理,所以可以处理相对海量的请求,而系统资源的开销要小于基于进程的服务器。 但是,worker 也使用了多进程,每个进程又生成多个线程,以获得基于进程服务器的稳定 性。这种 MPM 的工作方式将是 Apache 2.0 的发展趋势。 在 configure -with-mpm=worker 后,进行 make 编译、make install 安装。在缺省生成的 httpd.conf 中有以下配置段: StartServers 2 MaxClients 150 MinSpareThreads 25 MaxSpareThreads 75 ThreadsPerChild 25 MaxRequestsPerChild 0 worker 的工作原理是,由主控制进程生成“StartServers”个子进程,每个子进程中包含固定的 ThreadsPerChild 线程数, 各个线程独立地处理请求。 同样, 为了不在请求到来时再生成线程, MinSpareThreads 和 MaxSpareThreads 设置了最少和最多的空闲线程数;而 MaxClients 设置 如果现有子进程中的线程总数不能满足负载, 控制进程将派生 了所有子进程中的线程总数。 新的子进程。 MinSpareThreads 和 MaxSpareThreads 的最大缺省值分别是 75 和 250。 这两个参数对 Apache 的性能影响并不大,可以按照实际情况相应调节。 ThreadsPerChild 是 worker MPM 中与性能相关最密切的指令。 ThreadsPerChild 的最大缺省值 是 64,如果负载较大,64 也是不够的。这时要显式使用 ThreadLimit 指令,它的最大缺省 值是 20000。上述两个值位于源码树 server/mpm/worker/worker.c 中的以下两行: #define DEFAULT_THREAD_LIMIT 64 #define MAX_THREAD_LIMIT 20000 这两行对应着 ThreadsPerChild 和 ThreadLimit 的限制数。最好在 configure 之前就把 64 改成 所希望的值。注意,不要把这两个值设得太高,超过系统的处理能力,从而因 Apache 不起 动使系统很不稳定。 Worker 模式下所能同时处理的请求总数是由子进程总数乘以 ThreadsPerChild 值决定的,应 该大于等于 MaxClients。如果负载很大,现有的子进程数不能满足时,控制进程会派生新的 子进程。 默认最大的子进程总数是 16, 加大时也需要显式声明 ServerLimit (最大值是 20000) 。 这两个值位于源码树 server/mpm/worker/worker.c 中的以下两行: #define DEFAULT_SERVER_LIMIT 16 #define MAX_SERVER_LIMIT 20000
需要注意的是,如果显式声明了 ServerLimit,那么它乘以 ThreadsPerChild 的值必须大于等
于 MaxClients,而且 MaxClients 必须是 ThreadsPerChild 的整数倍,否则 Apache 将会自动调 节到一个相应值(可能是个非期望值) 。下面是笔者的 worker 配置段: StartServers 3 MaxClients 2000 ServerLimit 25 MinSpareThreads 50 MaxSpareThreads 200 ThreadLimit 200 ThreadsPerChild 100 MaxRequestsPerChild 0 通过上面的叙述, 可以了解到 Apache 2.0 中 prefork 和 worker 这两个重要 MPM 的工作原理, 并可根据实际情况来配置 Apache 相关的核心参数,以获得最大的性能和稳定性。 下面我以 worker 模式进行编译安装 # ./configure --prefix=/opt/apache --with-mpm=worker --enable-module=so本文由arcclient贡献
pdf文档可能在WAP端浏览体验不佳。建议您优先选择TXT,或下载源文件到本机查看。
MPM--apache 的工作模式
Apache 2.0 在性能上的改善最吸引人。 在支持 POSIX 线程的 Unix 系统上, Apache 可以通过不同的 MPM 运行在一种多进程与多线程相混合的模式下, 增强部分配置 的可扩充性能。 MPM(Multi -Processing Modules,多道处理模块)是 Apache2.0 中影响性能的 最核心特性。 服务器可以按站点的特殊需要进行自定制。 在用户级,MPM 看起来和其它 Apache 模块非常类似。主要区别是在任意时刻只 能有一种 MPM 被装载到服务器中。 以下演示一下在 Apache 2.0 中如何指定 MPM。 #tar -xvzf httpd-2.0.59.tar.gz #cd httpd-2.0.59 #./configure --help|grep mpm --with-mpm=MPM Choose the process model for Apache to use. MPM={beos|worker|prefork|mpmt_os2|perchild|leader|threadpool} 上述操作用来选择要使用的进程模型,即哪种 MPM 模块。Beos、mpmt_os2 分别 是 BeOS 和 OS/2 上缺省的 MPM, perchild 主要设计目的是以不同的用户和组的 身份来运行不同的子进程。这在运行多个需要 CGI 的虚拟主机时特别有用,会比 1.3 版中的 SuExec 机制做得更好。leader 和 threadpool 都是基于 worker 的变 体,还处于实验性阶段,某些情况下并不会按照预期设想的那样工作,所以 Apache 官方也并不推荐使用。因此,我们主要阐述 prefork 和 worker 这两种和 性能关系最大的产品级 MPM。 prefork 的工作原理及配置 如果不用“--with-mpm”显式指定某种 MPM,prefork 就是 Unix 平台上缺省的 MPM。它所采用的预派生子进程方式也是 Apache 1.3 中采用的模式。prefork 本 身并没有使用到线程,2.0 版使用它是为了与 1.3 版保持兼容性;另一方面, prefork 用单独的子进程来处理不同的请求,进程之间是彼此独立的,这也使其 成为最稳定的 MPM 之一。 若使用 prefork,在 make 编译和 make install 安装后,使用“httpd -l”来确 定当前使用的 MPM,应该会看到 prefork.c(如果看到 worker.c 说明使用的是 worker MPM,依此类推)。再查看缺省生成的 httpd.conf 配置文件,里面包含 如下配置段: StartServers 5 MinSpareServers 5 MaxSpareServers 10 MaxClients 150 MaxRequestsPerChild 0 prefork 的工作原理是,控制进程在最初建立“StartServers”个子进程后,为
了满足 MinSpareServers 设置的需要创建一个进程, 等待一秒钟, 继续创建两个, 再等待一秒钟,继续创建四个……如此按指数级增加创建的进程数,最多达到每 秒 32 个,直到满足 MinSpareServers 设置的值为止。这就是预派生(prefork) 的由来。这种模式可以不必在请求到来时再产生新的进程,从而减小了系统开销 以增加性能。 MaxSpareServers 设置了最大的空闲进程数,如果空闲进程数大于这个值, Apache 会自动 kill 掉一些多余进程。这个值不要设得过大,但如果设的值比 MinSpareServers 小,Apache 会自动把其调整为 MinSpareServers+1。如果站点 负载较大,可考虑同时加大 MinSpareServers 和 MaxSpareServers。 MaxRequestsPerChild 设置的是每个子进程可处理的请求数。每个子进程在处理 了“MaxRequestsPerChild”个请求后将自动销毁。0 意味着无限,即子进程永 不销毁。虽然缺省设为 0 可以使每个子进程处理更多的请求,但如果设成非零值 也有两点重要的好处: ◆ 可防止意外的内存泄漏; ◆ 在服务器负载下降的时侯会自动减少子进程数。 因此,可根据服务器的负载来调整这个值。笔者认为 10000 左右比较合适。 MaxClients 是这些指令中最为重要的一个,设定的是 Apache 可以同时处理的请 求,是对 Apache 性能影响最大的参数。其缺省值 150 是远远不够的,如果请求 总数已达到这个值(可通过 ps -ef|grep http|wc -l 来确认),那么后面的请 求就要排队,直到某个已处理请求完毕。这就是系统资源还剩下很多而 HTTP 访 问却很慢的主要原因。 系统管理员可以根据硬件配置和负载情况来动态调整这个 值。虽然理论上这个值越大,可以处理的请求就越多,但 Apache 默认的限制不 能大于 256。 如果把这个值设为大于 256, 那么 Apache 将无法起动。 事实上, 256 对于负载稍重的站点也是不够的。在 Apache 1.3 中,这是个硬限制。如果要加 大这个值,必须在“configure”前手工修改的源代码树下的 src/include/httpd.h 中查找 256,就会发现“#define HARD_SERVER_LIMIT 256” 这行。 256 改为要增大的值 把 (如 4000) 然后重新编译 Apache 即可。 Apache , 在 2.0 中新加入了 ServerLimit 指令,使得无须重编译 Apache 就可以加大 MaxClients。下面是笔者的 prefork 配置段: StartServers 10 MinSpareServers 10 MaxSpareServers 15 ServerLimit 2000 MaxClients 1000 MaxRequestsPerChild 10000 上述配置中,ServerLimit 的最大值是 2000,对于大多数站点已经足够。如果一
定要再加大这个数值,对位于源代码树下 server/mpm/prefork/prefork.c 中以 下两行做相应修改即可: #define DEFAULT_SERVER_LIMIT 256 #define MAX_SERVER_LIMIT 20000
worker 的工作原理及配置 相对于 prefork, worker 是 2.0 版中全新的支持多线程和多进程混合模型的 MPM。 由于使用线程来处理,所以可以处理相对海量的请求,而系统资源的开销要小于 基于进程的服务器。但是,worker 也使用了多进程,每个进程又生成多个线程, 以获得基于进程服务器的稳定性。这种 MPM 的工作方式将是 Apache 2.0 的发展 趋势。 在 configure -with-mpm=worker 后,进行 make 编译、make install 安装。在 缺省生成的 httpd.conf 中有以下配置段: StartServers 2 MaxClients 150 MinSpareThreads 25 MaxSpareThreads 75 ThreadsPerChild 25 MaxRequestsPerChild 0 worker 的工作原理是,由主控制进程生成“StartServers”个子进程,每个子 进程中包含固定的 ThreadsPerChild 线程数,各个线程独立地处理请求。同样, 为了不在请求到来时再生成线程,MinSpareThreads 和 MaxSpareThreads 设置了 最少和最多的空闲线程数;而 MaxClients 设置了所有子进程中的线程总数。如 果现有子进程中的线程总数不能满足负载,控制进程将派生新的子进程。 MinSpareThreads 和 MaxSpareThreads 的最大缺省值分别是 75 和 250。 这两个参 数对 Apache 的性能影响并不大,可以按照实际情况相应调节。 ThreadsPerChild 是 worker MPM 中与性能相关最密切的指令。ThreadsPerChild 的最大缺省值是 64, 如果负载较大, 也是不够的。 64 这时要显式使用 ThreadLimit 指令,它的最大缺省值是 20000。上述两个值位于源码树 server/mpm/worker/worker.c 中的以下两行: #define DEFAULT_THREAD_LIMIT 64 #define MAX_THREAD_LIMIT 20000 这两行对应着 ThreadsPerChild 和 ThreadLimit 的限制数。最好在 configure
之前就把 64 改成所希望的值。注意,不要把这两个值设得太高,超过系统的处 理能力,从而因 Apache 不起动使系统很不稳定。 Worker 模式下所能同时处理的请求总数是由子进程总数乘以 ThreadsPerChild 值决定的,应该大于等于 MaxClients。如果负载很大,现有的子进程数不能满 足时,控制进程会派生新的子进程。默认最大的子进程总数是 16,加大时也需 要显式声明 ServerLimit(最大值是 20000)。这两个值位于源码树 server/mpm/worker/worker.c 中的以下两行: #define DEFAULT_SERVER_LIMIT 16 #define MAX_SERVER_LIMIT 20000
需要注意的是,如果显式声明了 ServerLimit,那么它乘以 ThreadsPerChild 的 值必须大于等于 MaxClients,而且 MaxClients 必须是 ThreadsPerChild 的整数 倍,否则 Apache 将会自动调节到一个相应值(可能是个非期望值)。下面是笔 者的 worker 配置段: StartServers 3 MaxClients 2000 ServerLimit 25 MinSpareThreads 50 MaxSpareThreads 200 ThreadLimit 200 ThreadsPerChild 100 MaxRequestsPerChild 0 通过上面的叙述,可以了解到 Apache 2.0 中 prefork 和 worker 这两个重要 MPM 的工作原理,并可根据实际情况来配置 Apache 相关的核心参数,以获得最大的 性能和稳定性。 下面我以 worker 模式进行编译安装 # ./configure --prefix=/opt/apache --with-mpm=worker --enable-module=so