php shell 多进程,Linux Shell实现模拟多进程并发执行

在bash中，使用后台任务来实现任务的“多进程化”。在不加控制的模式下，不管有多少任务，全部都后台执行。也就是说，在这种情况下，有多少任务就有多少“进程”在同时执行。我们就先实现第一种情况：51Testing软件测试网P1F-T8RX&HP+}N

实例一：正常情况脚本51Testing软件测试网o7E/pD5BO%r

———————————————————————————–51Testing软件测试网~;S%T'B+g6jcYw

#!/bin/bash

2TM\N#AE4oY0

51Testing软件测试网P5f3k.D2mKAyANu

for ((i=0;i<5;i++));do51Testing软件测试网'I(UAXcu!_q

{

m)U9dm6TR%`s0

sleep 1;echo 1>>aa && echo ”done!”

2t \5m}$N{P.ch~0

}51Testing软件测试网C(J1uR-QB\X

done

V-la@Ex0

cat aa|wc -l51Testing软件测试网{

eZ_u*lW&Q

rm aa51Testing软件测试网q,Y'o+U3Gd/|S

———————————————————————————–u

[HlB{+kA(C%Z0

这种情况下，程序顺序执行，每个循环3s，共需15s左右。^

X$kY2_,?0

$ time bash test.sh

b4G@[e `

ja|0

done!

x;xK;` ri*A`^h0

done!51Testing软件测试网+B,W1@]c

done!51Testing软件测试网e#J&@k2Y"Z

done!51Testing软件测试网aCW V-nb*q_uT7Y

done!

,e\2p)C5E!q\

J0

551Testing软件测试网aFMRqF8Y

51Testing软件测试网.[-b@'jFw

real    0m15.030s

$Ch?(y`*wEUr0

user    0m0.002s51Testing软件测试网F?I(\.i

sys     0m0.003sn\2x[t2Y3D&p0

实例二：“多进程”实现+Jz

G!\T0

———————————————————————————–51Testing软件测试网kT)g6U7?1J8U0eiwG3h

#!/bin/bash

zz\or0

51Testing软件测试网3lKX2~)E^/Wo

for ((i=0;i<5;i++));do51Testing软件测试网/qg9nu0z'wU2\

{51Testing软件测试网cQK

C.So8s6G

sleep 3;echo 1>>aa && echo ”done!”

ef#d|Kr0

} &51Testing软件测试网7So8M+oN'TTL,g8}

done51Testing软件测试网.Ch%HksH

Ae

wait

ZHy6\V5a!|S,?5S0

cat aa|wc -l51Testing软件测试网K#IS$iX#jx

rm aa+Em8\2?$A~h[/NYoV0

———————————————————————————–51Testing软件测试网2K^

UHd3{4^

这个实例实际上就在上面基础上多加了一个后台执行&符号，此时应该是5个循环任务并发执行，最后需要3s左右时间。+DtZeI/d^0

$ time bash test.sh51Testing软件测试网+|G-y[Zz]

done!51Testing软件测试网0@7TkPUVj)t

done!

D%?d4B?T'{;L ^E4M0

done!51Testing软件测试网!N|G0phQ5lt

done!51Testing软件测试网pk`#W%Z [ K9nt*x^

done!51Testing软件测试网V|8Jp/K&`7f@

f$G8R

5

f5@ slb,y6D6@k0

Yr|*n2?J4F%S0

real    0m3.011s

Z%Fo4[Xs0

user    0m0.002s51Testing软件测试网IMx1tG9`'EV

sys     0m0.004s51Testing软件测试网'C*Y

aCi)XS9W

效果非常明显。)cr)sb?:?B-W Y0

这里需要说明一下wait的左右。wait是等待前面的后台任务全部完成才往下执行，否则程序本身是不会等待的，这样对后面依赖前面任务结果的命令来说就可能出错。例如上面wc -l的命令就报错：不存在aa这个文件。51Testing软件测试网S;AoC1Xy3P{

以上所讲的实例都是进程数目不可控制的情况，下面描述如何准确控制并发的进程数目。#Pr$QfS0

——————————————————————————————————————51Testing软件测试网i7aRZp,h?:`

#!/bin/bash51Testing软件测试网6~ }`"\,H`B(a

# 2006-7-12, by wwy

d|]R5CP0

#———————————————————————————–

$F6r[kh{D(X'`e&p0

# 此例子说明了一种用wait、read命令模拟多线程的一种技巧51Testing软件测试网L$J%_;IKw%j/~(D

# 此技巧往往用于多主机检查，比如ssh登录、ping等等这种单进程比较慢而不耗费cpu的情况

Q1fn9j9Mi0

# 还说明了多线程的控制

\1y0b(cGo5X.?0

#———————————————————————————–

A9vz1@M0

51Testing软件测试网7p@G A)J#{z

OZ2|

l];W0

function a_sub { # 此处定义一个函数，作为一个线程(子进程)

$g;S(_UKT0p"H0

sleep 3 # 线程的作用是sleep 3s

K3s%W t8q eW0

}

%Xw;j|S8O0

(MbVc.[w3Yl0

o0^i0Ll8]j*M-T[0

tmp_fifofile=”/tmp/$.fifo”51Testing软件测试网Hcy(G.wpb

mkfifo $tmp_fifofile      # 新建一个fifo类型的文件

)TF8u;h(D-e5F}0

exec 6<>$tmp_fifofile      # 将fd6指向fifo类型

:|qD%z~1M0

rm $tmp_fifofile51Testing软件测试网1i/Y

uwf`9F'hS

51Testing软件测试网5f&~{gt

.UlN9Si

SB*n0Yl0

thread=15 # 此处定义线程数51Testing软件测试网n)d(u1IRa"dl

for ((i=0;i

echo51Testing软件测试网X~hKAbhc3}o;_I

done >&6 # 事实上就是在fd6中放置了$thread个回车符

#{){J(Or0AU1v0

51Testing软件测试网e,K"_~(w7B!E,^W

51Testing软件测试网~pkI4sK,qU&V%P

for ((i=0;i<50;i++));do # 50次循环，可以理解为50个主机，或其他51Testing软件测试网dke9Y+P.PB)V6_

:L3k@ H,}5C0

read -u6

O-c"zQ!Ak\+y0

# 一个read -u6命令执行一次，就从fd6中减去一个回车符，然后向下执行，

GY:q?PH3xV0

# fd6中没有回车符的时候，就停在这了，从而实现了线程数量控制51Testing软件测试网.h{!B[9W'e

51Testing软件测试网[ADwjN@V

y"L

{ # 此处子进程开始执行，被放到后台

0wV:ecz*{-?0

a_sub && { # 此处可以用来判断子进程的逻辑

gE`NV4nJEKF0

echo ”a_sub is finished”

$T(^CZ{Z*I0

} || {51Testing软件测试网%Br$~a"FVB

echo ”sub error”

U#| H7Z0?oLL7K"rR0

}

.sq\:b

J0

echo >&6 # 当进程结束以后，再向fd6中加上一个回车符，即补上了read -u6减去的那个

)X)Q7l9bM$gD[nG~0

} &51Testing软件测试网b)C#jG

Nehm~[

51Testing软件测试网zDU.E_0^,[F}

done51Testing软件测试网m4_9V6S!Q4E8p%v1xq

51Testing软件测试网NY7S)~)w/k

wait # 等待所有的后台子进程结束51Testing软件测试网6{8JefK?

exec 6>&- # 关闭df651Testing软件测试网4x)tjI5fb}

ZFo%lx0

,st.ji+w8zN0

exit 0

3b~ i\t

[l"L0——————————————————————————————————————51Testing软件测试网 ~gWq)r1~6g

sleep 3s，线程数为15，一共循环50次，所以，此脚本一共的执行时间大约为12秒51Testing软件测试网9\i"h)K%G$HPK

即：

;I1s"[O3|N*U1g8i1o015×3=45, 所以 3 x 3s = 9s

}E*_4H5E3D0(50-45=5)<15, 所以 1 x 3s = 3s

$~c@/~1MLZ

H+c0所以 9s + 3s = 12sH&`3r$oy9n,[,JKqAf0

$ time ./multithread.sh >/dev/null(u

v@ C(O/WQ gO

~!J0

real        0m12.025s

d%j{.H.Z0user        0m0.020s

DYkC#|s(z0sys         0m0.064sX*m]!O\*vF0

而当不使用多线程技巧的时候，执行时间为：50 x 3s = 150s。51Testing软件测试网Xi{R-Va k]-DT

此程序中的命令 mkfifo tmpfile和linux中的命令 mknod tmpfile p效果相同。51Testing软件测试网N}%JM\/Lp

区别是mkfifo为POSIX标准，因此推荐使用它。该命令创建了一个先入先出的管道文件，并为其分配文件标志符6。管道文件是进程之间通信的一种方式，注意这一句很重要51Testing软件测试网_ ev9@Y$_'T

exec 6<>$tmp_fifofile      # 将fd6指向fifo类型51Testing软件测试网`Z3@)KE$e"m;a

如果没有这句，在向文件$tmp_fifofile或者&6写入数据时，程序会被阻塞，直到有read读出了管道文件中的数据为止。而执行了上面这一句后就可以在程序运行期间不断向fifo类型的文件写入数据而不会阻塞，并且数据会被保存下来以供read程序读出51Testing软件测试网PU[

a)ua)x[