1. 进程、 程序及区别
编写完毕的代码,在没有运行的时候,称之为程序
正在运行着的代码,就成为进程
进程,除了包含代码以外,还有需要运行的环境等,所以和程序是有区别的
2. fork( )
Python的os模块封装了常见的系统调用,其中就包括fork,可以在Python程序中轻松创建子进程:
import os
# 注意,fork函数,只在Unix/Linux/Mac上运行,windows不可以
pid = os.fork()
if pid == 0:
print('哈哈1')
else:
print('哈哈2')
由于Windows没有fork调用,上面的代码在Windows上无法运行。
3.multiprocessing
如果你打算编写多进程的服务程序,Unix/Linux无疑是正确的选择。由于Windows没有fork调用,难道在Windows上无法用Python编写多进程的程序?
由于Python是跨平台的,自然也应该提供一个跨平台的多进程支持。multiprocessing模块就是跨平台版本的多进程模块。
multiprocessing模块提供了一个Process类来代表一个进程对象,下面的例子演示了启动一个子进程并等待其结束:
import multiprocessing
import os
def work():
for i in range(5):
print('work1',i)
print('当前进程',multiprocessing.current_process().pid)
print('父进程id',os.getppid())#获取进程id
if __name__ == '__main__':
process=multiprocessing.Process(target=work())
process.start()
print('当前进程的编号为:',os.getpid())
4.多进程修改全局变量
import multiprocessing
import time
# 全局变量
mylist = list()
def write():
for i in range(5):
mylist.append(i)
time.sleep(0.3)
# 任务2:读数据
def read():
print(mylist)
if __name__ == '__main__':
t1 = multiprocessing.Process(target=write)
t2 = multiprocessing.Process(target=read)
t1.start()
t1.join()
t2.start()
5.进程池Pool
当需要创建的子进程数量不多时,可以直接利用multiprocessing中的Process动态成生多个进程,但如果是上百甚至上千个目标,手动的去创建进程的工作量巨大,此时就可以用到multiprocessing模块提供的Pool方法。
初始化Pool时,可以指定一个最大进程数,当有新的请求提交到Pool中时,如果池还没有满,那么就会创建一个新的进程用来执行该请求;但如果池中的进程数已经达到指定的最大值,那么该请求就会等待,直到池中有进程结束,才会创建新的进程来执行,请看下面的实例:
import multiprocessing
import os
import time
def copd(indx):
print(‘当前的进程编码为:’,os.getpid())
print(indx)
time.sleep(1)
if name == ‘main‘:
pool=multiprocessing.Pool(4)
for i in range(10):
pool.apply_async(copd,(i,))
pool.close()
pool.join()