**
进程间通信
**
三种通信方式的区别
管道 消息队列 共享内容
开辟空间 内存 内存 内存
读写方式 两端读写 先进先出 覆盖之前内容
效率 一般 一般 较高
使用特点 父子进程 第三方库多 注意争夺内存资源,加锁
常用通信方式 : 管道、消息队列、 共享内存、信号量
2,进程空间相对独立, 资源无法直接获取, 此时在不同的进程间需要进行消息传输
管道通信(Pipe)
通过multiprocessing封装的管道模型
1、通信原理 : 在内存中开辟管道空间, 生成管道操作的对象, 进程间使用同一组管道进行读写, 实现通信
2、注意 : 多个进程必须获取到同一个管道对象(创建进程之前,先创建好管道, 子进程在复制空间时一起复制走)
3、管道分类
1、单项管道(半双工) : 一端只负责放数据, 另一端只取数据
2、双向管道(全双工) : 两端都可以存取数据
4、常用方法
1、conn1, conn2 = Pipe(duplex = True)
功能 :创建管道
参数 : duplex 默认为True (双向) , False(单向)
返回值 : 返回2个管道流对象, 表示管道两端
双向 : 两个均可以发送和接收
单向 : conn1只能接收, conn2只能发送
2、conn2.send(内容)
功能 : 向管道发送数据
3、conn1.recv()
功能 : 从管道获取数据
注意 : 当管道中没有数据时会阻塞, 关闭发送端, 接收端会抛出EOFError异常
4、conn2.close()
功能 : 关闭管道的一端(发送端/接收端)
5、注意
1、父进程调用Pipe开辟管道, 得到两个文件描述符
指向管道的两端
2、父进程用Process类创建子进程,则子进程也有两个文件
描述符指向同一个管道
3、每个进程(父/子进程)都要关闭管道中的其中一端
4、管道使用环形队列实现的,数据从发送端流入,从读端流出
5、一次recv()只能接收一个数据
使用流程
1.先放完,再取
1.进程1 : join()执行完成后进程2再start()
2.进程2 : data = q.get(bloce=false)
2. 一边取一边放
消息队列(Queue) : 先进先出
1、原理 : 在内存中开辟了队列模型, 用来存放消息,任何拥有队列对象的进程, 都可以从中取数据
2、常用方法
1、q = Queue(maxsize = 0)
功能 : 在内存中创建一个消息队列
参数 : maxsize 默认为0, 表示无限制
maxsize = 3, 列队中最多存放的消息数量为3
2、q.put(block = True)
向消息队列中存放1条消息, 当消息队列满的时候,会阻塞
block : 默认为True(阻塞)
: False(不阻塞)
timeout : 超时时间
3、q.get(block = True)
获取消息,每次从消息队列中获取1条消息,当消息队列为空时,会阻塞
block : 默认为True(阻塞)
: False(不阻塞)
timeout : 超时时间
4、q.full()
判断队列是否为满, True/False(满/未满)
5、q.qsize()
查看当前队列中消息数量
6、q.empty()
判断队列是否为空 ,True/False
7、close()
关闭消息队列
进程池中列队的使用
1、使用multiprocessing中的Manager
共享内存(value)
1、原理 : 在内存中开辟一个区域, 对多进程可见,进程都可以写入或读取内容
2、常用方法
form multiprocessing import Value
1、obj =Value(ctype, data)
功能 : 开辟共享内存
参数 : ctype字符串 data : 初始化存入的数据,由 ctype 决定
“i” --> int ,后面data 可以放整数
“f” --> float 后面data 可以放浮点数
“c” --> 单个字符 后面data 放单个字符(bytes)
3.属性
obj.value : 属性,获取共享内存的值
3.锁(lock)
1、from multiprocessing improt Lock
2、lock = Lock() # 创建锁对象
3、lock.acquire() # 获取锁
4、lock.release() # 释放锁
共享内存(Array)
1、常用方法
obj = Array(ctype, 一组值)
功能 : 创建共享内存
参数 :
一组值 : 列表/字节串, 共享内存中的初始数据
Array(‘i’,[1,2,3,4,5])
Array(‘i’,6) – 可存放6个数据类型一致的值
Array(‘c’,6) – 可存放1个6字符的字节串(b’helloa’)
信号量(信号灯) - Semaphore
1、原理 : 给定一个数量, 对多个进程可见, 所有进程都可以操作信号量, 达到协同工作的目的
2、常用方法
1、sem = Semaphore(number)
功能 : 创建1个信号量
参数 : 初始化信号量
2、sem.release()
功能 : 增加1个信号量资源
3、sem.acquire()
功能 : 消耗1个信号量, 当为0时会阻塞
4、sem.get_value()
功能 : 获取信号量资源数量