python多进程管道 multiprocessing.Pipe OSError: handle is closed, EOFError

最新推荐文章于 2024-04-26 08:41:14 发布

城俊BLOG

最新推荐文章于 2024-04-26 08:41:14 发布

阅读量8.6k

点赞数 5

分类专栏： Python # 并行化报错

本文链接：https://blog.csdn.net/qxqxqzzz/article/details/104384920

版权

Python 同时被 3 个专栏收录

307 篇文章 36 订阅 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

报错

122 篇文章 5 订阅 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

并行化

10 篇文章 0 订阅

订阅专栏

本文介绍了在使用Python的multiprocessing.Pipe进行多进程通信时可能遇到的错误，包括EOFError和OSError。当发送端关闭而接收端继续接收时，会出现EOFError；而发送端尝试向已关闭的管道发送数据则会引发OSError。此外，还讨论了其他如BrokenPipeError和进程间竞争可能导致的问题。为了解决这些问题，建议检查代码，避免不必要的管道关闭，或使用异常处理机制，甚至结合锁来改进同步策略。

摘要由CSDN通过智能技术生成

[ python multiprocessing.Pipe 多进程管道的使用 ] 三种常见报错

from multiprocessing import Pipe
sed, rec = Pipe()
# 依次发送两条数据
sed.send([1111])
sed.send([1112])

1，如果管道-发送端关闭了，接收端还去接收的话，会在接收完管道中残存的数据之后，报EOF的错误：raise EOFError

sed.close() # 管道-发送端关闭
while True:
    c = rec.recv() # 管道-接收端接收
    print(c)

# 输出
[1111]
[1112]
Traceback (most recent call last):
  File "C:\Users\user1\AppData\Local\Programs\Python\Python38\lib\multiprocessing\connection.py", line 301, in _recv_bytes
    ov, err = _winapi.ReadFile(self._handle, bsize,
BrokenPipeError: [WinError 109] 管道已结束。

During handling of the above excepti