OSError: [Errno 4] Interrupted system call

最新推荐文章于 2023-07-21 18:36:02 发布

小笨丹

最新推荐文章于 2023-07-21 18:36:02 发布

阅读量2.6k

点赞数 1

分类专栏：解决错误debug error

本文链接：https://blog.csdn.net/github_38140310/article/details/86530015

版权

解决错误debug 同时被 2 个专栏收录

3 篇文章 0 订阅

订阅专栏

error

2 篇文章 0 订阅

订阅专栏

本文详细解析了PyTorch中DataLoader迭代器在多进程环境下出现的OSError和socket.error异常，提供了一种修改multiprocessing.reduction模块的recv_handle函数以解决连接被拒绝的问题。

摘要由CSDN通过智能技术生成

######
加载数据出错：
/usr/lib/python2.7/multiprocessing/reduction.py", line 157, in rebuild_handle
new_handle = recv_handle(conn)
File "/usr/lib/python2.7/multiprocessing/reduction.py", line 83, in recv_handle
return _multiprocessing.recvfd(conn.fileno())
OSError: [Errno 4] Interrupted system call
Exception socket.error: error(111, 'Connection refused') in <bound method DataLoaderIter.__del__ of <torch.utils.data.dataloader.DataLoaderIter object at 0x7f94f55bfc90>> ignored

参考https://github.com/pytorch/pytorch/issues/4220

######
解决方法：

打开文件
"/usr/lib/python2.7/multiprocessing/reduction.py"

把82行的函数recv_handle()
#####
def recv_handle(conn):
return _multiprocessing.recvfd(conn.fileno())
#####

改为如下内容
#####
def recv_handle(conn):
while True:
try:
_fl_data = _multiprocessing.recvfd(conn.fileno())
break
except OSError, num:
print num
if num==4:
continue
return _fl_data
#####