pycuda与多进程间的使用

  1. 使用multiprocessing创建多进程,每个进程下运行一个YOLOv5程序,可能会遇到如下问题:
    pycuda._driver.LogicError: cuDeviceGet failed: initialization error
    Traceback (most recent call last):
    File “/usr/lib/python3.6/multiprocessing/process.py”, line 258, in _bootstrap
    self.run()
    File “/usr/lib/python3.6/multiprocessing/process.py”, line 93, in run
    self._target(*self._args, **self._kwargs)
    File “a.py”, line 15, in dott
    ctx = cuda.Device(0).make_context()
    pycuda._driver.LogicError: cuDeviceGet failed: initialization error
    解决方案:出现这种问题的原因是主进程与子进程之前没有隔离开,上下文和启动方法出问题了,可以在创建进程前加入这一行
multiprocessing.set_start_method('spawn')

具体如下所示:

import multiprocessing as mp

def foo(q):
    q.put('hello')
if __name__ == '__main__':
    mp.set_start_method('spawn')
    q = mp.Queue()
    p = mp.Process(target=foo, args=(q,))
    p.start()
    print(q.get())
    p.join() 
  1. 按照第一种情况修改也可能出现以下问题:
    Traceback (most recent call last):
    File “”, line 2, in
    File “/usr/local/Cellar/python/3.7.4/Frameworks/Python.framework/Versions/3.7/lib/python3.7/multiprocessing/context.py”, line 242, in set_start_method
    raise RuntimeError(‘context has already been set’)
    RuntimeError: context has already been set
    解决方案:在程序中 set_start_method() 不应该被多次调用。多个类似进程时会出现。
    可以使用 get_context() 来获取上下文对象。上下文对象与多处理模块具有相同的API,并允许在同一程序中使用多个启动方法。
import multiprocessing as mp

def foo(q):
    q.put('hello')

if __name__ == '__main__':
    ctx = mp.get_context('spawn')
    q = ctx.Queue()
    p = ctx.Process(target=foo, args=(q,))
    p.start()
    print(q.get())
    p.join() 
  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值