python多进程打印输出_多进程打印日志

最新推荐文章于 2024-01-04 10:25:14 发布

weixin_39717152

最新推荐文章于 2024-01-04 10:25:14 发布

阅读量2.5k

点赞数

文章标签： python多进程打印输出

本文链接：https://blog.csdn.net/weixin_39717152/article/details/111836052

版权

Python的logging包在多进程中不支持共享锁，导致不同进程日志可能交错。通过使用Lock解决这个问题，示例代码展示了如何在多进程中正确打印和记录日志，包括将日志输出到stderr和进程管理。

摘要由CSDN通过智能技术生成

多进程的日志和多线程的日志有一点区别。原因是 Python 的 logging 包不支持进程共享锁，所以来自不同的进程的日志可能会混在一起。我们尝试一下在上边的例子里加一个基础日志。下边是代码：import loggingimport multiprocessingfrom multiprocessing import Process, Lockdef printer(item, lock):

""" Prints out the item that was passed in """

lock.acquire()

try:

print(item)

finally:

lock.release()if __name__ == '__main__':

lock = Lock()

items = ['tango', 'foxtrot', 10]

multiprocessing.log_to_stderr()

logger = multiprocessing.get_logger()

logger.setLevel(logging.INFO)

for item in items:

p = Process(target=printer, args=(item, lock))

p.start()

记录日志最简单的方法是将所有的日志发送给 stderr 。我们可以通过调用函数 log_to_stderr 来实现。然后我们调用 get_logger 函数得到记录器(logger)，并把日志级别设置为 INFO。剩下的代码和原来一样。这里要说明一下，我并没有用 join() 函数。相反，父线程在退出的时候要显式