python笔记：进程和线程—分布式进程（补充）

最新推荐文章于 2023-07-19 21:48:16 发布

zyckhuntoria

最新推荐文章于 2023-07-19 21:48:16 发布

阅读量522

点赞数

分类专栏： python foundation

本文链接：https://blog.csdn.net/zyckhuntoria/article/details/80945680

版权

本文针对在Windows系统上运行Python分布式进程时出现的错误进行解答和代码修正。主要内容包括对task_master.py和task_manager.py的修改，如调整端口一致性，以及在Windows上模拟fork过程的freeze_support()函数的使用。通过这些修改，可以在Windows上成功运行分布式进程。

摘要由CSDN通过智能技术生成

对上篇文章进行补充，廖老师所给出的代码在linux上运行正确，但是在windows系统上会提示错误。本文主要综合网上所给的方法对代码进行修改，以正确运行。

一、task_master.py

1.1 廖老师所给出代码

# task_master.py

import random, time, queue
from multiprocessing.managers import BaseManager

# 发送任务的队列:
task_queue = queue.Queue()
# 接收结果的队列:
result_queue = queue.Queue()

# 从BaseManager继承的QueueManager:
class QueueManager(BaseManager):
    pass

# 把两个Queue都注册到网络上, callable参数关联了Queue对象:
QueueManager.register('get_task_queue', callable=lambda: task_queue)
QueueManager.register('get_result_queue', callable=lambda: result_queue)
# 绑定端口5000, 设置验证码'abc':
manager = QueueManager(address=('', 5000), authkey=b'abc')
# 启动Queue:
manager.start()
# 获得通过网络访问的Queue对象:
task = manager.get_task_queue()
result = manager.get_result_queue()
# 放几个任务进去:
for i in range(10):
    n = random.randint(0, 10000)
    print('Put task %d...' % n)
    task.put(n)
# 从result队列读取结果:
print('Try get results...')
for i in range(10):
    r = result.get(timeout=10)
    print('Result: %s' % r)
# 关闭:
manager.shutdown()
print('master exit.')

1.2 修改后代码

主要修改三个地方

第一：以下两句register内不要使用lambda

QueueManager.register('get_task_queue', callable=lambda: task_queue)
QueueManager.register('get_result_queue', callable=lambda: result_queue)

修改为：

def return_task_queue():
    global task_queue
    return task_queue
def return_result_queue():
    global result_queue
    return result_queue

def runf():
    QueueManager.register('get_task_queue', callable=return_task_queue)
    QueueManager.register('get_result_queue', callable=return_result_queue)

第二：创建manager时加上IP地址

（顺便一提查看本机IP地址的方法）

打开命令提示符（管理员）---->输入ipconfig---->找到IPv4地址:192.168.1.104即时本机IP地址显示如下