简单分布式爬虫-windows环境

创建服务进程
1.建立队列Queue，用来进行进程间通信
2.把第一步建立的队列在网络上注册，暴露给其他进程（主机）,注册后获得网络队列，相当于本地队列的映像
3.建立一个对象(Queuemanager(BaseManager))实例manager，绑定端口和验证口令
4.启动第三步中建立的实例，即启动管理manager, 监管信息通道
5. 通过管理实例的方法获得通过网络访问的Queue 对象，即再把网络队列实体化成可以使用的本地队列
6.创建任务到“本地”队列中，自动上传任务到网络队列中，分配给任务进程进行处理

代码如下taskManager_win.py：
import random, time
from multiprocessing import Queue
from multiprocessing.managers import BaseManager
from multiprocessing import freeze_support


# 任务个数
task_number = 10

# 第一步： 建立task_queue和result_queue， 用来存放任务和结果
task_queue = Queue()
result_queue = Queue()

def get_task():
    return task_queue

def get_result():
    return result_queue

# 创建QueueManager
class Queuemanager(BaseManager):
    pass

def win_run():
    # Window