爬虫提升效率必备：多进程和多线程

先了解一些基础概念：

进程

进程就是正在运行的程序,比如你的系统现在运行着的QQ，就是一个进程，进程和进程之间是互相独立的；单进程就是说你的电脑只能做一件事情；多进程，你的电脑在同一段时间里面，可以 “同时” 执行多个任务。

线程

在一个进程里面可以执行多个任务，在这里的每一个任务就是线程，线程之间是共享一个进程空间的，一个线程里面可以执行多个函数，线程和进程是通过系统调度的。

并行

某一个时间段里，可以同时执行多个进程，你吃饭吃到一半，电话来了，你一边打电话一边吃饭，这说明你支持并行

并发

你吃饭吃到一半，电话来了，你停了下来接了电话，接完后继续吃饭，这说明你支持并发

常用的多线程模块：threading

多线程实现方式

1.通过创建一个线程类，并继承 threading.Thread实现

import time
from datetime import datetime
import threading

# 创建一个线程类，并继承 threading.Thread
class mythread(threading.Thread):
    def __init__(self, threadID, name, delay, count):
        threading.Thread.__init__(self)
        self.threadID = threadID
        self.name = name
        self.delay = delay
        self.count =