爬虫时碰到的socket.error: [Errno 10060]错误的原因以及解决方法

socket.error: [Errno 10060]

原因是爬取页面过快造成暂时被网站ban掉的情况，设置time.sleep(1)就好，后来发现ban的时间不定，就自己动手写了个暴力的做法

def avoid_10060(fun):
    error_time = 0
    while True:
        time.sleep(1)
        try:
            return fun()
        except:
            error_time += 1
            if error_time == 100:
                print 'your network is little bad'
                time.sleep(60)
            if error_time == 101:
                print 'your network is broken'
                break
            continue
        break

这样就能解决大多数被ban的情况，反正我就是这样防ban的，效果还不错。