python+正则提取+ip代理爬取糗事百科文字信息
很多网站都有反爬措施,最常见的就是封ip,请求次数过多服务器会拒绝连接,如图;
在程序中设置一个代理ip,可有效的解决这种问题,代码如下;
如果你对python感兴趣,我这有个学习Python基地,里面有很多学习资料,感兴趣的+Q群:688244617
# 需要的库
import requests
import re
from multiprocessing import Pool
# 设置代...
原创
2019-08-14 13:14:20 ·
219 阅读 ·
0 评论