- 博客(2)
- 收藏
- 关注
原创 pip换下载源
pip换下载源国内下载源设置源文件 国内下载源 清华:https://pypi.tuna.tsinghua.edu.cn/simple 阿里云:http://mirrors.aliyun.com/pypi/simple/ 中国科技大学 https://pypi.mirrors.ustc.edu.cn/simple/ 华中理工大学:http://pypi.hustunique.com/ 山东理工大学...
2019-11-01 17:21:48
113
原创 python爬虫之代理的使用
python爬虫之IP代理 1.为什么要使用代理 我们在爬虫的过程中经常遇到这样的情况:最初代码正常运行,正常抓取数据,一切是那么美好,但是一盏茶的功夫过后可能就会出现错误,比如403forbidden 出现这样的原因多半是因为网站采取了反爬措施,比如,网站会检测一个ip单位时间发送的请求数,超过某个数量就会限制该IP的访问,一段时间后才能恢复。这种情况就是封IP,于是网站成功的把我们的爬虫限制了...
2019-11-01 17:20:23
191
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人