- 博客(2)
- 收藏
- 关注
转载 五种ip proxy的设置方法
五种ip proxy的设置方法我们在制作爬虫爬取想要的资料时,由于是计算机自动抓取,强度大、速度快,通常会给网站服务器带来巨大压力,所以同一个IP反复爬取同一个网页,就很可能被封,在这里介绍相关的技巧,以免被封;但在制作爬虫时,还是要适当加入延时代码,以减少对目标网站的影响。一、requests设置代理:import requestsproxies = { “http”: “http://192.10.1.10:8080”, “https”: “http://193.121.1.10:9080”,
2020-10-24 16:33:02
7381
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人