因为爬取youtube信息难免需要用到网络代理,其中也果不其然遇到了问题
关于错误:URL ERROR[errno10061]
经搜索查询学习后发现该错误可以通过
首先通过middleware.py里的proxymiddleware类中的init方法中设置好代理服务器的ip
然后在setting.py中导入即可
之后便可进行youtube网页的爬取
因为爬取youtube信息难免需要用到网络代理,其中也果不其然遇到了问题
经搜索查询学习后发现该错误可以通过
首先通过middleware.py里的proxymiddleware类中的init方法中设置好代理服务器的ip
然后在setting.py中导入即可
之后便可进行youtube网页的爬取