最近做一个项目,需要爬蓝you云分享文件夹数据,然而有反爬虫机制,设置延迟和请求头都没用。
解决方法:
下载页面源码,在本地爬网页数据。
理论上任何网站都可以爬取。
关于反反爬虫思路
最新推荐文章于 2024-07-26 16:52:12 发布
最近做一个项目,需要爬蓝you云分享文件夹数据,然而有反爬虫机制,设置延迟和请求头都没用。
解决方法:
下载页面源码,在本地爬网页数据。
理论上任何网站都可以爬取。