Python网络爬虫实战(五)批量下载B站收藏夹视频

我们除了爬取文本信息，有的时候还需要爬媒体信息，比如视频图片音乐等。就拿B站来说，我的收藏夹内的视频可能随时会失效，所以把它们下载到本地是非常保险的一件事。

对于这种大量列表型的数据，可以猜测B站收藏夹的请求中，详细的收藏详细可能会是异步加载的，因为这部分数据可能比较庞大。

我们来分析一下网络请求。

可以看到对收藏夹的请求是指定URL加收藏夹的id号，我们爬取的前提是这个收藏夹是公共收藏夹，不然是无法访问的。

再来看他的返回，明显没有收藏视频的信息，所以可以判断收藏视频的信息是通过api接口异步加载的。

详细查看一下其他的请求，你会发现这样一条。

可以看到这里返回了json数据，内容就是我们收藏夹中的视频，但是这里这有20个，再来看请求的URL。