- 博客(2)
- 收藏
- 关注
RSS订阅原创 python爬虫：爬取A站视频信息
成功get页面信息后，接着需要从页面上提取出每个视频信息，从页面源码上获取到视频信息只有视频标题、UP主名、视频播放量、评论量，要获取更多信息要到视频url源码获取。所以我先从源码中得到每个视频的url。每一页大约有30个视频，完成以上步骤基本可以获取到30个视频信息。如果要获取更多视频，需要获取页面url。只需要改变page这个参数就可以获取到多个页面，因此，需要for循环实现。获取到请求头和请求网址后就可以简单验证能否成功get页面信息。
2024-10-04 13:11:53
131
原创 Python爬虫：爬取B站视频信息
然而，每一页的视频量仅仅只有30多个，接下来需要做的是获取多页视频。当点击下一页时可以发现，网址上的参数也有一定的变化，抓住这点，不难发现下一页的参数发生变化。打印结果为“”说明成功get到该页面信息，接着我们可以在网页上找到数据保存格式为json格式，以字典形式逐渐提取需要的信息。摘取一个抓取响应标头cookie和请求标头信息，知道爬虫的小伙伴都知道有些参数是不需要的。进入网页版B站“每周必看”栏目界面，按快捷键F12进入开发者模式，按下图所示获取信息。
2024-09-28 20:59:01
395
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人