Python爬虫获取b站综合热门视频Top100的详细信息(最新可用版 附源码)

于 2024-03-19 21:16:30 发布
阅读量2.4k 收藏 42
点赞数 30
文章标签： 爬虫 python 信息可视化 开发语言 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xiaonbsnsn/article/details/136851905
版权

首先,我们先要爬取的页面是这个，获取以下视频的详细信息(播放量，点赞数，作者等)

打开开发者工具,直接全局搜索第一个视频关键词“猫”,进入对应包中,查看详细信息。

我们发现响应数据都由json字符串构成。查看对应参数和url

我们猜测ps可能为个数,pn为页数,wts为时间戳，其他不知道。

再往下滑获取接下来视频的信息

最低0.47元/天 解锁文章
BugCat2024
关注
小白通俗版Python爬取b站排行榜top100并编辑为csv文件
asgria的博客
02-15 1084
import requests from bs4 import BeautifulSoup import csv 嘿嘿，该项目需要引入3个库 1.requests（用于连接URL(网络)） 2.bs4（用于解析URL（网络）) 3.csv（把文件保存为csv模式（类似excel）） 如果没有这些库可以在dos窗口用‘pip install 库名’来安装 1.获取数据所需要的库: requests...
Python爬虫实战(实战篇)—18获取【小红书】首页信息写入Excel(仅用于学习-附完整版代码)
最新发布
weixin_42636075的博客
06-13 3352
Python爬虫实战(实战篇)—18获取【小红书】首页信息写入Excel(仅用于学习-附完整版代码)
Python爬取B站排行榜前100视频信息
人生苦短， 还不用Python？
11-03 3627
前言 本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,如有问题请及时联系我们以作处理。 PS：如有需要Python学习资料的小伙伴可以加点击下方链接自行获取 python免费学习资料以及群交流解答点击即可加入 目标网页分析 获取数据内容 标题 播放量 弹幕量 作者 综合得分 详情页地址 开发者工具一看，好家伙，就这？ 当看到这样的情况，是真的不用分析什么了，直接就可以从头到尾开始写代码了 直接就是爬虫三部曲走起了。 1、模拟浏览器请求网站获得网页数据； 2、解析网页数据，提取想
【爬虫入门】python爬取b站热门视频排行榜榜单数据
mihu的博客
04-17 1750
通过bs的find_all将html解析找到大体位置后，通过正则库re的findall方法进行更精确匹配获取信息。这里请求头信息包含的内容越详细越不易识破，信息详情可以借助chrom的F12中的network看。urllib.read（），返回一个长字符串，包含url所对应html的所有内容。在解析网页结构时，因解析部分代码重复挺多了，就封装了函数addToData。可以将数据保存为一个表格文件，也可以使用sqlite数据库进行保存。模拟发送请求可以使用urilib或requests，这里使用的是。
python selenium 爬取b站全站排行榜100个视频的播放量 弹幕数 点赞量 投币数 收藏量 分享数
林
12-12 3661
python selenium 爬取b站全站排行榜100个视频的播放量 弹幕数 点赞量 投币数 收藏量 分享数
Python：爬取B站TOP100热门视频数据并保存为CSV
Neco-Dec12.的博客
03-17 2730
在这篇博客中，我们将探讨如何使用Python的requests库来获取B站（哔哩哔哩）的热门视频数据，并使用pandas库来整理和保存这些数据。通过这个教程，你将能够理解如何从API获取数据，以及如何使用Python处理和分析这些数据。
高分课程设计 基于Python爬虫+Flask的B站热门视频TOP20数据分析可视化系统源码+项目报告+部署文档+全部数据资料
04-23
高分毕业设计 基于Python爬虫+Flask的B站热门视频TOP20数据分析可视化系统 实训项目+报告源码+部署文档+全部数据资料 【备注】 1、该项目是高分毕业设计项目源码，已获导师指导认可通过，答辩评审分达到95分 2、该...
Python爬取电影榜单Top100并保存csv文件（附源码下载）
03-20
项目功能：使用Python爬取Top100电影榜单数据并保存csv文件，需要的小伙伴们下载源码做参考即可。 开发工具 Python版本： 3.6 相关模块： requests模块、time模块、parsel模块、csv模块。 操作： 浏览器中打开...
基于python爬虫豆瓣电影Top250数据分析与可视化系统完整源码.zip
03-04
【资源说明】 1、该资源包括项目的全部源码，下载可以直接使用！ 2、本项目适合作为计算机、数学、电子信息等专业的...基于python+Flask框架+Echarts+WordCloud的爬虫豆瓣电影Top250数据分析与可视化系统完整源码.zip
基于python爬虫爬取B站热门视频信息
weixin_51575130的博客
02-08 1214
2.右键查看页面源代码，将第一个标题选取部分搜索，得到信息内容的来源，查看负载中的请求地址，这里作为目标url地址。6.完整代码，（爬取数据+保存数据+根据标题评论弹幕量生成柱状图。5.打开保存的文件csv中的信息，分别建立空列表保存，作为绘图数据。这里我只选取了评论数量和弹幕量的显示，生成柱状图代码。3.爬取热门视频的信息并保存到csv文件中。1.打开B站的热门视频。
Python：从B站获取TOP100视频封面和源代码——爬虫教程
Neco-Dec12.的博客
03-17 1041
在本教程中，我们将学习如何使用Python编写一个简单的爬虫，从B站获取TOP100视频的封面图片和相关的源代码数据。
Python爬虫练习：爬取b站热门视频并导入Excel
Python案例分享，B站视频教程：https://space.bilibili.com/523606542
09-15 920
本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。 以下文章来源于python教程，作者小雨 这篇文章主要介绍了Python如何爬取b站热门视频并导入Excel,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下 代码如下 导入工具 import requests from lxml import etree import xlwt import os 爬取b...
Python爬取哔哩哔哩今日热门视频实战
qq_41696843的博客
10-07 2320
Python爬取哔哩哔哩今日热门视频 今天给大家分享一个利用python来爬取哔哩哔哩今日热门视频的实战， 还是先说思路： 第一步：想办法寻找到单个视频的真实的url位置 第二步：提取单个视频真实url 第三步：保存获得的数据 第一步： 进入哔哩哔哩今日热门：https://vc.bilibili.com/p/eden/rank#/?tab=%E4%BB%8A%E6%97%A5%E7%83%AD%...
课程作业——爬虫练习bilibili热门视频排行榜（Python）
qq_51973991的博客
04-26 1700
1.BeautifulSoup解析 import requests from bs4 import BeautifulSoup import datetime if __name__=='__main__': url = 'https://www.bilibili.com/v/popular/rank/all' headers = { //设置自己浏览器的请求头 } page_text=requests.get(url=url,headers=headers
爬虫实战：爬取bilibiliTop100条热门视频信息
qq_49005782的博客
04-28 6742
爬取bilibiliTop100条热门视频信息 对于信息的爬取可以分为三个步骤进行处理，分别是获取网页、获取和解析数据最后保存数据。于是我们的主函数的框架如下： def main(): # 1. 获取网页 baseurl = "https://www.bilibili.com/v/popular/rank/all" # 2. 获取和解析数据 datalist = getData(baseurl) # 3. 保存数据 savepath = "./B站热门视频.x
scrapy爬取视频详细播放量
weixin_40530363的博客
05-09 764
找到对应network下的Doc中的html，之后找到对应播放量位置使用如下代码爬取
爬取B站视频播放量及数据可视化
热门推荐
吾名招财的博客
12-14 2万+
爬取B站视频及简要数据分析一级目录 一级目录
Python爬虫学习基础——5分钟学会爬取B站视频日播放量排行
qq_44786543的博客
07-20 3748
Python爬虫学习基础——5分钟学会爬取B站视频日播放量排行基础包含requestspyquery进入正题 基础包含 这也是我当初第一次学习爬虫时做的练习，感觉给初学者练笔挺不错的。运用的知识也不是太多，只运用了requests库以及pyquery的相关知识，就算是小白花几个小时也完全可以掌握。 requests requests库相对于我们以前使用的urllib有着更强大的处理网页能力，大部分...
使用Python爬取B站UP主所有视频信息
qq_41661843的博客
02-29 8871
运行整个流程self.get_url() # 获取当前页面的视频URLself.next_page() # 遍历所有页面获取视频URL# 使用多线程提高数据获取效率thread.join() # 等待所有线程完成# 所有线程完成后，保存数据到Excel。
评论 6
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值