[python爬虫] bilibili视频评论翻页功能

最新推荐文章于 2024-05-17 21:44:29 发布
最新推荐文章于 2024-05-17 21:44:29 发布
阅读量1.3k 收藏 1
点赞数
分类专栏： Python爬虫 python小技巧 文章标签： python爬虫 bilibili视频评论翻页
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_41424687/article/details/103001330
版权

bilibili视频评论翻页逻辑

翻页功能 (Android App抓包 不是web端 但原理都适用)

设 1. 总评论数y

     2. 第几页(当前爬到第几页)z

利用 z小于等于y就会有数据的逻辑

一页20条数据 发一页的请求拿20条数据

int(y/20)+1<=z 为真 break   为假 继续z+1  则继续发送页请求

因为int(4001/20)+1永远等于201页   而当前页数z范围在1-201

num: 2, size(一页20条): 20, count: 1626, acount(总评论数): 4001

 

 

长河落日渊
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
python爬虫初探（爬取bilibili视频的评论）
FNAspectOL的博客
02-03 515
import requests import json # import pprint coll = {} url = "https://api.bilibili.com/x/v2/reply?&jsonp=jsonp&pn=1&type=1&oid=884129021&sort=2&_=1612337407736" data = json.loads(requests.get(url).text) for i in data["data"]['repl.
python爬取bili评论
wgnms的博客
03-24 732
实例操作。非常规页面爬取 import requests import lxml.html import json class Bili: def __init__(self): pass def getMsg(self,url): headers = { 'User-Agent': 'Mozilla/5.0 (Window...
2024最新用python抓取b站评论数据，支持分页爬取上千条哔哩哔哩评论
m0_63289473的博客
05-17 1004
前言Python抓取b站评论最新代码编码不易，请支持原创！付费后，可获取完整python爬虫源码及结果文件。使用中有任何问题都可以免费咨询。大家好，我是野火，专注互联网创业项目，同时也是一名程序猿。废话不多说，我们来演示用python抓取b站视频评论的功能。
Python爬取B站视频全部评论
github_39611284的博客
09-06 7479
Python3爬取B站视频全部评论1.为什么有这篇文章2.相关代码 1.为什么有这篇文章 最近受朋友委托需要爬取B站视频下的评论作为他的分析数据，我上网查了很多相关教程和文章都没有爬取全部的评论，不能满足朋友的需求，只好自己动手，在此分享一下实现代码供大家学习交流。 2.相关代码 通过输入B站视频Bvid号，可以将视频下的评论全部保存到csv文件中。（说明一下：输出显示 总评论数 > 当前评论数，这并不是BUG，而是总评论数包含评论和回复，这里只是爬取了评论。） ```python3 import
年轻小伙竟用python爬取B站视频评论！
weixin_42577686的博客
06-09 2262
大家好，我是啃书君。 今天为大家带来的小demo是爬取B站视频的评论。开始还以为很难，等正真上手的时候发现，也就是那么回事。 高考对于每个人来说都是人生的重大转折点，你考上一所什么样的大学，极大可能改变你未来的人生。因此，读书很重要，读书可以改变自己的命运。 衡水中学的张锡锋，想必很多小伙伴们都认识吧，也是他激励了大多数人的学习热情，他的19年演讲视频在B站已经有1574万的播放量了，最近又出了一个新的视频《无产阶级的孩子跨越阶级的希望》，目前还没有多少人看，没有火起来。因此，我就爬取他在19年衡中的演讲视
B站视频python爬虫下载
03-29
B站视频python爬虫下载，注意修改video_bvid，通过视频链接可以查看。B站视频python爬虫下载，注意修改video_bvid，通过视频链接可以查看。B站视频python爬虫下载，注意修改video_bvid，通过视频链接可以查看。B站...
bilibili用户python爬虫程序
11-20
这是一个用于在Bilibili平台上进行用户信息抓取的Python爬虫程序。通过该程序，用户可以自动获取Bilibili上的用户信息，包括用户ID、昵称、关注数、粉丝数、投稿视频等数据，实现批量采集和分析Bilibili用户信息的...
python爬虫项目bilibili-user-master.zip
最新发布
06-12
【Python爬虫项目：Bilibili-User-Master】 该项目是一个使用Python编写的B站（哔哩哔哩）用户信息爬虫。Bilibili是中国知名的弹幕视频分享网站，拥有大量的用户和活跃社区。通过爬取B站用户数据，我们可以进行用户...
Python项目开发实战_数据挖掘与分析-Bilibili视频爬虫_编程案例解析实例课程教程.pdf
04-10
例如，对于Bilibili视频爬虫，这可能意味着抓取视频的元数据，如标题、播放次数、评论等。数据采集是后续分析的基础，没有有效的数据采集，就无法进行深入的分析。 数据分析紧接着数据采集，通过对收集的数据进行...
Python爬虫示例之bilibili-user-master.zip
05-11
Python爬虫示例之bilibili-user-masterPython爬虫示例之bilibili-user-masterPython爬虫示例之bilibili-user-masterPython爬虫示例之bilibili-user-masterPython爬虫示例之bilibili-user-masterPython爬虫示例之...
python爬bilibili弹幕
quedgee
01-06 861
import requests import time #统一资源定位符 ' " 单双无区别 '''三引号支持多行，类似pre标签 url = 'https://api.live.bilibili.com/ajax/msg' #要提交的数据 form = {'roomid':'79558', 'token':'', 'csrf_token':'e7fa015936c1ccb7f08d06a
用python在b站买楼（评论抢一楼）
Junhao的博客
07-21 1808
该脚本能实现在b站买房。 只需输入cookie(模拟登录）、up主的uid和评论即可。 因为直接登录比较麻烦，本来就是个简易脚本，因此采用cookie登录 获取cookie的方法： 先用浏览器登录一遍b站 再用浏览器打开：https://api.bilibili.com/x/v2/reply/add 然后调出开发者工具，chrome的快捷键是F12，其他浏览器度娘去。 然后刷新一下，...
B站评论爬虫--爬取游戏主页评论
数据小红的博客
04-08 2184
由于公司需要监控到不同时间段用户观点的变化，需要爬取各个平台下我们用户的评论，因此，B站评论爬取的需求诞生啦！！~~看了网上的其他教程，都没有我这个类型的（大多数是普通的up上传的视频），我这个呢，是官方游戏主页（也许可以这么叫吧，我也不知道，反正就是从地址上看就不大一样，是http://www.biligame.com开头的） 那么这种特别一点的评论要怎么爬取呢？接下来我们一起来解决吧~ 查找评...
python实现B站评论分页爬取
weixin_51575130的博客
02-06 2004
变化的参数为 Jt+wt，这里的wt为固定值。并且采取了md5加密的方式，分析可得Jt的值为en中内容的综合，en内容则为负载中的固定值。2.打开开发者工具，点击网络刷新界面，下滑页面数据让数据加载出来，随便选择一条评论复制，粘贴到开发工具中的搜索框中，找到对应的包。7.这里处理w_rid参数，在源码页面中搜索，w_rid参数，查看所处位置，进行断点检测。5.实现翻页爬取时，找到变化的对应参数。
b站“视频评论区”抽奖 讲解（含JS源码）
Love丶伊卡洛斯
08-08 3999
前言 如有 动态评论区 抽奖需要，可以参考：JS实现b站动态抽奖“公平”方案——动态+转发 因为转发抽奖只支持小人数，如果人少，可以使用：JS实现b站动态转发抽奖（小人数）新方案讲解 B站动态转发抽奖脚本+教程 视频讲解 B站“视频评论区”抽奖 讲解【JS】 传送门 正文 1.打开视频页面 2.鼠标右键打开“检查”工具 或 按F12 3.直接贴入代码，直捣黄龙 代码如下，复制粘贴进入
如何实现python自动打开B站视频并点赞？
02-09 1288
import pyautogui import time import webbrowser import selenium import os # 浏览器运行目录 chromePath = r"C:\Users\Administrator\AppData\Local\Google\Chrome\Application\chrome.exe" # 注册浏览器 webbrowser.register('chrome', None, webbrowser.BackgroundBrowser(chromeP.
python爬虫：Ajax异步爬取数据（b站评论区）
qq_46145027的博客
04-07 3697
爬虫时遇到很多数据并不在访问网址的返回包里，而是随着用户下拉逐步加载的，也就是用到了Ajax，那么这时我们该如何爬取我们想要的数据呢？
Python 网络爬虫实战：爬取 B站《全职高手》20万条评论数据
热门推荐
亮出锋芒，剑指苍穹
11-06 2万+
本周我们的目标是：B站（哔哩哔哩弹幕网 https://www.bilibili.com ）视频评论数据。 我们都知道，B站有很多号称“镇站之宝”的视频，拥有着数量极其恐怖的评论和弹幕。所以这次我们的目标就是，爬取B站视频的评论数据，分析其为何会深受大家喜爱。 首先去调研一下，B站评论数量最多的视频是哪一个。。。好在已经有大佬已经统计过了，我们来看一哈！ 【B站大数据可视化】B站评论数...
python 爬虫bilibili
08-12
Python爬虫可以用于爬取Bilibili的视频数据。首先，需要了解Bilibili网站的结构和数据呈现方式，并构建相应的请求来获取所需的数据。同时，还需要注意Bilibili可能设置了反爬虫机制，可能需要采用一些反反爬虫的方法...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值