爬虫爬取b站弹幕方法

最新推荐文章于 2024-04-26 01:45:18 发布
最新推荐文章于 2024-04-26 01:45:18 发布
阅读量403 收藏 1
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/neheqi/article/details/105513017
版权

如何得到av号
打开网页，F12 -> netwokr ->console -> 输入 window.aid

如何得到

oid后为av号

https://api.bilibili.com/x/v2/reply?&type=1&pn=2&oid=90643306

https://api.bilibili.com/x/v1/dm/list.so?oid=154782269

获取oid的方法

https://api.bilibili.com/x/player/pagelist?aid=视频的av号

其中的cid属性就是视频的oid

neheqi
关注
用python爬取B站弹幕并绘制词云
Cachel Wood的博客
07-07 818
弹琵琶的小姐姐是我学python的动力啊啊啊
69 | Python 网络爬虫案例 —— 爬取B站视频弹幕数据
微信号：RunsenLiu
04-23 3247
最近同学要做东西，需要用 B 站的视频对应的弹幕数据做分析，于是请我帮忙爬取 B 站视频的弹幕数据。B站提供了一个接口，可以通过视频的cid获取对应的弹幕数据。本文将使用Python和XPath来实现爬取B站视频弹幕数据的操作。
python爬取B站弹幕
璨星烁的博客
09-05 1280
文章目录 1.所需库 2.cid的获取 3.源代码 1.所需库 requests：用于发送http请求 BeautifulSoup：用于解析html文档，便于之后的到导航和查找 pandas:用于对数据的处理，创建数据电子表格 2.cid的获取： 点击F12在右端获取 3.源代码如下： import numpy as np from PIL import Image from bs4 import BeautifulSoup url="http://comment.bilibili.com/cid.xm
爬取b站弹幕
黑胡子大叔的博客
02-08 2570
爬取b站弹幕 前段时间爬取了b站的弹幕，现在记录一下心得体会 前期准备 HTML解析 找到弹幕所在的json响应文件，发现里面有1000多条实时弹幕 分析参数： 只有视频的主键标识 oid 变法找到 oid 抓取下来（我是想着抓取一个up主的所有视频，所以要抓取全部的oid） 看到每个视频的url是固定的格式：https://www.bilibili.com/video/av+...
python简单爬取b站视频弹幕
qq_52080662的博客
05-26 328
python简单爬取b站视频弹幕 url:"https://comment.bilibili.com/139527441.xml" 代码： import imageio import jieba as jieba import requests import pandas as pd from lxml import etree url = "https://comment.bilibili.com/139527441.xml" # 发送请求 response = requests.get(url
详细python爬虫爬取b站弹幕
10-22
下面是一个详细的Python爬虫爬取B站弹幕的过程： 第一步，导入所需的库：我们需要使用requests库来发送HTTP请求，以获取网页内容，还需要使用BeautifulSoup库来解析网页。 第二步，发送HTTP请求并获取网页内容：...
爬虫爬取b站弹幕时间
02-22
要爬取B站弹幕的时间，你可以使用爬虫技术来获取。下面是一种可能的实现方式： 1. 首先，你需要安装Python，并安装相关的库，如requests、BeautifulSoup等。 2. 使用requests库发送HTTP请求，获取B站视频页面的...
python爬虫爬取b站弹幕
06-02
以下是一个简单的Python爬虫爬取B站弹幕的示例代码： ```python import requests import json # 视频AV号和弹幕池ID aid = 123456 cid = 789012 # 弹幕接口URL url = f'...
每天一个python小程序：爬取b站弹幕
weixin_45879179的博客
12-05 667
闲来无事整理自己的磁盘空间的时候翻看到了自己之前在学习过程中的各种小程序，随便点开来发现很多小知识点自己都已经忘记了，借着这个机会给自己回顾一下知识点，也让初学者们有一些参考的小程序练练手。
Java爬虫——B站弹幕爬取
weixin_34319999的博客
12-12 1006
如何通过B站视频AV号找到弹幕对应的xml文件号 首先爬取视频网页，将对应视频网页源码获得 就可以找到该视频的av号aid=8678034 还有弹幕序号，cid=14295428 弹幕存放位置为 http://comment.bilibili.com/14295428.xml 获得该链接内容即可。 1 package BiliBil...
用python爬取B站弹幕-小白级
Asssshzy的博客
08-14 358
小白用来练手的~ 欢迎指出不足！！ import requests import re #1.url url='https://api.bilibili.com/x/v2/dm/history?type=1&oid=158237505&date=2020-07-24' #2.模拟浏览器发送请求和接收响应 headers={ "user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36
利用python对b站某GPT-4解说视频的近万条弹幕进行爬取、数据挖掘、数据分析、弹幕数量预测及情绪分类
Z2021101258的博客
04-14 8123
近期，GPT-4在网络上引起了轩然大波，b站上也出现了许许多多关于GPT-4的解说视频，其中有一个解说视频受到了网友的热烈追捧，目前已填充有2万多的弹幕，这也引起了本人的极大兴趣，因此对该视频的弹幕进行了爬取，并记录于mysql数据库中，以进行数据分析、数据挖掘、弹幕数量预测和情绪分类等等。话不多说，正文开始。
python3抓取b站弹幕_python3写爬取B站视频弹幕功能
weixin_39670464的博客
03-01 415
需要准备的环境:一个B站账号,需要先登录,否则不能查看历史弹幕记录联网的电脑和顺手的浏览器,我用的ChromePython3环境以及request模块,安装使用命令,换源比较快:pip3 install request -i http://pypi.douban.com/simple爬取步骤: 登录后打开需要爬取的视频页面,打开开发者工具台,Chrome可以使用F12快捷键,选择network监听...
python实战：爬取哔哩哔哩视频弹幕
stormhou的博客
01-02 3216
response 内就是乱码的弹幕数据，弹幕内容可以通过 re 正则表达式提取。（本文首发在“程序员coding”公众号）pycharm 控制台输出如下，获取到 16589 条弹幕。（本文首发在“程序员coding”公众号）点开视频右侧的“弹幕列表”，点击下面的“查看历史弹幕”，选择一个其他日期。键盘 F12 快捷键，或者鼠标右击“检查”打开浏览器的检查页面。这个请求，右边就是弹幕的 url 地址。，播放任意一个视频。在开发者工具页面，找到。
b站弹幕爬取
BILL的博客
11-23 1136
批量弹幕爬取 import re import requests from bs4 import BeautifulSoup import sys def get_outer_urls(n): ''' 【分页网址url采集】 n：爬取页数 结果：得到分页网页的list ''' urllst = [] for i in range(n): ui = f'https://search.bilibili.com/all?keyword=助
爬取B站弹幕
qq_35859033的博客
01-18 4906
最近几天学习爬虫，便爬取了B站的弹幕，本篇博文记录的是爬取弹幕的方法一，近期会更新方法二。 下面是流程： 1.随意打开一个B站视频，按F12，点开network按键，在左上方的输入区输入 list 便可找到相应的弹幕数据包。  点开这个包是这个形式的网站 这里面就有明文的弹幕，但通过requests获得的response是经过utf-8编码加密过的，想要获得弹幕内容还要解密。 下...
程序员必须知道的数据结构：线性表与链表(1)，2024Python进阶学习资料
m0_60666452的博客
03-31 408
现在能在网上找到很多很多的学习资源，有免费的也有收费的，当我拿到1套比较全的学习资源之前，我并没着急去看第1节，我而是去审视这套资源是否值得学习，有时候也会去问一些学长的意见，如果可以之后，我会对这套学习资源做1个学习计划，我的学习计划主要包括规划图和学习进度表。分享给大家这份我薅到的免费视频资料，质量还不错，大家可以跟着学习。// add() 方法没有指定添加的数据对象的位置。// LinkedList 实现 add() 方法。// 实现也比较简单，直接将数据对象赋值到数组中。
python爬取B站弹幕数据
weixin_51575130的博客
12-07 745
根据要获取的弹幕天数，我这里for page in range (6,8):只为了获取 ，六号到七号的所有弹幕。因为历史弹幕要登陆才能查看，这里要在headers中加入自己浏览器的cookie（包含登录信息）将爬取到的数据保存为弹幕1.txt文件，打开查看内容 （方式一简单但爬取到的弹幕内容较少）这里可以直接看到当前视频的弹幕地址，可以直接用正则表达式筛选出所需的弹幕内容。打开页面的开发者模式，打开网络，点击前一天的历史弹幕，能看到弹幕数据。生成结果为弹幕2.txt的文本文件，打开查看结果。
100天精通Python丨黑科技篇 —— 21、大语言模型_100天精通python快速入门到黑科技
最新发布
m0_60452141的博客
04-26 620
ChatGPT 是 OpenAI 推出的一种基于 GPT-3/4 的聊天机器人。chatgpt 的颠覆性影响主要体现在提高语言交流的便捷性、个性化服务、自动化客服和教育娱乐等方面，这些应用可以为用户带来更多的便利和乐趣，同时也为企业提供了更多的服务和商机。本文收录于，是由的硬核博主倾力打造，分基础知识篇和黑科技应用两大部分，欢迎订阅本专栏，订阅后可私聊进Python全栈VIP交流群（问题解答、互相帮助）还可领取20GPython视频和100本互联网行业电子书。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值