Python爬取B站弹幕代码分析

最新推荐文章于 2024-09-15 17:03:24 发布
最新推荐文章于 2024-09-15 17:03:24 发布
阅读量2k 收藏 2
点赞数
分类专栏： # 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sinat_38944746/article/details/79070065
版权
  • re是正则模块
  • re.findall 的简单用法（返回string中所有与pattern相匹配的全部字串，返回形式为数组）
    语法：
findall(pattern, string, flags=0)
  • 出现以下报错
    bs4.FeatureNotFound: Couldn’t find a tree builder with the features you requested: xml. Do you need to install a parser library?
    原因：本地没有XML解析器
    解决方法：安装lxml
pip install lxml
努力敲代码的松芽
关注
专栏目录
69 | Python 网络爬虫案例 —— 爬取B站视频弹幕数据
微信号：RunsenLiu
04-23 3359
最近同学要做东西，需要用 B 站的视频对应的弹幕数据做分析，于是请我帮忙爬取 B 站视频的弹幕数据。B站提供了一个接口，可以通过视频的cid获取对应的弹幕数据。本文将使用Python和XPath来实现爬取B站视频弹幕数据的操作。
python爬取bilibili弹幕_用Python爬取B站视频弹幕
weixin_39854923的博客
11-24 1682
原标题：用Python爬取B站视频弹幕via：菜J学Python众所周知，弹幕，即在网络上观看视频时弹出的评论性字幕。不知道大家看视频的时候会不会点开弹幕，于我而言，弹幕是视频内容的良好补充，是一个组织良好的评论序列。通过分析弹幕，我们可以快速洞察广大观众对于视频的看法。下面是通过一个关于《八佰》的视频弹幕数据，绘制了如下词云图，感觉效果还是可以的。 海量的弹幕数据不仅可以绘制此类词云图，还可以调...
python爬虫实践-B站弹幕分析
qq_45886782的博客
10-19 3230
系列文章目录 提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录系列文章目录前言目录主程序模块main（）函数1.访问弹幕数据2.对弹幕数据进行解析3.保存到doc文件总结 前言 在前两次的晋江小说和腾讯弹幕爬取基础上，我逐渐觉得自己掌握了这门技术的奥义？于是迫不及待地又对准了我的下一个目标——B站。 为什么是B站？作为弹幕文化的大本营，必须是B站，B站的大部分有趣都来自于弹幕。 目录 与前两个爬虫实践如出一辙，都是一个主函数作为程序入口，并调用子函数。其它几个def定义的
《用python 玩转数据》项目——B站弹幕数据分析
weixin_34161029的博客
07-13 8398
1. 背景在视频网站上，一边看视频一边发弹幕已经是网友的习惯。在B站上有很多种类的视频，也聚集了各种爱好的网友。本项目，就是对B站弹幕数据进行分析。选取分析的对象是B站上点播量过1.4亿的一部剧《Re:从零开始的异世界生活》。2.算法分两部分：第一部分：2.1在《Re:从零开始的异世界生活》的首页面，找到共25集的所有对应播放链接和剧名的格式，获取每...
Python：抓取 Bilibili（B站）评论、弹幕、字幕等
最新发布
qq_41297934的博客
09-15 2262
​ 个人科研学习需求，需要获取一些 UGC（user generated content），包括 UP 的内容、弹幕、评论等。于是从 哔哩哔哩 (゜-゜)つロ 干杯~-bilibili抓取了一些数据，以下内容仅供学习参考。
python爬取b站直播弹幕代码
weixin_35752233的博客
02-15 968
以下是使用Python爬取B站直播弹幕的代码示例： import requests import json import time def get_real_url(room_id): # 获取直播间的真实流媒体地址 url = 'https://api.live.bilibili.com/xlive/web-room/v1/playUrl/playUrl' params...
实现B站弹幕很难么？这个开源项目了解一下
<sdffdsfsdfdfs>sfsfsfsdfsdffds</sdfsDS>Fsd
10-23 492
Python实战社群Java实战社群长按识别下方二维码，按需求添加扫码关注添加客服进Python社群▲扫码关注添加客服进Java社群▲开源最前线（ID：OpenSourceTop） 猿妹...
Python分析《哈哈哈哈哈》47687条弹幕，看看大家都在说些啥！
Python中文社区
01-25 612
图片来源：豆瓣最近由腾讯视频、爱奇艺联合出品综艺《哈哈哈哈哈》(又名五哈)话题不断，节目中由邓超、陈赫、鹿晗组成的兄弟旅行团，开启了一段由东到西穿越中国的真实旅行。作为首个双平台联播的超...
python爬取b站弹幕分析_B站直播弹幕获取 - 用python写一个B站弹幕姬吧
weixin_39652869的博客
11-24 1240
前言关于这个小项目的由来。最开始是想要利用b站的弹幕进行一些互动之类的。原本也有想过可以利用现有的弹幕姬做个插件来解决的，但无奈不会C#，所以只能自己研究b站的弹幕协议。后来有写过一个C++版本的，不过有一些小问题，这在后文中会提到。开码一丶利用 POST 方式获取 B 站直播弹幕参考：【python】b站直播弹幕获取首先，随便打开一个b站的直播页面，按F12打开控制台，点进“网络（Network...
python爬取b站弹幕并进行数据可视化
热门推荐
weixin_43996337的博客
11-22 1万+
python爬取b站弹幕并进行数据可视化 1.第一步，爬取b站弹幕 我们随便打开一个b站视频 打开开发者模式，在network下搜索list，可以找到该视频的弹幕文件 打开之后是这个样子的 结构还是比较简单的，我们后续爬取数据也就比较方便 下面是爬取弹幕的代码 // An highlighted block from bs4 import BeautifulSoup#负责解析网页源码 imp...
python爬取b站弹幕并制作词云_Python爬取B站弹幕并制作词云图
weixin_39622891的博客
02-04 391
前言本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,如有问题请及时联系我们以作处理。基本开发环境Python 3.6Pycharm相关模块的使用requests在cmd中 pip install requests 安装即可我这是显示已经安装过了的，如果你没有安装的话，是会有安装进度条的。目标网页分析就选择B站排行榜第一的视频。如何找到弹幕数据？如上图所示：1、点击进入网页之后，...
关于B站的弹幕集成
weixin_34082695的博客
07-13 500
好久没写博客了，也是因为最近公司项目挺忙的！正好这次迭代之后有点时间，所以写写博客，消磨一下时间！ 现在很多直播软件都有相应的弹幕功能，以前也没怎么关注，最近正好公司的项目中用到了关于弹幕的内容，所以这里正好记录一下相关的知识！ B站DanmakuFlameMaster弹幕的相关链接 本文知识点 DanmakuFlameMaster的集成与简单使用 DanmakuFlameMaster的进阶使用...
python爬虫（爬取弹幕）
weixin_42965311的博客
09-12 6189
一、首先导入需要的模块 import re import requests 首先导入这两个模块，一个是正则需要的模块，因为之后需要用正则来匹配，之后导入 request 模块，爬取数据需要的模块。 二、页面请求，提取数据 url='https://api.bilibili.com/x/v1/dm/list.so?oid=54160178' headers={'User-Agent'...
慕课《用Python玩转数据》之B站弹幕数据分析
weixin_44418083的博客
09-01 4984
慕课《用Python玩转数据》之B站弹幕数据分析 1.源代码 # -*- coding: utf-8 -*- """ Created on Wed May 13 17:01:29 2020 @author: 苏子都 """ import requests import re import numpy as np import pandas as pd from bs4 import BeautifulSoup import datetime import matplotlib.pyplot as pl
弹幕全是“二刷”，这部剧有多好看？用Python收集用1.1W弹幕，做词云分析
Python案例分享，B站视频教程：https://space.bilibili.com/523606542
03-24 1490
环境介绍 python 3.8 pycharm requests >>> pip install requests pyecharts >>> pip install pyecharts 视频弹幕收集 请求数据 headers = { 'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/99.0.4844.7
python爬取b站弹幕分析_python3写爬取B站视频弹幕功能
weixin_40005454的博客
11-24 233
需要准备的环境:一个B站账号,需要先登录,否则不能查看历史弹幕记录联网的电脑和顺手的浏览器,我用的ChromePython3环境以及request模块,安装使用命令,换源比较快:pip3 install request -i http://pypi.douban.com/simple爬取步骤: 登录后打开需要爬取的视频页面,打开开发者工具台,Chrome可以使用F12快捷键,选择network监听...
【python--爬虫】b站弹幕爬虫
qq_43017750的博客
08-03 5127
# -*- coding:utf-8 -*- # 时间:2020/8/3 # 作者:猫先生的早茶 """ 获取bilibili直播间弹幕 房间号从url上获取。 例如直播间url为：https://live.bilibili.com/21584153?visit_id=2vnqkd7xmr28 房间号就为:21584153 获取不同房间的弹幕:修改第26行的roomid的值为对应的房间号 """ import requests; import time; clas
python爬取b站弹幕
04-02
以下是使用Python爬取B站弹幕的基本步骤： 1. 确定目标视频的av号或BV号，例如：https://www.bilibili.com/video/BV1ib411v7uV 2. 打开Chrome浏览器，进入目标视频页面，按下F12键，打开开发者工具。 3. 点击“Network”选项卡，刷新页面，找到“弹幕”请求，记录下请求的URL和参数。 4. 使用Python的requests库发送HTTP请求，获取弹幕数据。 5. 对弹幕数据进行解析，提取出所需信息。 6. 可以使用Python的Pandas库将数据保存为CSV文件。 下面是一段示例代码： ```python import requests import pandas as pd import xml.etree.ElementTree as ET # 目标视频的BV号 bv = 'BV1ib411v7uV' # 弹幕API的URL url = f'https://api.bilibili.com/x/v1/dm/list.so?oid={bv}' # 发送HTTP请求，获取弹幕数据 response = requests.get(url) xml_data = response.content.decode('utf-8') # 解析XML数据，提取弹幕信息 root = ET.fromstring(xml_data) danmu_list = [] for d in root.iter('d'): p = d.attrib['p'].split(',') danmu_list.append({ 'time': float(p[0]), 'mode': int(p[1]), 'fontsize': int(p[2]), 'color': int(p[3]), 'timestamp': int(p[4]), 'sender_id': int(p[5]), 'row_id': int(p[6]), 'danmu_id': int(d.attrib['id']), 'content': d.text }) # 将弹幕数据保存为CSV文件 df = pd.DataFrame(danmu_list) df.to_csv(f'{bv}.csv') ``` 注意：使用上述代码爬取B站弹幕需要遵守相关法律法规和B站的规定，不得用于商业用途。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值