爬虫-腾讯视频-弹幕&评论

最新推荐文章于 2024-04-27 17:30:34 发布
VIP文章 最新推荐文章于 2024-04-27 17:30:34 发布
阅读量1k 收藏 3
点赞数
分类专栏： 爬虫 文章标签： python 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_50248555/article/details/121399272
版权

思路&代码参考微信公众号：Python与Excel之交 ，作者小刀

以电视剧《当家主母》为例

网页：当家主母 第01集_1080P在线观看平台_腾讯视频

弹幕

进入浏览器的开发者模式

 真实url

https://mfm.video.qq.com/danmu?otype=json&callback=jQuery19109520777980786752_1637214421099&target_id=7517171629%26vid%3Dr00419n203n&session_key=0%2C0%2C0&timestamp=15&_=1637214421123

https://mfm.video.qq.com/danmu?otype=json&callback=jQuery19109520777980786752_1637214421097&target_id=7517171629%26vid%3Dr00419n203n&session_key=0%2C122%2C1637214425&timestamp&
最低0.47元/天 解锁文章
GoldenFong
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
《爬虫之-bili视频》源码
11-30
《爬虫之-bili视频》源码解压密码：tester。 《爬虫之-bili视频》源码解压密码：tester。 《爬虫之-bili视频》源码解压密码：tester。 《爬虫之-bili视频》源码解压密码：tester。
《云南虫谷》爆火播放中，Python抓取3.6万条评论！评论太搞笑了吧！
weixin_52994140的博客
09-07 645
最近鬼吹灯系列网剧《云南虫谷》上线，作为鬼吹灯系列作品，承接上部《龙岭迷窟》内容，且还是铁三角原班人马主演，网友直呼非常好看！ 今天，我们就用Python爬取目前全部剧集的评论（含预告片），并做数据统计与可视化展示分析，一起跟着网友看看这部剧吧！ 本文将详细讲解爬虫与数据处理可视化，寓教于乐！ 需要完整代码的童鞋“点这里获取” 1. 网页分析 本次评论全部来自腾讯视频（毕竟独播） 打开《云南虫谷》播放页面，F12进入到开发者模式，我们下滑点击"查看更多评论"，可以发现评论的真实请求...
爬虫自动抓取腾讯视频评论 -- json的使用和数据解析
Step By Step
08-19 2714
这周和大家分享下腾讯视频评论抓取爬虫，实际抓下来的数据里面除了评论还有其他不少有价值的信息，有部分用户数据可以使用的，不过具体就看大家自己怎么用了。 　　这个demo的具体源码在最后面，下文将对这个demo的实现过程进行说明。
Python爬取10529条《三十而已》热评，看看大家都说了些啥！
菜J学Python的博客
07-29 647
继《隐秘的角落》后，又一部“爆款剧”——《三十而已》获得了口碑收视双丰收，王漫妮、顾佳、钟晓芹三个女主角的故事线频频登上微博热搜。《三十而已》于2020年7月17日在东方卫视首播，并在腾讯视频同步播出。为了了解吃瓜群众们对这部剧的看法，我爬了爬腾讯视频关于这部剧的评论，并做了简单文本可视化分析。 一、数据获取 1.分析评论页面 腾讯视频评论要点击查看更多评论才能加载更多数据，很明显是一个动态网页，评论内容使用了Ajax动态加载技术。因此，我们需要找到真实URL，然后再请求数据。 找到真实URL其实不.
抓取腾讯视频评论
weixin_44677658的博客
02-16 228
应用技术：浏览器伪装，抓包分析，正则提取 import urllib.request import re import random #https://video.coral.qq.com/varticle/[视频id] /comment/v2?callback=_varticle4563082514commentv2&orinum=[评论条数]&oriorder=o&pa...
python爬虫学习笔记（一）—— 爬取腾讯视频影评
行歌
03-31 4366
       前段时间我忽然想起来，以前本科的时候总有一些公众号，能够为我们提供成绩查询、课表查询等服务。我就一直好奇它是怎么做到的，经过一番学习，原来是运用了爬虫的原理，自动登陆教务系统爬取的成绩等内容。我觉得挺好玩的，于是自己也琢磨了一段时间，今天呢，我为大家分享一个爬虫的小实例，也算是记录自己的学习过程吧。     我发现腾讯视频出了一部新的电视剧，叫做《新笑傲江湖》，也不知道好看不好看，反...
Python爬虫实战，requests模块，Python实现抓取腾讯视频弹幕评论
热门推荐
weixin_43649691的博客
11-04 1万+
前言 利用Python实现抓取腾讯视频弹幕，废话不多说。 让我们愉快地开始吧~ 开发工具 Python版本： 3.6.4 相关模块： requests模块； pandas模块 以及一些Python自带的模块。 环境搭建 安装Python并添加到环境变量，pip安装需要的相关模块即可。 思路分析 本文以爬取电影《革命者》为例，讲解如何爬取腾讯视频的弹幕和评论！ 目标网址 https://v.qq.com/x/cover/mzc00200m72fcup.html 抓取弹幕 分析网址 依然进入浏览器的开发者工具
腾讯视频影评爬虫(动态网页)
人生苦短，我用python
03-29 545
极客学院的入门爬虫最后一课: 环境: win10 scrapy1.6 mongode redis py3.6 main.py from scrapy import cmdline cmdline.execute('scrapy crawl dmoz'.split()) settings.py # -*- coding: utf-8 -*- BOT_NAME = 'Comment' SPIDE...
Python爬取腾讯视频评论的思路详解
python爬虫教程
03-04 3232
这篇文章主要介绍了Python爬取腾讯视频评论功能，本文图文详解给大家提供实现思路,需要的朋友可以参考下 一、前提条件 安装了Fiddler了（用于抓包分析） 谷歌或火狐浏览器 如果是谷歌浏览器，还需要给谷歌浏览器安装一个SwitchyOmega插件，用于代理服务器 有Python的编译环境，一般选择Python3.0及以上 声明：本次爬取腾讯视频里 《最美公里》纪录片的评论。本次爬取使用的浏览器...
Python爬虫| 实战爬取腾讯视频评论
数据森麟
04-15 614
作者：易某某 来源：Python进击者文章目录：一、前提条件二、分析思路三、代码编写四、结果展示一、前提条件安装了Fiddler了（用于抓包分析）谷歌或火狐浏览器如果是...
Python数据爬虫学习笔记（12）爬取腾讯视频评论数据（Fiddler抓包+浏览器伪装）
Smart3S的博客
09-28 2806
需求：爬取腾讯网站某个视频的所有评论数据，如下图： 工具：Python IDLE、Fiddler抓包工具（配置过程可参照相关博客，需设置为可抓HTTPS） 一、URL分析阶段： 1.打开某视频网页，本博文以斗破苍穹第一集为例，找到评论所在网页位置。 2.转到Fiddler，发现抓取的网址过多，只好输入命令Clear一下，然后点击网页中的“查看更多评论”按钮，即可在Fiddler找...
爬虫脚本项目源码-爬取腾讯课堂评论
02-27
爬虫脚本项目源码-爬取腾讯课堂评论
Python爬虫 视频弹幕提取过程
06-12
Python爬虫 视频弹幕提取过程,通过示例代码介绍的非常详细，需要的朋友可以参考下
Python爬虫-视频下载.zip
12-30
爬虫
精品--百日python，路线：语法->爬虫->网站->数据科学->机器学习->深.zip
02-05
精品--百日python，路线：语法->爬虫->网站->数据科学->机器学习->深
[python3] 读取一个正在更新的日志文件
言之。
04-24 928
等同于–follow=name --retry，根据文件名进行追踪，并保持重试，即该文件被删除或改名后，如果再次创建相同的文件名，会继续追踪。这两种方法都会持续监听日志文件的变化，并实时读取新增的日志内容。你可以根据实际需求选择其中一种方法。要读取一个正在更新的日志文件（即实时写入的日志文件），你可以使用 Python 的。的技巧来实现实时读取。函数打开文件，并使用。
Day25-Java基础之常用类1
最新发布
m0_46053885的博客
04-27 856
同时我们发现Math类中的方法都是静态的，因此在使用的时候我们可以直接通过类名去调用。对于计算机而言，其实是没有数据类型的概念的，都是0101010101，数据类型是编程语言自己规定的，所以在实际存储的时候，先把具体的数字变成二进制，每32个bit为一组，存储在数组中。比较内存地址值一般情况下是没有意义的，我们希望比较的是对象的属性，如果两个对象的属性相同，我们认为就是同一个对象；如果我们的数据是一个浮点类型的数据，有的时候计算机并不会将这个数据完全转换成一个二进制数据，而是将这个将其转换成一个无限的。
实现自定义注解、实现自定义幂等性注解
qq_44721738的博客
04-23 1058
添加 Spring AOP 依赖。创建自定义注解。创建一个新的 Java 注解类，通过@interface关键字来定义，并可以添加元注解以及属性。@Target(ElementType.METHOD) //表示作用于方法上@Retention(RetentionPolicy.RUNTIME) // 表示这个注解在运行时是可见的，这样 AOP 代理才能在运行时读取到这个注解编写 AOP 拦截（自定义注解）的逻辑代码。@Aspect@Component// 方法执行前的处理。
Pandas 2.2 中文官方教程和指南（二十二）
龙哥盟
04-24 1155
原文：pandas.pydata.org/docs/ 时间增量 原文：pandas.pydata.org/docs/user_guide/timedeltas.html 时间增量是时间之间的差异，以不同的单位表示，例如天、小时、分钟、秒。它们可以是正数也可以是负数。 Timedelta是datetime.timedelta的子类，并且行为类似，但也允许与np.timedelta64类型兼容，以及一系列自定义表示、解析和属性。 解析 您可以通过各种参数构造一个Timedelta标量，包括ISO 860
python抓取腾讯视频弹幕_Python爬虫练习：腾讯视频弹幕数据采集
05-18
好的，以下是使用 Python 抓取腾讯视频弹幕的步骤： 1. 打开腾讯视频网站，找到需要抓取弹幕的视频。 2. 进入视频播放页面，按 F12 打开开发者工具，选择「网络」选项卡。 3. 在开发者工具中输入弹幕发送区的内容，点击发送按钮，观察网络请求的情况。通常情况下，会有一个 POST 请求发送弹幕数据，返回弹幕数据的 URL。 4. 使用 Python 发送与浏览器相同的 POST 请求，获取弹幕数据。 5. 解析弹幕数据，获取需要的信息。 以下是具体的代码实现： ```python import requests import json # 腾讯视频弹幕接口 url = 'https://mfm.video.qq.com/danmu?otype=json&target_id=xxx&timestamp=xxx&count=xxx&second_count=xxx&session_key=xxx' # 替换为需要抓取弹幕的视频 target_id 和 session_key target_id = 'xxxxxxx' session_key = 'xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx' # 获取弹幕数据 def get_danmu_data(): # 替换为当前时间戳 timestamp = 'xxxxxxx' # 替换为需要抓取的弹幕数量 count = 'xxxxxxx' # 替换为需要抓取的二级弹幕数量 second_count = 'xxxxxxx' headers = { 'referer': 'https://v.qq.com/', 'cookie': 'pgv_pvi=xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx; pgv_si=xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx;' } headers['cookie'] += 'pgv_pvid=xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx;' url_with_params = url.replace('xxx', timestamp).replace('xxx', count).replace('xxx', second_count).replace('xxx', session_key).replace('xxx', target_id) response = requests.post(url_with_params, headers=headers) data = json.loads(response.content.decode('utf-8')) return data # 解析弹幕数据 def parse_danmu_data(data): for item in data['comments']: print(item['content']) # 测试 if __name__ == '__main__': data = get_danmu_data() parse_danmu_data(data) ``` 注意：该代码仅供学习参考，请勿用于非法用途。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值