Drssionpage抓某音视频

已于 2024-07-13 13:48:12 修改
阅读量1.2k 收藏 10
点赞数 8
分类专栏： 抖音系列 Drissionpage分享 文章标签： 音视频 python 网络爬虫
于 2024-05-24 21:32:07 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_47459180/article/details/139184996
版权

讲一下这个操作过程啊，代码是死的，重要是知道咋弄，不然下次改了还是不晓得弄。这个里面用的是drissionpage实现的抓作品列表。dp的好处我就不多说了，有出过两篇，想深入了解的可以去看看。之前是用selenium玩过抖音(详细看看selenium抓抖音视频)
然后老三样看看这个dp操作抖音到底有多开心！
①dp登录进入作品列表
在这里插入图片描述
②滑动条下拉，展示出全部作品数据（不拉会拿不到）
在这里插入图片描述
③拿出每个作品的id
在这里插入图片描述
④分情况提取作品（视频/图片）
在这里插入图片描述
⑤ 拿下
在这里插入图片描述

网盘资源
对应源码：
在这里插入图片描述

Wy01688king
关注
专栏目录
爬虫神器之DrissionPage(快速采集数据)
我不是萧海哇的博客
02-29 1486
【代码】爬虫神器之DrissionPage(快速采集数据)
抖音用户主页视频数据爬虫详解（点赞，收藏，分享等）
最新发布
yanminghe66666的博客
08-14 3064
抖音用户主页视频数据爬虫详解（点赞，收藏，分享等）
大数据毕业设计PySpark+Hadoop+Hive+Flink地震预测系统 地震数据分析可视化 地震爬虫 大数据毕业设计 Flink Hadoop 深度学习 计算机毕业设计
全网粉丝100W+、全栈领域优质创作者、B站、github、CSDN等社区技术专家、专注于高端精品毕业项目源码实战
02-06 576
大数据毕业设计PySpark+Hadoop+Hive+Flink地震预测系统 地震数据分析可视化 地震爬虫 大数据毕业设计 Flink Hadoop 深度学习 计算机毕业设计
DrissionPage
嘻嘻哈哈的大傻子的博客
04-19 1748
但从 3.0 版开始，作者另起炉灶，用 chromium 协议自行实现了 selenium 全部功能，从而摆脱了对 selenium 的依赖，功能更多更强，运行效率更高，开发更灵活。因此，DrissionPag设计初衷，是将它们合而为一，能够在不同须要时切换相应模式，并提供一种人性化的使用方法，提高开发和运行效率。运行速度更快，可以跨 iframe 查找元素，无需切入切出，iframe 看作普通元素，获取后可直接在其中查找元素，逻辑更清晰。使不稳定的网络变得易于控制，程序更稳定，编写更省心。
网页自动化工具DrissionPage
李玺
04-19 6760
DrissionPage是一款新的基于 python 的网页自动化工具。
基于Python的网页自动化工具DrissionPage设计源码
04-03
DrissionPage是一个功能强大的基于Python的网页自动化工具，它结合了浏览器自动化的便利性和requests库的高效率。项目包含79个文件，主要使用Python和HTML编程语言。它能够控制浏览器并收发数据包，同时提供了丰富的内置功能和人性化的设计，使得自动化任务变得简单而高效。DrissionPage的语法简洁优雅，代码量少，便于学习和使用。
DrissionPage 自动播放
04-02 654
【代码】DrissionPage 自动播放。
自动化测试框架：DrissionPage
m0_51805222的博客
10-31 6160
1、既可以像selenium控制浏览器，也可以像requests进行数据包的发送和接收，将这两者结合在一起。这种综合性能使其非常灵活，可以适用于各种不同的自动化任务。2、工具内置了许多人性化的设计和便捷功能，使其更容易使用。这对于新手来说非常友好，也有助于提高开发效率。3、对于需要登录网站、分析数据包、处理JS源码、构造复杂请求以及应对验证码、JS混淆、签名参数等反爬手段的任务，DrissionPage提供了强大的支持。
DrissionPage终极神器
weixin_50910721的博客
04-13 3523
这三个软件都是用python代码打开浏览器去执行操作。Selenium：不支持异步操作，打开网站后变量可能和人操作时不一样，不防检测，易被封。Pyppepteer：绕过接口加密，直接访问获取网站信息，支持异步，有js脚本可以修改可能被检测的变量。DrissionPage：比Pyppepteer多功能，很多大网站Pyppepteer已经不行了。
如何通过drissionpage过瑞数3/4/5/6/vmp各个版本的反爬视频+学习代码
十一姐的博客
04-30 1555
如何通过自动化过瑞数3/4/5/6/vmp版本的反爬
一个基于 python 的网页自动化工具
03-17
DrissionPage 是一个基于 python 的网页自动化工具。 它既能控制浏览器，也能收发数据包，还能把两者合而为一。 可兼顾浏览器自动化的便利性和 requests 的高效率。 它功能强大，内置无数人性化设计和便捷功能。 它的语法简洁而优雅，代码量少，对新手友好。 用 requests 做数据采集面对要登录的网站时，要分析数据包、JS 源码，构造复杂的请求，往往还要应付验证码、JS 混淆、签名参数等反爬手段，门槛较高，开发效率不高。 使用浏览器，可以很大程度上绕过这些坑，但浏览器运行效率不高。 因此，这个库设计初衷，是将它们合而为一，同时实现“写得快”和“跑得快”。能够在不同须要时切换相应模式，并提供一种人性化的使用方法，提高开发和运行效率。 除了合并两者，本库还以网页为单位封装了常用功能，提供非常简便的操作和语句，使用户可减少考虑细节，专注功能实现。 以简单的方式实现强大的功能，使代码更优雅。 以前的版本是对 selenium 进行重新封装实现的。从 3.0 开始，作者另起炉灶，对底层进行了重新开发，摆脱对 selenium 的依赖，增强了功能，提升了运行效率。
DrissionPage:集成Selenium和请求会话的模块，封装常见的页面操作，可以实现两种模式之间的无缝切换
03-19
简介 DrissionPage，即驱动程序和会话组合而成的页面。是一个基于python的Web自动化操作集成工具。它实现了selenium并且请求之间的无缝切换。可以兼顾Selenium的便利性和要求的高效率。它集成了页面常用功能，两种...
微信小程序中的Page
热门推荐
ssyes123的博客
03-30 2万+
微信小程序中的PagePage()定义在js文件中，Page() 函数用来注册一个页面。Page()函数接受一个 object 参数，其指定页面的初始数据、生命周期函数、事件处理函数等。object参数为：怎么理解Page()函数接受一个 object 参数？？形如：Page({data,onLoad,onReady,...})，其中data，onLoad，onReady都是page的参数。举个例...
DrissionPage多线程实践
Orangesir的博客
02-01 3008
至此，多线程操作cp就验证完毕了。每个线程分别启动一个浏览器去执行任务，通过auto_port实现 – 每次启动关闭，会增加耗时根据线程数提前启动浏览器进程后，在fun中使用不同浏览器执行，最后关闭进程。同时也介绍了set_local_port方法，本质和上面的auto_port一样，一个指定，一个随机使用一个浏览器，启动多个tab页，多个线程分别操作不同的tab页即可。这里用到的是new_tab和get_tab等方法由于dp库的研发大佬还在不断迭代，后面可能有更方便的方法。
DrissionPage获取浏览器Network数据包
人工智能
01-14 1767
GitHub - g1879/DrissionPage: 基于python的网页自动化工具。既能控制浏览器，也能收发数据包。可兼顾浏览器自动化的便利性和requests的高效率。功能强大，内置无数人性化设计和便捷功能。语法简洁而优雅，代码量少。基于python的网页自动化工具。既能控制浏览器，也能收发数据包。可兼顾浏览器自动化的便利性和requests的高效率。功能强大，内置无数人性化设计和便捷功能。语法简洁而优雅，代码量少。
基于关键词自动采集抖音视频排名及互动数据（点赞、评论、收藏）
猿小白的博客
06-09 2522
在当今的社交媒体时代，抖音作为一个热门短视频平台，吸引了大量用户和内容创作者。本项目旨在开发一个基于关键词的自动化脚本，能够高效地采集抖音视频的排名及其互动数据。采集到的数据将以CSV和Excel格式保存，方便后续的数据分析和处理。该工具不仅适用于市场研究、内容创作分析，还可以帮助企业和个人更好地了解抖音平台上的用户行为和内容趋势。通过自动化的数据采集，大大提高了工作效率，减少了人工操作的繁琐和误差。
自动化测试框架：DrissionPage（1）——安装与设置
up1292的博客
04-06 1万+
但从 3.0 版开始，作者另起炉灶，用 chromium 协议自行实现了 selenium 全部功能，从而摆脱了对 selenium 的依赖，功能更多更强，运行效率更高，开发更灵活。因此，DrissionPage设计初衷，是将它们合而为一，能够在不同须要时切换相应模式，并提供一种人性化的使用方法，提高开发和运行效率。安装过程也是遇到了很多麻烦，下载就花了很多时间，中间下载一直断，就一直运行安装命令，总算多次安装后安装完成了。说了这么多，相信很多人已经跃跃欲试了，怎么快速搭建这套框架，先要准备一些基础环境。
drissionpage 爬虫
08-03
Drissionpage 是一个用于爬取网页数据的爬虫工具。 使用 Drissionpage，我们可以通过编写简单的代码来获取网页上的文本、图片、链接等信息。它使用了 Python 语言和 BeautifulSoup 库，具有简洁、易用、高效的特点。 要使用 Drissionpage，首先需要安装 Python 和 BeautifulSoup 库，然后导入相应的模块。接下来，我们可以通过指定要爬取的网页链接来获取网页的 HTML 内容。 一旦获取了网页的 HTML 内容，我们可以使用 BeautifulSoup 库提供的方法来解析 HTML，并提取我们所需的信息。例如，可以通过选择器来选择特定的元素，然后获取其文本内容或属性值。 使用 Drissionpage 进行爬虫可以帮助我们快速、自动地抓取大量的网页数据。在数据分析、搜索引擎优化、信息抓取等方面，爬虫是一项非常重要的技术。Drissionpage 提供了一个简单而强大的工具，使得我们能够轻松处理爬虫任务，节省时间和精力。 总而言之，Drissionpage 是一款用于爬取网页数据的方便、高效的工具，通过编写简单的代码，我们可以快速地获取所需的信息。对于需要大量数据的项目或任务，使用 Drissionpage 进行爬虫可以大大提高效率。
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值