网络爬虫-爱给音效素材网js逆向思路

最新推荐文章于 2022-05-05 11:33:12 发布
最新推荐文章于 2022-05-05 11:33:12 发布
阅读量5.5k 收藏 18
点赞数 2
分类专栏： MySpider 文章标签： 网络爬虫 js逆向 爱给网 逆向思路分析
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_39802740/article/details/100539671
版权

失踪人口回归~~~

今天的主角是：爱给音效素材网

不得不说这是一个表面人畜无害，实则暗藏玄机的网站，js加密说不上复杂，但是能让你抓狂~

我们以其中一个子页面为例：页面传送门

在这里插入图片描述

接下来进行抓包分析

在这里插入图片描述

在这里插入图片描述

可以发现在进行下载操作的时候，一共发出了两个请求，根据我们以往的经验，不难看出，第一个请求的请求体进行了一次加密，然后服务端返回的数据又进行了一次解密，得到第二个请求的参数或者链接，就可以下载了。

国际惯例，先全局搜索，再断点伺候。

然后就懵逼了，这个时候发现请求体里的参数似乎过于简略，全局搜索出来会有一大堆东西，这个时候就需要用到浏览器里的网络监听了(initiator),如下图

在这里插入图片描述

可以很明确地看到这一个网络请求经过了哪些js调用，我们逐步分析…(此处省略大半篇幅)

比较关键的几个点就是fget, fileget, fileDownload, itemFileGet, itemFileDown (请自行逆向分析，难度不大)

把这一堆js抓下来之后 我们就可以愉快地使用node模拟了

在这里插入图片描述

然后用execjs模拟并发包

在这里插入图片描述

于是整个流程我们就完成一大半了，接下来就是对拿到的数据解析decrypt操作了。如法炮制，这次可以用全局搜索message关键词找到关键js进行逆向，很简单。

在这里插入图片描述

将这几个关键js扣下来，然后直接用execjs对服务器返回的数据解析decrypt操作，就能拿到最终的下载链接了。

在这里插入图片描述

OK 大功告成

Ending

Github传送门

持续更新ing （欢迎各种star与fork）

井蛙不可语于海
关注
  • 2
    点赞
  • 踩
  • 18
    收藏
    觉得还不错? 一键收藏
  • 13
    评论
专栏目录
爱站网关键字挖掘数据采集爬虫（按关键字）源码
02-07
分享完整的爱站网关键字挖掘数据采集爬虫（按关键字）源码，可直接使用，可选择是否登录，登录需输入验证码，爬取字段包括长尾词数量、收录数、优化难度等字段。
Python网络爬虫-1
12-22
网络爬虫初识 如何查看模块功能以及如何安装模块 网络爬虫是什么？ 网络爬虫能做什么事情？ # 如何查看模块功能以及如何安装模块 ''' 当新接触到一个模块的时候，如何了解这个模块的功能。主要方法有： 1.help()--...
游戏素材--爱给网
杨名天吓
10-23 3778
http://www.2gei.com/
Python爬虫爬取爱歌词网歌词(适合新手)
DJENT_GOD的博客
05-02 637
一、前言 自学爬虫有半年多了，终于能够实战演习了，废话不多说，上代码 二、爬取流程 1.引入库和请求头 代码如下（示例）： import requests from lxml import etree import numpy as np headers = { 'Cookie': 'UM_distinctid=178e82ba2444dc-0cb9a26a97da3f-5771133-144000-178e82ba245454; Hm_lvt_bc02eb340840027165940412a64ebe5
程序爬虫抓取网络有用资源，分享给自学爱好者
西边人西说测试.软件测试资源站
03-21 1435
作者：西边人，西说测试程序爬虫抓取有用资源共享给大家头条号 传送、公众号 传送 也可以搜索(软件测试资源站)关注。关注后，私信回复【资源包】获取如下内容，测试资料、测试工具、Python、效率软件、自动化测试报告、梯子 等 混迹在互联网圈的软件测试开发一枚， 专注软件测试自动化方向，爬虫国内外测试资源，分享给自学爱好者。 知乎专栏：软件自动化测试共享站 。 微博：@ 西说测试 QQ群:330374...
借用别人代码，request爬取网站妹子图片
weixin_45634463的博客
12-03 234
在爬取网页时首先要的就是对网页进行分析，这里我主要需要的是两个部分，一个是这组图的名称，用来做文件名；另一个是图片链接，用来下载图片。 import requests import re import time import os #获取网页 kv = {'user-agent':'Mozilla/5.0'} response = requests.get("https://www.vmgirls.com/13344.html" , headers = kv) html = response.text
Python爬取爱徒网素材下载链接，点击链接即可下载
Python案例分享，B站视频教程：https://space.bilibili.com/523606542
10-05 561
前言 本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,如有问题请及时联系我们以作处理。 平时都是直接爬取图片，但是有些时候只想要个别的图该怎么办呢？ 项目目标 爬取爱徒网素材下载地址 通过点击素材进入素材详情页，可以看到本地下载地址，多复制几个素材的下载地址链接： http://www.aiimg.com/sucai.php?open=1&aid=126632&uhash=70a6d2ffc358f79d9cf71392 http://w..
MIDI爬取
ashome123的博客
07-03 3171
从midiworld网站按类别爬取midi文件 import requests from bs4 import BeautifulSoup import os import time from time import sleep import random from collections import Counter import csv def midiworld_crawler(): BASE_URL = 'https://www.midiworld.com/search/' header
计算机-爬虫-可定制的聚焦网络爬虫.pdf
07-09
计算机-爬虫-可定制的聚焦网络爬虫.pdf
计算机-爬虫-搜索引擎中网络爬虫技术研究.pdf
07-09
计算机-爬虫-搜索引擎中网络爬虫技术研究.pdf
unity3d法师动画模型_爱给网_aigei_com.zip
06-03
一组法师动画模型，是带有动画的，有需要的可以拿 欢迎下载！
关于爬虫如何做js逆向的思路
04-26
阿里云资料ppt讲解介绍 来越的的公司注重数据，如何断绝他人独立网站数据是如今互联网公司的一个主题。js加密作为爬虫一个绕不过的关卡，如何更加有效率的破解加密参数，相信这节课会给你一个大概的思路。
Gecco网络爬虫-其他
06-12
Gecco 是一款用 java 语言开发的轻量化的易用的网络爬虫。Gecco 整合了 jsoup、httpclient、fastjson、spring、htmlunit、redission 等优秀框架，让您只需要配置一些 jquery 风格的选择器就能很快的写出一个爬虫。...
js逆向解密之网络爬虫
12-10
数月前写过某网站（请原谅我的掩耳盗铃）的爬虫，这两天需要重新采集一次，用的是scrapy-redis框架，本以为二次爬取可以轻松完成的，可没想到爬虫启动没几秒，出现了大堆的重试提示，心里顿时就咯噔一下，悠闲时光...
爬虫之简单js逆向
小月牙
10-14 2万+
本次js逆向没有存在代码混淆，所以还是比较简单的，重要的就是js逆向的思路，目标网站https://notice.qb.com/detail?noticeId=215让我们开始吧 进入网站后按F12，查看DOC中的，可以看出该网页一部分内容是异步加载而成 继续在XHR中寻找，发现了第一个common中就有我们需要的内容 然后点到Headers看看它具体是有哪些请求参数,大概知道哪几个...
【白嫖教程】详细教学如何白嫖音效！简直是策划和音效师的福音啊！！
Daaaaaan的博客
08-19 4844
准备工作 白嫖对象 推荐一个很慈善的音频网站，叫做白给网 呸~是爱给网 浏览器 那必定是推荐Chorme啊！ 教程 那么开始了！ 首先，请君自行挑选喜爱的音频，比如我随便找了一个音频 点击下载 弹出 成功界面 （余额不足界面） 到了这一步，大家面临的选择，只有两种 充值铜币！支持正版！ 继续白嫖！拿来主义！ 虽然我推荐大家选1，但是这个教程主要是教一些兜里没钱又急需音效的同学，大不了咱以后有钱冲他20个铜币算做补偿嘛！ 那么我们开始真正的白嫖教学 回到之前的界面，此时我们按下F12，呼出开发者
8个免费素材网站
leshem888的博客
05-05 1万+
今天我就给大家整理汇总了8个杂七杂八的免费素材网站，记得收藏起来。 1、unsplash https://unsplash.com/ 这是一个图库网站，里面所有图片素材都是高清无水印，还可提供免费下载，可用于商业用途。 2、Pexels https://www.pexels.com/zh-cn/ 网站主要以图片、视频素材为主，素材全部都能免费下载，还可商用。 3、菜鸟图库 https://www.sucai999.com/?v=NTYxMjky 这是一个素材很丰富的网站，设计类素材
网络爬虫-绕过debugger反爬（Paused in debugger）
热门推荐
qq_39802740的博客
10-15 2万+
最近发现很多网站出现了前端反调试debugger来反爬，防止数据被抓取，实际上是很简单的原理，其实也就是js搞的鬼，看来作为一名合格的爬虫工程师，在js的道路上也会越走越远–！废话不多说，看图→ Paused in debugger, 是不是看着很熟悉,接下来就是如何solve它。 首先我们需要找到call stack里是什么阻断了我们，比如七麦网，我们可以看到，e参数以及t参数，我们双击进去，...
给爬虫爱好者的福利 SelectGadget
weixin_34138255的博客
06-26 429
作者：xiaoyu 微信公众号：Python数据科学 知乎：python数据分析师 相信爬虫的爱好者们都经历过这样一个爬虫前期的准备过程，那就是用浏览器的审查元素进行爬取目标的定位。每次我们都要浪费部分时间去寻找定位点和xpath，这样既不很方便，也不高效，那么如何提高爬虫中这部分工作的效率呢？今天博主给大家分享一个爬虫的利器，它就是：SelectorGadget。 SelectorGadget...
python可以爬取的图片素材网址
最新发布
05-31
以下是一些可以爬取图片素材的网站： 1. Unsplash (https://unsplash.com/) 2. Pexels (https://www.pexels.com/) 3. Pixabay (https://pixabay.com/) 4. Getty Images (https://www.gettyimages.com/) 5. Shutterstock (https://www.shutterstock.com/) 6. Freepik (https://www.freepik.com/) 7. Flaticon (https://www.flaticon.com/) 8. VectorStock (https://www.vectorstock.com/) 9. 123RF (https://www.123rf.com/) 10. iStock (https://www.istockphoto.com/) 请注意，使用这些网站上的图片素材时，需要遵守其使用规定和版权政策，以避免侵权问题。
评论 13
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值