某省公共资源交易中心爬虫逆向分析

最新推荐文章于 2024-09-25 15:24:27 发布
最新推荐文章于 2024-09-25 15:24:27 发布
阅读量484 收藏 6
点赞数 11
分类专栏： 爬虫 文章标签： 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/WpfJya/article/details/142428606
版权

目标网站

aHR0cHM6Ly95Z3AuZ2R6d2Z3Lmdvdi5jbi8jLzQ0L3NjenQteHEvP3VzZXJJZD02NzM4OTg2MzkyNjA3NzAzMDQmcm93SWQ9NTI1MDYyMDI2ODg0NzE2NTQ0JnRpbWU9MjAwOC0xMS0yNiZjZXJ0aWZpY2F0ZU5vPTkxNDQwOTA0NjgyNDI2MzU4QyZjZXJ0aWZpY2F0ZVR5cGU9Mjg=

一、抓包分析

请求头参数加密

二、逆向分析

xhr断点

异步栈

进入u方法内部

一部分加密参数已经生成

扣取响应代码，本地生成

数据获取

本文章仅提供技术分享交流学习，不可对目标服务器造成伤害！

WpfJya
关注
专栏目录
某省公共资源交易电子平台爬虫逆向
WpfJya的博客
09-22 377
某省公共资源交易电子平台爬虫逆向
gdzwfw某省公共资源交易平台逆向学习
joker_zsl的博客
01-24 1467
hook住之后你就跟着堆栈挨个找吧，我找的是头！此网站采用请求头反爬，难点是请求头中几个参数是如何生成的（别问为什么知道是请求头，一个一个试的。搜索这几个请求头可以发现是找不到的，由此可以判断JS是经过混淆的，或者参数名是在JS运行中生成的。最难的就是如何定位到这几个参数是在JS的哪个位置产生的了，这比较依赖经验，全靠大胆猜测，小心求证。debug的时候你会发现，X-Dgi-Req-Signature确实是这样的。后面的就不用说了，把这个也扣出来。能拿到数据，说明获取到的请求头没毛病。
某省资源交易中心 (js逆向)
screamn的博客
12-11 611
该文章只是用于逆向学习，不得以商用或者是破坏他人利益的目的进行使用。如有侵权请联系作者。网站链接：bse64。
逆向案例二十二——请求头参数加密，某省公共资源交易电子公共服务平台
m0_57265868的博客
07-17 1475
好了，请求头参数的加密已经解决了，现在来分析返回内容的解密。很明显b是解密函数，进入b函数，发现疑似是ASE的解密，r["e"]，r["i"]都是固定的，分别作为密钥和向量。想要抓取数据，进行抓包分析，找到数据包，发现请求头有加密参数Portal-Sign，返回的数据内容也进行了加密。打上断点，分析,发现是d函数，结果一致的。直接搜索加密参数，找到加密位置，发现是在拦截器中，那么凭经验，解密位置肯定也在下面的拦截器中。打印一下参数，看有没有找对位置，发现找对了，直接进入f.getSign函数。
某省公共资源交易公共服务平台数据解密，headers中的portal-sign加密
weixin_41586246的博客
04-10 3407
可以看到这里new了一个md5，使用crypto-js，自己修改这部分代码，可以调试和本地测试对比，看一下结果是否一样。完整python代码。
某省公共资源交易平台异步SHA256加密
weixin_57644831的博客
09-07 373
某省公共资源交易平台异步SHA256加密逆向
逆向分析之某JSVMP网站
liberty888的博客
07-20 1912
逆向分析之某JSVMP网站
爬虫逆向实战(27)-某某招标投标网站招标公告(webpack、图片验证码)
qq_44906798的博客
08-29 2908
注意：此处不能刷新页面，因为刷新页面hook代码将不再运行，同时，此网站是在首页向本地存储中放入的参数，所以我们要回退到首页生成。在扣完js之后，我们发送请求会发现，获取到的数据与网站抓包获取到的数据不太一致，网站抓包获取到的数据是一整个密文，而我们获取到的数据是一个json数据并且code是511。所以我们可以先请求undefined接口获取到一个验证码，然后破解验证码（我是使用的第三方打码平台），将破解的验证码拼接到路径中，再次发送请求，然后再获取数据即可。将加密以及解密位置的代码扣出，缺啥补啥即可。
某省公共资源交易电子公共服务平台学习案例
w62181310的博客
05-16 4814
headers加密，和数据加密练习案例
某省旅游资源服务系统源码+项目说明+数据库.zip
03-05
某省旅游资源服务系统源码+项目说明+数据库.zip某省旅游资源服务系统源码+项目说明+数据库.zip某省旅游资源服务系统源码+项目说明+数据库.zip某省旅游资源服务系统源码+项目说明+数据库.zip某省旅游资源服务系统源码...
某省旅游资源服务系统完整源码+说明+数据库.zip
03-29
【资源说明】 1、该资源内项目代码都是经过测试运行成功，功能正常的情况下才上传的，请放心下载使用。 2、适用人群：主要针对计算机相关专业(如计科、信息安全、数据科学与大数据技术、人工智能、通信、物联网、...
打码打码Python爬虫，某省建筑市场请求地址参数分析，手慢无爬虫
热门推荐
梦想橡皮擦，专栏100例写作模式先行者，现象级专栏 《Python 爬虫 100 例》作者、《滚雪球学 Python 专栏》原创者
04-18 2万+
全屏都是打码的博客，你写过吗？Python爬虫就常遇到~
[JS逆向]对某省人才服务平台政策数据爬取
qq_52688128的博客
11-16 1731
js逆向
python爬虫初体验（一）
书呆子ITme
09-20 5503
爬虫（Web Scraping）是一种从网站自动提取数据的技术。简单来说，它就像是一个自动化的“浏览器”，能够按照设定的规则，访问网页并提取其中的关键信息。对于我们前端开发者来说，爬虫可以帮助我们抓取一些数据进行可视化或前端展示，非常实用。Python爬虫是一个非常强大的工具，能帮助我们自动化地从网页中提取数据。作为前端开发者，掌握一点爬虫技术，不仅能帮助我们快速获取前端展示所需的数据，还能为项目中的API数据源提供备选方案。不过，在使用爬虫时，一定要遵守目标网站的使用条款和隐私政策，避免滥用。
加载数据模型：在数据采集中实现动态数据处理
ip16yun的博客
09-24 658
在现代网络爬虫技术中，数据的动态处理成为了提升采集效率和准确性的重要手段。随着目标网站数据的多样性和复杂性增加，静态数据采集方法逐渐无法满足需求。本文以拼多多为例，探讨如何通过加载数据模型实现动态数据处理，并结合代理IP、Cookie、User-Agent设置及多线程技术提升数据采集的效率。
Python爬虫APP程序：构建智能化数据抓取工具
最新发布
2402_86982669的博客
09-25 818
Python爬虫APP程序是一个利用Python编写的应用程序，用于从互联网上自动获取数据。这些程序通常包含一个用户界面，允许用户指定爬取任务、查看进度和结果，并管理爬取到的数据。
爬虫过程 | 蜘蛛程序爬取数据流程（初学者适用）
Qj60776671的博客
09-22 587
整个流程是一个迭代的过程，爬虫系统不断地从调度器获取新的URL，下载内容，解析数据，存储结果，然后返回新的URL给调度器，直到满足某个终止条件（如队列为空、 达到预定的抓取数量、 超过时间限制 、用户手动停止）
数据篇| 关于Selenium反爬杂谈
youbingchen的博客
09-20 1266
使用Selenium去爬虫的时候,Webdriver会向服务端发送一些信息, 用来说明这个请求是自动发起,WebDriver 预计将具有像 window.navigator.webdriver 这样的属性，这些属性是 W3C WebDriver 规范强制要求的，以实现更好的可测试性并作为一项安全功能。seleinum作为爬虫方式之一,相对requests接口方式,有它方便的地方, 无需了解、构造接口请求, 也有它不足的点,Selenium启动浏览器和测试套件需要时间和资源，因此不适合大规模的并发请求。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值