使用python实现PDD抓包

已于 2023-02-16 10:35:51 修改
阅读量3k 收藏 8
点赞数 2
分类专栏： python 爬虫 文章标签： python 大数据
于 2022-08-22 16:32:08 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43533527/article/details/126468478
版权
本文介绍了如何使用Python实现拼多多（PDD）的抓包，通过分析客户端代码，揭示了普通抓包工具无法捕获PDD数据包的原因——长连接。利用Frida动态调试，找到了关闭长连接的方法。在面临SSLPing问题时，通过VAXposed和justtrustme插件解决，以便在Findler上进行抓包分析。
摘要由CSDN通过智能技术生成

使用charles抓包

使用findler信任证书后开启抓包，发现只能抓到一个.jif结尾的零散的数据包，具体内容无法正常分析，无法获得数据。

分析客户端代码

使用IDA打开apk分析获知，核心通信包位于 com.xunmeng.basiccomponent.titan.api下，经过对其代码分析得出结论：普通抓包工具charles、findler无法捕获相应包的根本原因在于，其采用了长连接，因此，需要阻止其使用长连接，才能抓包

代码实现

使用frida动态调试发现，updateLongLinkHostWhiteLis 方法在初始化网络时调用

-[AMTitan updateLongLinkHostWhiteList:(
    "apiv2.yangkeduo.com",
    "apiv3.yangkeduo.com",
    "apiv4.yangkeduo.com",
    "apiv2.hutaojie.com",
    "meta.yangkeduo.com",
    "api.pinduoduo.com",
    "api.yangkeduo.com",
    "apiv5.yangkeduo.com",
    "mobile.yangkeduo.com",
    "meta.pinduoduo.com",
    "m.pinduoduo.net",
    "api-cj.pinduoduo.com",
    "api-isp.pinduoduo.com",
最低0.47元/天 解锁文章
weixi_15394450040
关注
  • 2
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 5
    评论
专栏目录
【APP_PDD】数据采集案例拼多多APP_抓包分析_①
2333333
06-19 1970
那远山呼唤我曾千百次路过半山腰摘几朵便飘向歌颂者那份简单离开后就再也没见过单程票的火车一路上哼着歌🎵 王睿卓/Damn5z《重生之我在异乡为异客》
拼多多Python版API
06-18
Python 版拼多多 Pdd 接口 请解压到pdd文件夹下 接口示例 import pdd.api as api import pdd pdd.setDefaultAppInfo("19a2c7906ce046a4b94c1e6##########", "2117384430a665b09b7e23a06d3############2") sessionkey = 'cb7788c452e14525a974004a5f##########' request=api.PddOrderInformationGetRequest() request.order_sn='200422-037396480931256' response=request.getResponse(sessionkey) print(response)
iOS逆向之某多多App抓包
小陈的技术博客
08-02 4540
由于某多多App现使用longlink进行数据传输，使用charles工具抓包只能抓到https://th.pinduoduo.com/t.gif链接。本文的目的则是使用charles等抓包工具能正常抓包。
Scrapy-Pinduoduo 拼多多爬虫教程
gitblog_00638的博客
08-08 1348
Scrapy-Pinduoduo 拼多多爬虫教程 scrapy-pinduoduo拼多多爬虫，抓取拼多多热销商品信息和评论项目地址:https://gitcode.com/gh_mirrors/sc/scrapy-pinduoduo 1. 项目介绍 Scrapy-Pinduoduo 是一个基于 Python 的 Scrapy 框架扩展，专为拼多多平台的数据抓取设计。它提供了方便的接口和工具，帮助...
探索创新：`pddSpider` - 一个拼多多商品数据抓取利器
gitblog_00069的博客
03-28 846
探索创新：pddSpider - 一个拼多多商品数据抓取利器 项目地址:https://gitcode.com/SZFsir/pddSpider pddSpider 是一个开源项目，由GitHub用户SZFsir创建，它是一款基于Python的网络爬虫工具，专门用于从拼多多平台上抓取商品信息。对于数据分析爱好者、电商研究人员或是希望自动化获取商品数据的开发者来说，这是一个非常实用的工具。通过该项目...
采集拼多多商品详情api接口
Merissa_的博客
11-21 874
pdd的反爬虫机制十分严，而很多时候，没办法高效的拿到数据内容响应终端需求，而依赖爬虫就会造成动不动就出现滑块验证，让人很无解，正好，公司有这样的需求，让我负责解决这个问题，刚开始各种尝试，始终没有绕过pdd的滑块验证码，搞了好几天，都没有进展；然后各种网上资料查询，最终还是不负努力，找到更好的解决方案，让它不再出现任何滑块验证码，完全绕过，实现更好的用户体验。我已经把该方法封装成接口，只需要把要得到的数据URL，传给我就可以，然后及时的响应你的数据内容需求，可用于实现电商行业多种常见场景。
拼多多API分享：抓取拼多多商品详情页数据
YONG823_API的博客
02-24 2372
利用 API 接口 item_get，传入商品 ID，可抓取到拼多多商品详情页数据，包括商品标题、价格、原价、卖家昵称、库存、销量、宝贝链接、宝贝备注、宝贝图片列表、宝贝图片、商品属性名、商品属性图片列表、商品详情、商品规格信息、商品属性、商品属性别名、卖家信息等。（支持 curl、PHP、PHPsdk、Java、C#、Python 等调用方式）请求参数：num_iid=1620002566。参数说明：num_iid: 商品 ID;
拼多多app抓包之代码实现
热门推荐
super19911115的博客
09-01 1万+
拼多多app抓包之代码实现 使用charles抓包 操作app后发现，刚打开app时可以抓到零散的数据包，后续的操作无法正常抓包 分析客户端代码 通过jeb打开apk分析获知，核心通信包位于 com.xunmeng.basiccomponent.titan.api下，经过对其代码分析得出结论：普通抓包工具charles、findler无法捕获相应包的根本原因在于，其采用了长连接，因此，需要阻止其使用长连接，才能抓包。 代码实现 只需关闭长连接选项即可： ApiNetChannelSelector.getIn
拼多多采集2
sinat_17622297的博客
06-30 1771
2021.06.30 拼多多啥情况这是，许久不弄，升级那么变态了。 弄了几天，试了下新的方案，效果一般般。 在无账号登录的情况下，单个IP只能支撑150-300左右的采集量。
拼多多商品链接获取拼多多商品详情数据（用 Python实现拼多多商品信息抓取）
weixin_19970108018的博客
10-10 889
在网页抓取方面，可以使用 Python、Java 等编程语言编写程序，通过模拟 HTTP 请求，获取拼多多网站上的商品页面。值得注意的是，拼多多网站的页面结构会不断更新，因此需要定期更新程序，以保证数据的准确性。借助该接口所获得的商品详情数据，开发者可以结合其他数据进行深度挖掘，找出同类商品中的价格优势点和竞争对手，也可以基于商品和用户的交互数据，对用户进行画像分析和个性化推荐等。总体来看，该接口为开发者提供了深入挖掘拼多多平台商品数据的机会，从而更好地为客户提供个性化服务和优质商品推荐。
拼多多抓取商品数据可以用什么上货工具来抓取？
08-16 3989
拼多多商家在开店之前，都需要先找货源，代发、代销的，或者是淘宝、阿里上已经开店的商家在拼多多开店，都需要抓取商品数据来上传的，货源很容易找，如何抓取商品数据、批量上传就需要商家费点心思了，毕竟手动下载商品数据再上传是比较麻烦的。 至于如何用软件来下载淘宝、阿里商品批量上传到拼...
PHP版PDD拼多多出码系统源码.zip
03-04
PDD出码系统后台，对接三方支付/四方支付系统，需要研究的朋友可以自行下载。用户可以学习里面的编码思路，拓展系统
APP抓包( 过二次校验思路）
01-08
简介 做APP安全评估，调试代码等，都会要抓取数据包 过程 上面我写的一篇博客 https://blog.csdn.net/tangyuan569/article/details/103786986 已经说了怎么简单抓取数据包，和过一次校验抓取数据包的思路和大概的过程。 今天说说过二次校验的思路。 你下载了APP 然后解压 过双向校验的，得先去APP里面找到证书，然后导入到抓包工具里面，因为在向前面所述博客文章，去伪造证书已经不管用了，我们先去找找特征。 比如 搜索 运气好的话能搜索到证书，但是一般都有密码。。 我这里这个APP是没有密码 然后拿到了证书导入进去然后进行抓包即可 但是一
拼多多爬虫，抓取拼多多热销商品信息和评论.zip
03-01
这通常通过HTTP请求库实现，如Python中的Requests库。 解析内容： 爬虫对获取的HTML进行解析，提取有用的信息。常用的解析工具有正则表达式、XPath、Beautiful Soup等。这些工具帮助爬虫定位和提取目标数据，如文本...
使用Python发送PDD直播间弹幕（协议算法分析）
最新发布
吴秋霖的博客
08-11 1929
通过分析接口还原加密算法，使用Python发送PDD直播间弹幕
python 抓包秒杀_面试题之用python爬取并夕夕不同时段秒杀商品信息
weixin_34243541的博客
01-28 4696
先上效果图吧(因为确实也是刚入门，很多细节没有注意到的，各位尽管提出来)并夕夕很多时候都在不停的有秒杀商品的活动，对于价格问题，我就没法讨论了，但是人家能吸引到这么多流量，真本事还是有些的。我只在乎他这些商品的秒杀活动我怎么把他用python爬取下来。我先提供下url吧：https://mobile.yangkeduo.com/spike.html?__rp_name=spike_v3&_...
python爬虫 拼多多_拼多多爬虫之anti_content分析
weixin_42107374的博客
12-30 5152
首先来看抓包:查找相关的代码:this.request = function() {var e, t = (e = c.a.mark(function e(t) {var n, o, a, i, s, l;return c.a.wrap(function(e) {for (; ; )switch (e.prev = e.next) {case 0:return n = t.requestConte...
探索Scrapy-Pinduoduo：一款强大的拼多多数据抓取框架
gitblog_00074的博客
03-30 1560
探索Scrapy-Pinduoduo：一款强大的拼多多数据抓取框架 scrapy-pinduoduo拼多多爬虫，抓取拼多多热销商品信息和评论项目地址:https://gitcode.com/gh_mirrors/sc/scrapy-pinduoduo 项目简介 是一个基于Python的Scrapy爬虫框架扩展，专门为拼多多平台的数据抓取而设计。它提供了便捷的接口和工具，使得开发者能够轻松地抓取并...
python pdd api
12-06
Python PDD API指的是使用Python语言来调用拼多多(PDD)的API接口进行开发的过程。拼多多是中国颇具影响力的电商平台之一，其提供了丰富的API接口，开发者可以利用这些接口来实现各种功能和服务。Python是一门简单易学且功能强大的编程语言，因此很适合用来与PDD的API进行交互和开发。 要使用Python PDD API，首先需要在拼多多开放平台上注册开发者账号，获取到API接口的调用凭证，包括appkey和appsecret等信息。接下来可以使用Python中的HTTP请求库如requests等，或者专门设计用于调用API的库如pdd-sdk等来进行API的调用和数据的处理。 在使用Python PDD API时，开发者可以实现多种功能，如商品搜索、下单和支付、退款售后等，从而实现自己的定制化电商应用。开发者还可以基于PDD的数据进行数据分析、推荐系统等业务的开发。同时，Python语言的优势在于其丰富的第三方库和框架，可以大大提高开发效率和灵活性。 总之，Python PDD API是一个非常有潜力和实用价值的开发领域，通过使用Python语言调用PDD的API接口，开发者可以实现丰富的电商应用和服务，并将其应用到实际的业务场景中，为用户提供更好的购物体验。
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值