TSDK：淘宝开放平台或淘宝登录爬取

最新推荐文章于 2024-09-01 13:47:41 发布

Python爬虫与算法进阶

最新推荐文章于 2024-09-01 13:47:41 发布

阅读量1.4k

点赞数

本文链接：https://blog.csdn.net/m0_37148637/article/details/103461251

版权

本文介绍开源项目TSDK，一个用于淘宝开放平台和登录爬取的SDK。内容包括SDK的优化更新，如移除通用类，简化开放平台和H5API类的配置，以及未实现的功能如日志和请求重放。讨论了Cookie同步、淘宝APP端API的加密问题以及短信登录所需的ua参数算法。

摘要由CSDN通过智能技术生成

分享一个开源项目：TSDK。地址在阅读原文里。

TSDK

淘宝爬虫SDK，用于淘宝开放平台或淘宝登录爬取

淘宝系列爬虫系列SDK

SDK更新到第二版，对一部分进行了优化
- 优化掉通用类，此类本身最开始是为了能够使用无授权API，但是之后发现臃肿繁杂，还不如直接请求网址URL，觉得有些画蛇添足了，所以直接去掉
- 优化开放平台类，繁杂的配置文件，多余的加载，我用了Node的SDK之后发现还不如Node的方便，只需要传入API名称和数据就行了，那么我弄了配置文件又有什么用，没有达到简单可用的目的遂改成Node一样的方式请求数据
- 优化H5API类，经过我思考后觉得配置文件太过繁杂，且不够灵活也不多变，爬虫本身就是需要多变的，所以移除配置文件，通过传递参数直接构建，更加灵活方便
还有部分功能未实现，例如日志功能和请求重放功能，以及新添加的网站

  from TSDK.mTop import Client

  top = Client()
  #获取淘宝二维码，可以通过扫码登录淘宝
  umid_token = top.getUmidToken()
  res = top.login(umid_token)
  print(res.text)
  data = json.loads(res.text)
  thr &#