- 博客(5)
- 收藏
- 关注
RSS订阅
原创 v博Python爬虫实战案例，多线程实现3小时100万量
需求：抓取某微博用户里的粉丝信息，通过抓包分析，可以看到有个friends的数据包就有我们想要的信息：每个包只有20条数据，再来翻页抓下一个包：对比两个包，很明显page数就是下一页，uid是用户id，用户id也就是用户主页链接的后面一段，type直接固定fans就行上Pycharm，构建传参和headers，这里注意要登录后的cookie：测试数据没问题，但是每个用户粉丝............
2022-06-21 15:50:17
1960
1
原创 Python + 高德地图 API：一键批量采集商家信息（名称/地址/电话/图片），自动导出 CSV
本文介绍了一个基于Python的高德地图商家数据采集工具，通过调用高德开放平台API实现自动化数据抓取。该工具支持指定城市、关键词和采集数量，可自动分页获取商家名称、地址、电话等信息，并保存为CSV文件。采用requests和pandas库实现数据获取与处理，并提供了tkinter开发的GUI界面方便使用。文章包含效果截图、核心功能、技术实现细节和使用步骤，适合有本地商家数据采集需求的开发者参考。作者还提供了源码获取方式，并支持打包成exe文件供非技术人员使用。
2026-04-09 01:39:58
270
原创 关于1688API接口参数sign的分析（2024最新记录）
请求过1688接口的各位都知道，其中有一个关键的加密参数sign，而且这个加密方式隔一段时间会更新一次，所以我们想要成功请求接口，也得经常更新请求，在这里，我把整个分析步骤列出供大家参考，如需帮助，可以V我：JackLi_1900。上面只有3个参数是每次变动的，t，sign，memberId，其他参数都是固定，t很明显是时间戳，memberId是商家唯一标识，这个很好获取，我们只需要重点解决sign即可。其实整个步骤不难，关键是要找出官方最新的js代码块来生成sign，如需帮助，可以找我。
2023-12-09 14:39:18
1238
原创 【Python爬虫】5行代码破解验证码+网页数据爬取全步骤详细记录
本文用到的网址：aHR0cDovL3d3dy5jaGljdHIub3JnLmNuLw==（base64解密查看）破解验证码方法挺多，本文介绍的是其中一种比较轻便的解决方案，适合小白上手。爬虫需求：遍历列表页爬取每个详情页内容，需求很简单，但很多新手会卡在验证码这步，下面我们来实操一下：通过抓包看到并没有json数据包，直接请求asp网页的，看网页设计风格估计这个网站也挺老了，搜索条件里写了几个参数，在请求的时候带上需要的字段就好前面3页都很友好，但是从第4页开始，就出现了验证码：输入验证码，再次抓包看请求参
2022-06-22 16:34:58
11648
4
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人