爬虫
文章平均质量分 85
李奕锋
这个作者很懒,什么都没留下…
展开
-
利用Fiddler手机抓包对ONE·APP网页爬虫实现电影资讯微信Java开发
实现电影资讯微信订阅号Java开发。1. 利用Fidder抓包工具,通过手机代理抓取ONE电影请求;2. 使用jackson解析json数据,分析并提取有用信息;3. 使用微信后台框架,匹配关键字,回复图文列表。原创 2016-07-25 01:54:23 · 26919 阅读 · 1 评论 -
基于WebMagic写的一个csdn博客小爬虫
java爬虫框架WebMagic容易上手,可定制可扩展,非常适合想用java做爬虫的小伙伴们。小爬虫能抓取指定用户的所有文章的关键信息,包括文章id,标题,标签,分类,阅读人数,评论人数,是否原创。并且把数据保存到数据库中。原创 2016-04-30 20:22:22 · 30670 阅读 · 22 评论 -
使用Fiddler抓取模拟器APP的请求,并转发到本地调试
在调试服务端的接口时,往往无法模拟出手机发送的请求(设备ID等),因此我们使用模拟器来代替真实手机环境。此外,我们还要把请求转发到本地的服务端才方便我们调试。原创 2017-02-17 20:53:08 · 21911 阅读 · 1 评论