应粉丝需求力肝App爬虫入门教学,保姆级图文教程,⭐建议收藏⭐!!!


前言

网页爬虫相信小伙伴们都会,以倒霉蛋 百度 为例,进入首页,直接F12打开控制台

在这里插入图片描述

选择Network,直接F5刷新即可看到请求

在这里插入图片描述

哎~,能看到请求,小伙伴们直接代码写一写,跑一跑不就成功了

在这里插入图片描述

小伙伴们直呼:

在这里插入图片描述


但是: 网页有控制台,能看到请求,App怎么办呢???

在这里插入图片描述

不要着急不要慌,我们接着往下看!


环境准备


夜神模拟器

既然要进行App爬虫,那么肯定需要手机,但用手机去进行爬取成本太高,我这种菜鸡不配!

在这里插入图片描述


所以我选择使用模拟器,就是下面这款:夜神模拟器

小伙伴直接搜索:夜神模拟器进入官网下载即可
yi

安装完毕之后
在这里插入图片描述

在这里插入图片描述
创建好后,我们就有了App环境


Fiddler

有了环境,但是模拟器可没有想PC端的控制台,没有控制台,我们就看不到请求,所以接下来装抓包软件Fiddler,小伙伴们可以理解为PC端的控制台

在这里插入图片描述

填好之后就能下载了,国家随便填
在这里插入图片描述

接下来,我们打开瞧瞧是个啥样子

左侧就是放请求的节面,右侧到时候就可以看请求响应之类的

在这里插入图片描述

到这里环境基本已经装好,但是还没完呢😂,接下来就是最后的配置问题


配置


Fiddler配置

先对Fiddler进行配置

在这里插入图片描述

点击:decrypt https traffic

在这里插入图片描述

点击YES

在这里插入图片描述

点击是
在这里插入图片描述

选择第四个,只对远程客户端抓取
在这里插入图片描述

端口随意,不发生冲突即可
在这里插入图片描述


安装证书

启动手机模拟器
在这里插入图片描述

打开设置,这个随意,看大家自己

在这里插入图片描述

大家第一次打开桥接模式需要安装,大家等一会就好啦
在这里插入图片描述

在这里插入图片描述

不需要修改什么,保存后需要重启!!!

重启之后,打开设置,打开WIFI

在这里插入图片描述

鼠标长按,点击修改网络

在这里插入图片描述

在这里插入图片描述

IP地址可以打开命令行窗口,输入 ipconfig 自己查看填写IPV4地址

在这里插入图片描述

配置好,保存退出,打开浏览器,发现有以下弹窗,点击继续即可

在这里插入图片描述

浏览器输入访问地址,格式为:windows的IP地址:端口号,即:192.xxx.xxx.xxx:8889,等一会,如果没出意外😏,会出现以下界面

点击第二个链接

在这里插入图片描述

如下图所示

在这里插入图片描述
点击确定后,会让设置手机密码,大家设置好即可,一定要记住,不要像我一样忘记密码,然后重新配置一遍

在这里插入图片描述

设置好后会有提示
在这里插入图片描述

配置到此正式完成,App爬虫第一例即将开始😊


入门爬取

老规矩,以倒霉蛋百度为例😏

打开手机浏览器,访问百度,可看到Fiddler成功获取请求
在这里插入图片描述

选择百度的请求,在右侧即可看到详细信息
在这里插入图片描述


爬虫案例

App爬虫专栏

PC端爬虫专栏

开源爬虫实例教程目录索引


最后

我是 Code皮皮虾,一个热爱分享知识的 皮皮虾爱好者,未来的日子里会不断更新出对大家有益的博文,期待大家的关注!!!

创作不易,如果这篇博文对各位有帮助,希望各位小伙伴可以一键三连哦!,感谢支持,我们下次再见~~~

分享大纲

大厂面试题专栏


Java从入门到入坟学习路线目录索引

更多精彩内容分享,请点击 Hello World (●’◡’●)

在这里插入图片描述

  • 46
    点赞
  • 46
    收藏
    觉得还不错? 一键收藏
  • 52
    评论
评论 52
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值