首先,爬取的美女图片镇场子, 免得你们又说我光说不练假把式!
好了废话不多说,我们直接进入正题!
需要额外安装的第三方库
-
requests
-
pip install requests
-
pymongo
-
pip install pymongo
原理
由于淘女郎网站含有AJAX技术,只需要和后台进行少量的数据交换就可以实时更新了,这就意味着直接抓取网页源码然后分析信息的方式心不痛,因为网站是动态接在的,直接抓取源代码无法获取到淘女郎信息。
首先,爬取的美女图片镇场子, 免得你们又说我光说不练假把式!
好了废话不多说,我们直接进入正题!
需要额外安装的第三方库
requests
pip install requests
pymongo
pip install pymongo
原理
由于淘女郎网站含有AJAX技术,只需要和后台进行少量的数据交换就可以实时更新了,这就意味着直接抓取网页源码然后分析信息的方式心不痛,因为网站是动态接在的,直接抓取源代码无法获取到淘女郎信息。