python实现爬虫收集图片 花瓣网_Python爬虫日记七：批量抓取花瓣网高清美图并保存...

一：前言

嘀嘀嘀，上车请刷卡。昨天看到了不错的图片分享网——花瓣，里面的图片质量还不错，所以利用selenium+xpath我把它的妹子的栏目下爬取了下来，以图片栏目名称给文件夹命名分类保存到电脑中。这个妹子主页http://huaban.com/boards/favorite/beauty 是动态加载的，如果想获取更多内容可以模拟下拉，这样就可以更多的图片资源。这种之前爬虫中也做过，但是因为网速不够快所以我就抓了19个栏目，一共500多张美图，也已经很满意了。

先看看效果：

Paste_Image.png

Paste_Image.png

二：运行环境

IDE：Pycharm

Python3.6

lxml 3.7.2

Selenium 3.4.0

requests 2.12.4

三：实例分析

1.这次爬虫我开始做的思路是：进入这个网页http://huaban.com/boards/favorite/beauty 然后来获取所有的图片栏目对应网址，然后进入每一个网页中去获取全部图片。(如下图所示)