**
彼岸图网-图片爬取-仅供学习使用
**
彼岸图网
彼岸图网,这个是一个静态网站,就没什么好讲的,今天主要是教你怎么爬取图片。
- 找到图片的链接
- 请求这个图片的链接进行下载就好了
对,你没有看错,图片的爬取就是这么简单。
这里就是图片的链接和名称了,我们只要获取图片的名称和图片的链接,再去请求图片的链接就可以将图片爬取到我们的电脑上面了。
下面这部分代码就是对图片的名称和链接进行提取,需要注意的是,我们这里提取的图片链接和图片名称是一个列表:
url = 'http://pic.netbian.com/e/search/result/index.php?page=0&searchid=1224'
response = requests.get(url,headers=headers)
# print(response.text)
html = parsel.Selector(response.text)
img_urls = html.xpath("//div[@class='slist']/ul/li/a/img/@src").getall()#获取图片链接
names = html.xpath("//div[@class='slist']/ul/li/a/img/@alt").getall()#获取图片名字
对刚才提取到得到图片链接和图片名称进行处理,并请求图片链接,将图片爬取到本地。
for name,img_url in zip