前提准备
- 安装python环境
- 安装requests库
- 安装lxml库
爬取必应每日高清壁纸第一页的图片,下载并保存至本地文件夹picture下
应每日高清壁纸【https://bing.ioliu.cn/】
网页分析
从图片上我们可以看出该网页的壁纸地址位置在<img>标签下的src属性中。
由此我们可以写下匹配图片地址的xpath,如下图所示:
好了,下面上代码
实战代码
import requests
from lxml import etree
#必应图片网页地址
url = 'https://bing.ioliu.cn/'
#浏览器参数
header = {
'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/76.0.3809.132 Safari/537.36',
'Referer':'http://bing.ioliu.cn'
}
#图片的张数
number = 0
html = requests.get(url,headers=header).text #下载网页
etree_html = etree.HTML(html) #构造xpath的解析对象
img_url = etree_html.xpath('//img/@src') #获取图片地址
#print(img_url)
for img_list in img_url: #下载图片并保存至指定位置
img = requests.get(img_list,headers=header).content
number+=1
print('正在下载第{}张图片'.format(number))
img_name = 'picture\\{}.jpg'.format(number)
with open(img_name,'wb') as save_img:
save_img.write(img)
大家想要爬取其他页码的图片可以代码去修改url
如:第二页的url地址是【https://bing.ioliu.cn/?p=2】
明天就将代码进行优化,将自动爬取每一页的图片。