图片爬虫实战
假如我们想把jd商城的商品图片下载到本地,通过手工复制粘贴将是一份非常庞大的工程,此时,可以用Python网络爬虫实现。我们可以通过Python网络爬虫将这些网页上的图片全部爬取到本地,这类爬虫称为图片爬虫。
首先打开jd商城的首页,在搜索输入框中输入想要爬取的商品,例如:裤子。如下图所示:
再查看该网页的网址,该网址就是我们需要爬取的起始页面,如下图所示:
一、导入模块
import re
from urllib import request as req
from urllib import parse as pa
二、主函数
if __name__=="__main__":
key = input("请输入关键字:")
wd = {'keyword': key}
keyword = pa.urlencode(wd)
controllspider(&