使用request和re爬取并下载图片

初始准备
python库:requests,re,time
下载图片需联网

程序代码

import requests,re
import time
# http://mpic.tiankong.com/fff/a07/fffa07d7409dfcad0ca9f996f42a9112/640.jpg@!240h   图片网址
url = r'https://www.quanjing.com/creative/topic/1'
header = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:70.0) Gecko/20100101 Firefox/70.0"}#设置请求头
r = requests.get(url,headers = header)
# print(type(r.text))
pat=r'http://mpic.tiankong.com/(.*?)/640.jpg@!240h'#设置匹配正则表达式
re_im = re.compile(pat,re.S)
imList = re_im.findall(r.text)#获取符合要求的字符串列表
# print(r.text)
print("开始下载了...")
for i in range(len(imList)):
    src = 'http://mpic.tiankong.com/' + imList[i] + '/640.jpg@!240h'
    url = "D:/360极速浏览器下载/img/" + str(i+1) + ".jpg"
    r = requests.get(src)
    with open(url, 'wb') as f:#下载图片
        f.write(r.content)
    time.sleep(0.1)#下载间隔时间
    print("下载完%d张了..."%(i+1))

  • 1
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
好的,下面是一个使用 `requests` 和 `re` 库编写的爬虫程序,用于爬取指定网页中的图片: ```python import requests import re # 指定要爬取的网页 url = 'https://www.example.com' # 发送请求,获取网页内容 response = requests.get(url) html = response.text # 使用正则表达式匹配图片链接 pattern = r'<img.*?src="(.*?)".*?>' img_urls = re.findall(pattern, html) # 遍历图片链接,依次下载图片 for img_url in img_urls: # 发送请求,获取图片内容 img_response = requests.get(img_url) img_content = img_response.content # 获取图片文件名 img_name = img_url.split('/')[-1] # 保存图片到本地 with open(img_name, 'wb') as f: f.write(img_content) ``` 解释一下上面的程序: 1. 首先指定要爬取的网页的 URL,存储到 `url` 变量中; 2. 然后使用 `requests` 库发送 HTTP 请求,获取网页内容,存储到 `html` 变量中; 3. 使用正则表达式匹配网页中所有的图片链接,存储到 `img_urls` 列表中; 4. 遍历 `img_urls` 列表,依次下载每个图片文件: - 发送 HTTP 请求,获取图片内容,存储到 `img_content` 变量中; - 获取图片文件名,存储到 `img_name` 变量中; - 使用 `with open()` 语句打开文件,将图片内容写入文件中,保存到本地。 请注意,上面的代码只是一个简单的示例,实际应用中还需要加入异常处理、多线程或协程优化等措施,以提高程序的健壮性和效率。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值