关于python爬虫爬取网页图片的实例

#实例1,爬取http://www.facets.la/壁纸网站,目前实现爬取某一页,可在此基础上修改
import re
import requests
import time
from bs4 import BeautifulSoup
#爬虫一
url="http://www.facets.la/"
headers={
"User-Agent":"User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/89.0.4389.128 Safari/537.36"
}
main_page_respose=requests.get(url=url,headers=headers)
main_page_respose.encoding=main_page_respose.apparent_encoding
#print(main_page_respose.text)
xipage=BeautifulSoup(main_page_respose.text,"html.parser")
a_list=xipage.find_all("div",class_="thumb-image")
for a in a_list:
   a_shuxi=a.find("a")
   a_img=a_shuxi.find("img")
   #print(a_img)
   a_reals=a_img.get("src")
   #print(a_reals)
   #下载
   img_response=requests.get(a_reals,headers=headers)
   img_name=a_reals.split("/")[-1]#根据具体而修改
   with open("download/"+img_name,mode="wb")as f:
        f.write(img_response.content)#不需要修改
        print("over",img_name)
        time.sleep(1)#防被服务器检测禁止ip访问
print("over")

感谢哔哩哔哩up主的爬虫教程
附上up主主页链接
python爬虫教程

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值