爬虫:爬取京东手机图片

本文介绍了如何使用Python爬取京东网站上的手机图片。通过正则表达式匹配关键内容,提取图片URL,再将图片保存到本地。文章详细展示了代码实现,包括常加载和懒加载图片的抓取,并处理HTTPError。最后,对不同页面进行遍历,爬取多页图片。
摘要由CSDN通过智能技术生成
# 思路
# 1.爬取网页
# 2.根据正则表达式爬取关键内容
# 3.根据关键内容,再次使用正则匹配出图片地址
# 4.存储图片
#
import urllib.request
import re
import urllib.error

def craw(url,page):
    html1=urllib.request.urlopen(url).read()
    html1=str(html1)
    #先把所有图片部分的数据取出
    pat1='<div id="plist".+?<div class="clr"'
    result1=re.compile(pat1).findall(html1)
    if result1:
        result1=result1[0]
        #常加载正则
        pat2='<img width="220" height="220" data-img="1" src="//(.+?\.jpg)"'
        #懒加载正则
        pat3='<img width="220" height="220" data-img="1" data-lazy-img="//(.+?\.jpg)"'
        imagelist=re.compile(pat2).findall(result1) #常加载图片
        imagelist1=re.compile(pat3).findall(result1) #懒加载的图片
        imagelist=imagelist+imagelist1  #数组合并  将所有图片合并
        x=1
  
  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值