python爬虫实操|懂的都懂

本文分享了使用Python爬取知乎动态网页时,作者意外地从HTML中抓取了一堆高质量图片的过程,展示了从请求头设置到解析HTML并下载图片的完整代码示例。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

本来想学习一下动态网页的爬取,准备爬知乎
没想到啊没想到,爬到了一堆好东西
在这里插入图片描述
在这里插入图片描述
直接上代码

import requests
from lxml import etree 

url='https://zhuanlan.zhihu.com/p/408232419'
headers={
    'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/96.0.4664.45 Safari/537.36 Edg/96.0.1054.29'
    }

response=requests.get(url, headers=headers)
response.encoding='utf-8'

selector=etree.HTML(response.text)

root='D:/天下3/pictuers'

for i in range(1,64):
    url=selector.xpath('//div[@class="RichText ztext Post-RichText css-hnrfcf"]/figure[{}]/img/@data-original'.format(i))
    
    for img_url in url:
        root='D:/pic/'
        path = root + img_url.split('/')[-1]
    
        r = requests.get(img_url)
        with open(path, 'wb') as f:
            f.write(r.content)
            f.close()
            print("文件保存成功")
       

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值