【python爬虫】根据url下载图片或视频到本地

写在前面

我们利用python爬虫技术获取到了图片或视频的url直链,那么如何根据url来下载图片或视频。图片是小文件,大小一般在5MB以内,我们直接下载即可。视频是大文件,大小一般在100MB以上,所以建议采用分块下载的方法,避免内存溢出。

依赖模块

pip3 install requests

下载图片

测试样例

https://img-blog.csdnimg.cn/20200924162143340.jpg

ひさぎ-pixiv-76409757

源码发布

import requests
url = 'https://img-blog.csdnimg.cn/20200924162143340.jpg'
res = requests.get(url)
with open('test.jpg', 'wb') as f:
    f.write(res.content)

下载视频

测试样例

https://vkceyugu.cdn.bspapp.com/VKCEYUGU-learning-vue/52eec590-aecd-11ea-b244-a9f5e5565f30.mp4

源码发布

import requests
url = 'https://vkceyugu.cdn.bspapp.com/VKCEYUGU-learning-vue/52eec590-aecd-11ea-b244-a9f5e5565f30.mp4'
res = requests.get(url, stream=True)
with open('test.mp4', 'wb') as f:
    for chunk in res.iter_content(chunk_size=10240):
        f.write(chunk)

参数说明

参数描述
stream默认为False,请求大文件一般设置为True,避免内存溢出
chunk_size分块下载的大小,可以根据需要任意自行调整

温馨提示

超大文件,比如Windows系统等,一般都在4GB以上,这时最好采用本文中分块下载的方法,避免内存溢出。

引用参考

https://requests.readthedocs.io/zh_CN/latest/user/quickstart.html#id5

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Xavier Jiezou

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值