超好用爬虫下载进度条模块

模块

import os
import requests
import time


# 进度条模块
def progressbar(url, path):
    if not os.path.exists(path):   # 看是否有该文件夹,没有则创建文件夹
        os.mkdir(path)
    start = time.time()  # 下载开始时间
    response = requests.get(url, stream=True)
    size = 0    # 初始化已下载大小
    chunk_size = 1024  # 每次下载的数据大小
    content_size = int(response.headers['content-length'])  # 下载文件总大小
    try:
        if response.status_code == 200:   # 判断是否响应成功
            # 开始下载,显示下载文件大小
            print('Start download,[File size]:{size:.2f} MB'.format(size=content_size / chunk_size / 1024))
            filepath = path+'\Pikachu.jpg'  # 设置图片name,注:必须加上扩展名
            with open(filepath, 'wb') as file:   # 显示进度条
                for data in response.iter_content(chunk_size=chunk_size):
                    file.write(data)
                    size += len(data)
                    print('\r'+'[下载进度]:%s%.2f%%' % ('>'*int(size*50 / content_size),
                                                    float(size / content_size * 100)), end=' ')
        end = time.time()   # 下载结束时间
        print('Download completed!,times: %.2f秒' % (end - start))  # 输出下载用时时间
    except:
        print('Error!')

调用

# 导包路径非固定的,取决于你的代码文件路径common是我的文件夹名progress是我的文件名
from common.progress import *


def main():
    # 下载图片
    url = 'https://dss0.bdstatic.com/70cFvHSh_Q1YnxGkpoWK1HF6hhy/it/u=3386247472,87720242&fm=26&gp=0.jpg'
    path = r'E:\123'  # 设置下载到本地的地址
    progressbar(url, path)


if __name__ == '__main__':
    main()

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值