python实现下载大文件_python下载大文件代码

如果下载小文件，可以直接使用urllib.urlretrieve方法：

import urllib

urllib.urlretrieve ("http://www.example.com/songs/mp3.mp3", "mp3.mp3")

但是如果下载的文件尺寸很大，就不适合直接urlretrieve了。我们需要按块读取文件来下载：

import urllib2

url = "http://download.thinkbroadband.com/10MB.zip"

file_name = url.split('/')[-1]

u = urllib2.urlopen(url)

f = open(file_name, 'wb')

meta = u.info()

file_size = int(meta.getheaders("Content-Length")[0])

print "Downloading: %s Bytes: %s" % (file_name, file_size)

file_size_dl = 0

block_sz = 8192

while True:

buffer = u.read(block_sz)

if not buffer:

break

file_size_dl += len(buffer)

f.write(buffer)

status = r"%10d [%3.2f%%]" % (file_size_dl, file_size_dl * 100. / file_size)

status = status + chr(8)*(len(status)+1)

print status,

f.close()

标签：

版权申明：本站文章部分自网络，如有侵权，请联系：west999com@outlook.com

特别注意：本站所有转载文章言论不代表本站观点！

本站所提供的图片等素材，版权归原作者所有，如需使用，请与原作者联系。