python 爬虫 批量下载

很多时候我们需要从网站批量下载图片、文件等数据。这个时候可以用python的爬虫功能。
本文实现一种从网站批量下载.mat数据格式的代码：

import re
import urllib
import sys
from tqdm import tqdm
#获取页面源码
def getHtml(url):
     page = urllib.request.urlopen(url)   # 打开页面
     html = page.read