断点续传
wget的断点续传是自动的,只需要使用-c参数,例如:
wget -c http://the.url.of/incomplete/file
使用断点续传要求服务器支持断点续传。
t
参数表示重试次数,例如需要重试100次,那么就写t 100
,如果设成t 0
,那么表示无穷次重试,直到连接成功。T
参数表示超时等待时间,例如T 120
,表示等待120秒连接不上就算超时。
批量下载
如果有多个文件需要下载,那么可以生成一个文件,把每个文件的URL写一行。
例如生成文件 download.txt
,然后用命令:
wget -i download.txt
只下载/拒绝某一类型的文件
可以指定让wget只下载一类文件,或者不下载什么文件。例如:
wget -m –reject=gif [http://target.web.site/subdirectory](https://link.zhihu.com/?target=http%3A//target.web.site/subdirectory)
表示下载 http://target.web.site/subdirectory,但是忽略gif文件。
–accept=LIST
可以接受的文件类型,–reject=LIST
拒绝接受的文件类型。
密码和认证
wget 只能处理利用用户名/密码方式限制访问的网站,可以利用两个参数:
–http-user=USER
设置HTTP用户–http-passwd=PASS
设置HTTP密码
对于需要证书做认证的网站,就只能利用其他下载工具了,例如 curl
。
利用代理服务器进行下载
如果用户的网络需要经过代理服务器,那么可以让 wget 通过代理服务器进行文件的下载。
此时,需要在当前用户的目录下创建一个 .wgetrc
文件。
文件中可以设置代理服务器:
http-proxy = 111.111.111.111:8080 ftp-proxy = 111.111.111.111:8080
分别表示http的代理服务器和ftp的代理服务器。
如果代理服务器需要密码则使用:
–proxy-user=USER设置代理用户 –proxy-passwd=PASS设置代理密码
这两个参数。
使用参数 –proxy=on/off
使用或者关闭代理。
后台下载
加入参数 -b
, 让wget在后台运行,记录文件写在当前目录下“wget-log
”文件中;
此时,最好也加上限制等待时间的 -T
,和限制重试次数的 -t
参数,具体可以参照断点续传的部分。