linux下网络资源下载的命令wget

wget是linux最常用的下载命令。

（1）主要特性：

1. 可以从网络上自动下载文件，支持HTTP，HTTPS和FTP协议，可以使用HTTP代理。所谓的自动下载是指，wget可以在用户退出系统的之后在后台执行。这意味这你可以登录系统，启动一个wget下载任务，然后退出系统，wget将在后台执行直到任务完成，相对于其它大部分浏览器在下载大量数据时需要用户一直的参与，这省去了极大的麻烦。

2. wget可以跟踪HTML页面上的链接依次下载来创建远程服务器的本地版本，完全重建原始站点的目录结构。这又常被称作”递归下载”。在递归下载的时候，wget遵循Robot Exclusion标准(/robots.txt)。

3. wget非常稳定,它在带宽很窄的情况下和不稳定网络中有很强的适应性.如果是由于网络的原因下载失败，wget会不断的尝试，直到整个文件下载完 毕。如果是服务器打断下载过程，它会再次联到服务器上从停止的地方继续下载。这对从那些限定了链接时间的服务器上下载大文件非常有用。

(2)安装：

$sudo apt-get install wget

(3)使用：

1. wget一般的使用方法是: wget + 空格 + 要下载文件的url路径，即 wget [OPTION]… [URL]…

例如: $ wget http://www.linuxsense.org/xxxx/xxx.tar.gz

2. 进阶使用方法：

2.1 断点续传, 如果不小心终止了, 可以继续使用命令接着下载

      $ wget -c http://www.linuxsense.org/xxxx/xxx.tar.gz

2.2 用wget做站点镜像

      $ wget -m http://www.tldp.org/LDP/abs/html/

2.3 在不稳定的网络上下载一个部分下载的文件，以及在空闲时段下载

      $ wget -t 0 -w 31 -c http://www.linuxsense.org/xxxx/xxx.tar.gz -o down.log &

2.4 从filelist读入要下载的文件列表

      $ wget -t 0 -w 31 -c -B http://www.linuxsense.org/xxxx/ -i filelist.txt -o down.log &

2.5 使用代理下载

首先设置代理，两种方法：

# 在环境变量中设定代理

$ export PROXY=http://211.90.168.94:8080/

# 在~/.wgetrc中添加

vi ~/.wgetrc

http_proxy = http://proxy.yoyodyne.com:18023/

ftp_proxy = http://proxy.yoyodyne.com:18023/

使用代理下载

wget -Y on -p -k https://sourceforge.net/projects/wvware/