描述
wget命令用来从指定的URL下载文件。wget非常稳定,它在带宽很窄的情况下和不稳定网络中有很强的适应性,如果是由于网络的原因下载失败,wget会不断的尝试,直到整个文件下载完毕。如果是服务器打断下载过程,它会再次联到服务器上从停止的地方继续下载。这对从那些限定了链接时间的服务器上下载大文件非常有用。
语法
wget (选项) (参数)
选项
-a<日志文件>:在指定的日志文件中记录资料的执行过程;
-A<后缀名>:指定要下载文件的后缀名,多个后缀名之间使用逗号进行分隔;
-b:进行后台的方式运行wget;
-B<连接地址>:设置参考的连接地址的基地地址;
-c:继续执行上次终端的任务;
-C<标志>:设置服务器数据块功能标志on为激活,off为关闭,默认值为on;
-d:调试模式运行指令;
-D<域名列表>:设置顺着的域名列表,域名之间用“,”分隔;
-e<指令>:作为文件“.wgetrc”中的一部分执行指定的指令;
-h:显示指令帮助信息;
-i<文件>:从指定文件获取要下载的URL地址;
-l<目录列表>:设置顺着的目录列表,多个目录用“,”分隔;
-L:仅顺着关联的连接;
-r:递归下载方式;
-nc:文件存在时,下载文件不覆盖原有文件;
-nv:下载时只显示更新和出错信息,不显示指令的详细执行过程;
-q:不显示指令执行过程;
-nh:不查询主机名称;
-v:显示详细执行过程;
-V:显示版本信息;
--passive-ftp:使用被动模式PASV连接FTP服务器;
--follow-ftp:从HTML文件中下载FTP连接文件。
参数
下载指定的URL地址
常用实例
下载单个文件
wget http://xxxxx/a.zip
下载以不同的文件名保存
wget -O newname.zip http://xxxxx/oldname.zip
限速下载文件
wget --limit-rate=300k http://xxxxx/a.zip
断点续传
wget -c http://xxxxx/a.zip
后台下载
wget -b http://xxxxx/a.zip
可通过下面命令查看后台下载的进度
tail -f wget-log
伪装代理名称下载
wget --user-agent="Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US) AppleWebKit/534.16 (KHTML, like Gecko) Chrome/10.0.648.204 Safari/534.16" http://xxxxxx/a.zip
测试下载链接
wget --spider url
增加重试次数
wget --tries=40 url
下载多个文件
wget -i filemuliurl.txt
filemuliurl.txt文件内存放多个下载路径
镜像网站
wget --mirror -p --convert-links -P ./LOCAL url
下载整个网站到本地
- –mirror镜像下载;
- -p下载所有为了html页面显示正常的文件;
- –convert-links下载后,转换成本地的连接;
- -P ./LOCAL保存所有文件和目录到本地指定目录;
过滤指定格式下载
wget --reject=gif url
下载时,不希望下载图片
把下载信息存入日志
wget -o download.log url
限制总下载文件大小
wget -Q5m -i filelist.txt
当下载的文件超过5M时退出下载
下载指定格式文件
wget -r -A.pdf url
下载一个网站的所有pdf
匿名ftp下载
wget ftp-url
使用用户民和密码认证的ftp下载
wget --ftp-user=USERNAME --ftp-password=PASSWORD url