1. 递归下载当前页面所有**
wget -r -np -nd --accept=** http://www.baidu.com/ -e robots=off
2. 防盗链
wget www.baidu.com -U "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.121 Safari/537.36"
3. 同步网站镜像
wget -m -L –reject = http://www.baidu.com/
4. 下载整个网站
wget --random-wait -r -p -e robots=off -U mozilla http://www.baidu.com
5. 批量地址下载
wget -i filename.txt
命令 | 注释 |
---|
-r | 递归 |
-np | 不遍历上级目录 |
-nd | 不根据页面自动创建目录 |
–accept= | 下载指定格式文件,多种格式可以逗号分隔 |
–reject= | 指定不下载格式文件,多种格式可以逗号分隔 |
-e robots=off | 不遵守robots协议 |
-k | 将页面内链接转换为本地连接 |
-p | 下载所有内容 |
-c | 断点续传 |
-l1 | 限制递归层数1层,l1为当前目录 |
-A.apk | 只下载apk后缀文件 |
-b | 后台下载,文件目录下tail -f wget-log可以看进度 |