用wget下载网页

使用wget镜像整个网站的时候总是被返回“请稍等一会”之类的页面,使用的命令是:
wget --mirror -w 2 --html-extension --convert-links -P /home/me/message/

无奈只能自己把要下载的网页url弄好,写了一个shell,各种ugly

while read line
do
wget --html-extension -P /home/lai/message/ -p --convert-links $line;
sleep 0.5;
done


要是wget能停0.5秒就好了。我懒得找那命令了


ps:另一篇:
前些天学gimp,找到一个很好的帮助手册,唯一不足就是网页版的 。一个个下载太浪费时间了,
今天偶然看到一个命令。将整个网站镜像到本地,试了下,果然行。在这里分享给大家。

wget -r -p -np -k docs.gimp.org/2.2/zh_CN/index.html
· -r:在本机建立服务器端目录结构;
· -p: 下载显示HTML文件的所有图片;
· -np:只下载目标站点指定目录及其子目录的内容;
· -k: 转换非相对链接为相对链接。
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值