wget下载http下指定路径下的文件及其子目录下所有文件

最新推荐文章于 2024-07-14 21:53:39 发布
最新推荐文章于 2024-07-14 21:53:39 发布
阅读量2.4k 收藏
点赞数
分类专栏： shell linux 文章标签： linux bash
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43158436/article/details/131676969
版权

如下：

wget -r -np -nH --cut-dirs=1 http://example.com/some/dir/

其中 dir/ 后的 “/” 必不可少，否则会下载到some路径下的其他目录及文件

星空守望
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
window下wget
08-19
- `-nd` 或 `--no-directories`: 不创建子目录结构，所有文件都下载到当前目录。 ### 6. 实战示例 - 下载一个PDF文件：`wget https://example.com/file.pdf` - 递归下载整个网站：`wget -r -np -nd ...
Linux下常用工具、命令介绍，跟我学Linux.rar
05-21
-name "myfile"`在当前目录及其子目录中找名为“myfile”的文件。 3. `awk`：文本处理工具，用于处理和格式化输出。 4. `sed`：流编辑器，常用于批量替换文本。 5. `tar`：打包和压缩工具，例如`tar -czvf archive....
wget批量下载http目录下文件所有.rpm文件
惊云
12-13 613
l1 (L one) 递归一层，只下载指定文件夹中的内容，不下载下一级目录中的。-nd 不创建目录，wget默认会创建一个目录。-e robots=off 忽略robots。–no-parent 不下载父目录中的文件。-p 下载网页所需的所有文件，如图片等。-nc:下载时跳过已经存在的文件。
wget下载目录内的所有文件
武子杰的博客（linux，docker，k8s技术分享）
01-03 5061
需要下载某个目录下面的所有文件。 命令如下 wget -c -r -np -k -L -p http://docs.openstack.org/liberty/install-guide-rdo/ 在下载时。有用到外部域名的图片或连接。如果需要同时下载就要用-H参数。 wget -np -nH -r –span-hosts www.xianren.org/pub/path/ -c 断点续传 -r...
wget 下载文件及目录
我有一个魔盒的博客
08-15 2631
当递归检索时，永远不要上升到父目录。但是还是下载整个路径树的，想要只下载最后一层，使用。目录的逗号分隔列表，可能含通配符。目录的逗号分隔列表，可能含通配符。逗号分隔的文件名或模式列表。逗号分隔的文件名或模式列表。
linux中怎么使用wget下载一个目录下的所有文件
世界在我口袋的博客
06-08 3515
方法如下：各个参数的含义：-r : 遍历所有子目录-np : 不到上一层子目录去-nH : 不要将文件保存到主机名文件夹-R index.html : 不下载 index.html 文件
wget命令——下载网络文件
u013007181的博客
03-11 1万+
wget命令——下载网络文件
wget下载文件
weixin_42450862的博客
12-02 8002
wget下载文件
wget下载文件到指定目录
willingtolove的博客
09-25 3万+
文章目录#不指定下载目录#指定下载目录#指定下载目录及文件名 #不指定下载目录 如果不指定下载目录，那么文件将被下载到当前目录。 命令格式：wget 网址 wget https://repo.mysql.com//mysql80-community-release-el8-1.noarch.rpm #指定下载目录 命令格式：wget -p 目录 网址 wget -P /home/test https://repo.mysql.com//mysql80-community-release-el8-1.n
使用wget 工具下载网站所有目录文件
carcoon的专栏
09-23 7959
摘要 在Windows下的用户都比较熟悉 Teleport，webzip等等网站下载工具，实际上linux中也完全可以做到这样的功能，那就是利用wget工具。wget是一个命令行工具，用来下载网络文件或者整个网站，它具有自动重试、断点续传、支持代理服务器等等强大的功能。它可以完全替代ftp客户端。wget是在Linux下开发的开放源代码的软件，作者是Hrvoje Niksic，后来被移植到包括Windows在内的各个平台上。 常用命令参数 -c 断点续传（备注：使用断点续传要求服务器支持断点续传） -r
Linux常用命令超详细学习笔记.rar
09-22
ls：列出目录中的文件和子目录。 cd：切换当前工作目录。 pwd：显示当前工作目录的路径。 mkdir：创建新的目录。 rm：删除文件或目录。 cp：复制文件或目录。 mv：移动文件或目录，也可用于重命名文件。 cat：显示...
Linux 系统命令及其使用详解(大全)
04-25
2. `curl`/`wget`：下载网页或文件。 3. `netstat`：显示网络连接、路由表、接口统计等信息。 4. `ssh`：安全地远程登录到另一台Linux系统。 5. `scp`：安全地复制文件或目录到远程主机。 七、系统信息与管理 1. `...
Linux系统命令大全及其使用详解--Linux必备
08-01
`ls`命令用于查看当前目录下的文件和子目录，通过添加参数如`-l`（长格式）可以显示详细信息，`-a`（显示所有文件，包括隐藏文件）可以查看通常不显示的文件。 2. **cd**：切换目录。用于改变当前工作目录，如`cd /...
【数据下载】利用wget命令批量下载ftp文件和文件夹
m0_54634272的博客
01-14 3389
这是一个“”数据大发现”的时代，大家都在创造数据，使用数据以及分享数据，首先一步我们就需要从数据库download我们需要的数据。这是完整的参数，可以按需使用。-r 递归下载子目录文件。-nH 不创建主机目录。-np 不追溯父文件夹。
Linux命令--wget
Wang的博客
09-16 2449
wget GNU Wget 1.14，非交互式的网络文件下载工具。 用法： wget [选项]... [URL]... 长选项所必须的参数在使用短选项时也是必须的。 启动： -V, --version 显示 Wget 的版本信息并退出。 -h, --help 打印此帮助。 -b, --background 启动后转入后台。 -e, --execute=COMMAND 运行一个“.wgetrc”风格的命令。 日志和输
如何使用 wget 下载一个目录下的所有文件
热门推荐
MZ21G的博客
05-06 7万+
今天想要下载编译原理的“虎书”上的资料，使用wget但只是下载了一个index.html～～，如下 于是我就参考资料，写此博客以记录 方法如下： wget -r -np -nH -R index.html http://url/including/files/you/want/to/download/ 各个参数的含义： -r : 遍历所有子目录 -np : 不到上一层子目录去 ...
蓝易云：Linux下批量下载文件命令curl或者wget命令使用教程
高性价比服务器就选：蓝易云
09-25 1617
在Linux系统下，可以使用curl或者wget命令来进行批量下载文件。这两个命令都是常用的用于网络数据传输的工具，可以用于下载文件、访问API等。使用curl或wget命令进行批量下载文件可以提高效率和便捷性，同时注意合法使用，以确保不违反相关规定和法律。
wget 命令下载网络文件到指定目录
DreamWendy
12-02 2万+
linux wget命令 下载网络文件
接着探索Linux的世界 -- 基本指令（文件查看、时间相关、打包压缩等等）
最新发布
weixin_73359101的博客
07-14 1685
命令输出到某个指定文件中，而不是输出到终端屏幕或终端窗口。我们从键盘输入什么，cat命令就打印什么。命令 + >> + 目标文件名。： 将命令的结果写入目标文件中；这两条指令的作用等价。
java ftp递归下载文件_ftp下载目录下所有文件及文件夹内(递归)
06-08
你可以使用 Apache Commons Net 库中的 FTPClient 类来实现 Java FTP 递归下载文件的功能。下面是一个示例代码，可以下载 FTP 服务器上指定目录下的所有文件及其子目录下的所有文件和文件夹： ```java import org.apache.commons.net.ftp.FTPClient; import org.apache.commons.net.ftp.FTPFile; import java.io.File; import java.io.FileOutputStream; import java.io.IOException; import java.io.OutputStream; import java.nio.file.Files; import java.nio.file.Path; import java.nio.file.Paths; public class FtpDownloader { public static void main(String[] args) { String server = "ftp.example.com"; int port = 21; String username = "username"; String password = "password"; String remoteDirPath = "/path/to/remote/directory"; String localDirPath = "/path/to/local/directory"; FTPClient ftpClient = new FTPClient(); try { ftpClient.connect(server, port); ftpClient.login(username, password); ftpClient.enterLocalPassiveMode(); ftpClient.setFileType(FTPClient.BINARY_FILE_TYPE); downloadDirectory(ftpClient, remoteDirPath, localDirPath); ftpClient.logout(); } catch (IOException e) { e.printStackTrace(); } finally { if (ftpClient.isConnected()) { try { ftpClient.disconnect(); } catch (IOException e) { e.printStackTrace(); } } } } private static void downloadDirectory(FTPClient ftpClient, String remoteDirPath, String localDirPath) throws IOException { FTPFile[] subFiles = ftpClient.listFiles(remoteDirPath); if (subFiles != null && subFiles.length > 0) { for (FTPFile ftpFile : subFiles) { String remoteFilePath = remoteDirPath + "/" + ftpFile.getName(); String localFilePath = localDirPath + "/" + ftpFile.getName(); if (ftpFile.isDirectory()) { // create the directory in local file system File localDir = new File(localFilePath); if (!localDir.exists()) { localDir.mkdir(); } // download the sub directory recursively downloadDirectory(ftpClient, remoteFilePath, localFilePath); } else { // download the file OutputStream outputStream = new FileOutputStream(localFilePath); ftpClient.retrieveFile(remoteFilePath, outputStream); outputStream.close(); } } } } } ``` 在上面的代码中，`downloadDirectory()` 方法递归地下载指定目录下的所有文件和文件夹。如果遇到子目录，它会在本地文件系统中创建一个对应的目录，并递归下载子目录下的所有文件和文件夹。如果遇到普通文件，它会将其下载到本地文件系统中。 你需要将代码中的 `server`，`port`，`username`，`password`，`remoteDirPath` 和 `localDirPath` 替换为你自己的 FTP 服务器地址、端口、用户名、密码、远程目录和本地目录。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值