wget,curl 下载文件

1.  wget下载单个文件

wget -c https://hgdownload.soe.ucsc.edu/goldenPath/hg38/bigZips/hg38.fa.gz  -O ../hg38.fa.gz 

参数解析
-c：断点续传，如果下载中断，那么连接恢复时会从上次断点开始下载。
-O：指定文件下载到本地的路径和文件名，不加此选项，默认为当前文件夹，文件名相同。

2. wget下载多个文件

wget -c -r -np -nd  -A '*.gz' -p https://hgdownload.soe.ucsc.edu/goldenPath/hg38/bigZips/genes/

参数解析

-c 断点续传

-r 递归下载，默认深度是5层，可以通过-l参数指定depth。

-np --no-parent 递归下载时不访问父级目录，能够有效的控制下载范围。

-nd 递归下载时不会递归创建目录，会把所有的文件保存到一个目录里。

-p 下载遍历到的网页中所有的文件资源，保证超过深度限制的资源被下载。

-A 逗号分隔的可接受的扩展名列表

3.curl 下载单个文件

# 重定向
curl https://hgdownload.soe.ucsc.edu/goldenPath/hg38/bigZips/genes/hg38.refGene.gtf.gz >>hg38.refGene.gtf.gz

# 利用-o选项
Curl https://hgdownload.soe.ucsc.edu/goldenPath/hg38/bigZips/genes/hg38.refGene.gtf.gz -o ../hg38.refGene.gtf.gz

不指定输出，默认屏幕打印。

4. curl下载多个文件

curl https://hgdownload.soe.ucsc.edu/goldenPath/hg38/bigZips/genes/{hg38.ensGene,hg38.refGene}.gtf.gz -o hg38.ensGene.gtf.gz -o hg38.refGene.gtf.gz

注意：分别指定多个输出文件,注意对应的文件名。输出文件，不能用表达式{}.