CURL常用命令

最新推荐文章于 2023-07-27 08:39:14 发布
最新推荐文章于 2023-07-27 08:39:14 发布
阅读量378 收藏
点赞数
分类专栏： cloud 文章标签： curl

转自：
http://www.cnblogs.com/gbyukg/p/3326825.html

下载单个文件，默认将输出打印到标准输出中(STDOUT)中

curl http://www.centos.org

通过-o/-O选项保存下载的文件到指定的文件中：
-o：将文件保存为命令行中指定的文件名的文件中
-O：使用URL中默认的文件名保存文件到本地

1 # 将文件下载到本地并命名为mygettext.html
2 curl -o mygettext.html http://www.gnu.org/software/gettext/manual/gettext.html
3
4 # 将文件保存到本地并命名为gettext.html
5 curl -O http://www.gnu.org/software/gettext/manual/gettext.html

同样可以使用转向字符”>”对输出进行转向输出

同时获取多个文件

1 curl -O URL1 -O URL2

若同时从同一站点下载多个文件时，curl会尝试重用链接(connection)。

通过-L选项进行重定向
默认情况下CURL不会发送HTTP Location headers(重定向).当一个被请求页面移动到另一个站点时，会发送一个HTTP Loaction header作为请求，然后将请求重定向到新的地址上。
例如：访问google.com时，会自动将地址重定向到google.com.hk上。

curl http://www.google.com
<HTML>
<HEAD>
    <meta http-equiv="content-type" content="text/html;charset=utf-8">
    <TITLE>302 Moved</TITLE>
</HEAD>
<BODY>
    <H1>302 Moved</H1>
    The document has moved
    <A HREF="http://www.google.com.hk/url?sa=p&amp;hl=zh-CN&amp;pref=hkredirect&amp;pval=yes&amp;q=http://www.google.com.hk/&amp;ust=1379402837567135amp;usg=AFQjCNF3o7umf3jyJpNDPuF7KTibavE4aA">here</A>.
</BODY>
</HTML>

上述输出说明所请求的档案被转移到了http://www.google.com.hk。

这是可以通过使用-L选项进行强制重定向

1 # 让curl使用地址重定向，此时会查询google.com.hk站点
2 curl -L http://www.google.com

断点续传

通过使用-C选项可对大文件使用断点续传功能，如：

# 当文件在下载完成之前结束该进程
$ curl -O http://www.gnu.org/software/gettext/manual/gettext.html
##############             20.1%

# 通过添加-C选项继续对该文件进行下载，已经下载过的文件不会被重新下载
curl -C - -O http://www.gnu.org/software/gettext/manual/gettext.html
###############            21.1%

对CURL使用网络限速
通过–limit-rate选项对CURL的最大网络使用进行限制

1 # 下载速度最大不会超过1000B/second
2 
3 curl --limit-rate 1000B -O http://www.gnu.org/software/gettext/manual/gettext.html

下载指定时间内修改过的文件

当下载一个文件时，可对该文件的最后修改日期进行判断，如果该文件在指定日期内修改过，就进行下载，否则不下载。
该功能可通过使用-z选项来实现：

1 # 若yy.html文件在2011/12/21之后有过更新才会进行下载
2 curl -z 21-Dec-11 http://www.example.com/yy.html

CURL授权

在访问需要授权的页面时，可通过-u选项提供用户名和密码进行授权

1 curl -u username:password URL
2
3 # 通常的做法是在命令行只输入用户名，之后会提示输入密码，这样可以保证在查看历史记录时不会将密码泄露
4 curl -u username URL

从FTP服务器下载文件

CURL同样支持FTP下载，若在url中指定的是某个文件路径而非具体的某个要下载的文件名，CURL则会列出该目录下的所有文件名而并非下载该目录下的所有文件

1 # 列出public_html下的所有文件夹和文件
2 curl -u ftpuser:ftppass -O ftp://ftp_server/public_html/
3 
4 # 下载xss.php文件
5 curl -u ftpuser:ftppass -O ftp://ftp_server/public_html/xss.php

上传文件到FTP服务器

通过 -T 选项可将指定的本地文件上传到FTP服务器上

# 将myfile.txt文件上传到服务器
curl -u ftpuser:ftppass -T myfile.txt ftp://ftp.testserver.com

# 同时上传多个文件
curl -u ftpuser:ftppass -T "{file1,file2}" ftp://ftp.testserver.com

# 从标准输入获取内容保存到服务器指定的文件中
curl -u ftpuser:ftppass -T - ftp://ftp.testserver.com/myfile_1.txt

获取更多信息

通过使用 -v 和 -trace获取更多的链接信息

通过字典查询单词

# 查询bash单词的含义
curl dict://dict.org/d:bash

# 列出所有可用词典
curl dict://dict.org/show:db

# 在foldoc词典中查询bash单词的含义
curl dict://dict.org/d:bash:foldoc

为CURL设置代理

-x 选项可以为CURL添加代理功能

1 # 指定代理主机和端口
2 curl -x proxysever.test.com:3128 http://google.co.in

其他网站整理

保存与使用网站cookie信息

1 # 将网站的cookies信息保存到sugarcookies文件中
2 curl -D sugarcookies http://localhost/sugarcrm/index.php
3 
4 # 使用上次保存的cookie信息
5 curl -b sugarcookies http://localhost/sugarcrm/index.php

传递请求数据

默认curl使用GET方式请求数据，这种方式下直接通过URL传递数据
可以通过 –data/-d 方式指定使用POST方式传递数据

# GET
curl -u username https://api.github.com/user?access_token=XXXXXXXXXX

# POST
curl -u username --data "param1=value1&param2=value" https://api.github.com

# 也可以指定一个文件，将该文件中的内容当作数据传递给服务器端
curl --data @filename https://github.api.com/authorizations

注：默认情况下，通过POST方式传递过去的数据中若有特殊字符，首先需要将特殊字符转义在传递给服务器端，如value值中包含有空格，则需要先将空格转换成%20，如：

1 curl -d "value%201" http://hostname.com

在新版本的CURL中，提供了新的选项 –data-urlencode，通过该选项提供的参数会自动转义特殊字符。

1 curl --data-urlencode "value 1" http://hostname.com

除了使用GET和POST协议外，还可以通过 -X 选项指定其它协议，如：

1 curl -I -X DELETE https://api.github.cim

上传文件

1 curl --form "fileupload=@filename.txt" http://hostname/resource
bobkentblog
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
curl 指定 host php,PHP CURL指定HOST IP 指定某个域名使用某个IP或者CNAME记录访问
weixin_32464651的博客
03-16 1911
我们遇到一个需求，客户有多台服务器，并做了域名指向多IP的操作，让来自不同地区的用户访问不同的服务器，从而实现个性化访问。现在需要使用PHP的CURL从这个域名的对应的某个地区的服务器抓取数据出来，这种一般普普通做好是在需要运行CURL 的服务器上设置下HOST，将这个要抓取的域名HOST指定到这个IP上就可以，但是这个客户是做站群，有很多域名都进行了这种操作，需要不定时的操作不同域名，因此去设置...
在命令行中使用curl，给访问的域名指定host
chaoping315的专栏
03-27 1万+
curl --silent -H "Host: www.xxxx.com"  "hostname/xxxx/xxxx.htm" 这种方式与windows中更改hosts文件，指定域名对应用的具体host的ip是一样的， curl http://ww.xxxx.com/xxxx/xxxx.htm -xhostname:80 与上面的方式区别不是很大.
curl 命令使用介绍
breakout_alex的博客
10-08 1517
前言 在进行web后台程序开发测试过程中，常常会需要发送url进行测试，使用curl可以方便地模拟出符合需求的url命令，下面主要介绍下curl命令的一些使用细节。 curl命令 curl命令是一个利用URL规则在命令行下工作的文件传输工具。它支持文件的上传和下载，所以是综合传输工具，但按传统，习惯称curl为下载工具。作为一款强力工具，curl支持包括HTTP、HTTPS、ftp等众...
wget curl 下载文件到指定的目录，并指定下载文件的重命名
qq_16069927的博客
06-15 2万+
wget url -P <aimPath> -O fileName curl -L url -o <filePath>
Curl【实例 01】curl下载使用及cmd实例脚本分享（通过请求下载文件）
Java与大数据相关实践内容分享！
05-30 5929
curl下载使用及cmd实例脚本分享（通过请求下载文件）
Linux 中 CURL常用命令详解
09-15
以下是对cURL常用命令的详细解释： 1. **下载单个文件** 默认情况下，`curl`命令会将下载内容输出到标准输出（STDOUT）。例如： ``` curl http://www.centos.org ``` 2. **保存文件到本地** - `-o` 选项用于...
curl命令详解,curl命令
07-01
下面是对 curl 命令的一些常用参数的详细解释： 调试类 * -v, --verbose：输出信息，用于调试目的。 * -q, --disable：在第一个参数位置设置后 .curlrc 的设置直接失效，这个参数会影响到 -K, --config。 CLI ...
linux常用命令linux常用命令
最新发布
11-20
这些只是Linux常用命令的一部分，实际上还有很多其他命令和工具，如管道（`|`）、重定向（`>` 和 `）、正则表达式等，都是提升效率的重要工具。学习和熟练掌握这些命令，能让你在Linux环境中更加游刃有余。通过不断...
Linux常用命令大全
08-28
"Linux常用命令大全"是一个全面介绍Linux命令的教程，包含36个章节，旨在帮助用户快速掌握Linux基础，提升在终端中的操作效率。 1. **文件和目录管理**：在Linux中，文件和目录管理是基本操作，包括`cd`用于切换...
curl 命令详解
lxw1844912514的博客
02-25 2826
curl 是一种命令行工具，作用是发出网络请求，然后获取数据，显示在"标准输出"（stdout）上面。它支持多种协议，下面列举其常用功能。一、查看网页源码直接在 curl 命令后加上网址，就可以看到网页源码。以网址 www.sina.com为例（选择该网址，主要因为它的网页代码较短）。$ curl www.sina.com <html> <head><title&gt...
windows版curl
12-20
windows版curl命令 Startup: -V, --version display the version of Wget and exit. -h, --help print this help. -b, --background go to background after startup. -e, --execute=COMMAND execute a `.wgetrc' command. Logging and input file: -o, --output-file=FILE log messages to FILE. -a, --append-output=FILE append messages to FILE. -d, --debug print debug output. -q, --quiet quiet (no output). -v, --verbose be verbose (this is the default). -nv, --non-verbose turn off verboseness, without being quiet. -i, --input-file=FILE read URL-s from file. -F, --force-html treat input file as HTML. Download: -t, --tries=NUMBER set number of retries to NUMBER (0 unlimits). -O --output-document=FILE write documents to FILE. -nc, --no-clobber don't clobber existing files. -c, --continue restart getting an existing file. --dot-style=STYLE set retrieval display style. -N, --timestamping don't retrieve files if older than local. -S, --server-response print server response. --spider don't download anything. -T, --timeout=SECONDS set the read timeout to SECONDS. -w, --wait=SECONDS wait SECONDS between retrievals. -Y, --proxy=on/off turn proxy on or off. -Q, --quota=NUMBER set retrieval quota to NUMBER. Directories: -nd --no-directories don't create directories. -x, --force-directories force creation of directories. -nH, --no-host-directories don't create host directories. -P, --directory-prefix=PREFIX save files to PREFIX/... --cut-dirs=NUMBER ignore NUMBER remote directory components. HTTP options: --http-user=USER set http user to USER. --http-passwd=PASS set http password to PASS. -C, --cache=on/off (dis)allow server-cached data (normally allowed). --ignore-length ignore `Content-Length' header field. --header=STRING insert STRING among the headers. --proxy-user=USER set USER as proxy username. --proxy-passwd=PASS set PASS as proxy password. -s, --save-headers save the HTTP headers to file. -U, --user-agent=AGENT identify as AGENT instead of Wget/VERSION. FTP options: --retr-symlinks retrieve FTP symbolic links. -g, --glob=on/off turn file name globbing on or off. --passive-ftp use the "passive" transfer mode. Recursive retrieval: -r, --recursive recursive web-suck -- use with care!. -l, --level=NUMBER maximum recursion depth (0 to unlimit). --delete-after delete downloaded files. -k, --convert-links convert non-relative links to relative. -m, --mirror turn on options suitable for mirroring. -nr, --dont-remove-listing don't remove `.listing' files. Recursive accept/reject: -A, --accept=LIST list of accepted extensions. -R, --reject=LIST list of rejected extensions. -D, --domains=LIST list of accepted domains. --exclude-domains=LIST comma-separated list of rejected domains. -L, --relative follow relative links only. --follow-ftp follow FTP links from HTML documents. -H, --span-hosts go to foreign hosts when recursive. -I, --include-directories=LIST list of allowed directories. -X, --exclude-directories=LIST list of excluded directories. -nh, --no-host-lookup don't DNS-lookup hosts. -np, --no-parent don't ascend to the parent directory. Mail bug reports and suggestions to <bug-wget@gnu.org>. Mail bug reports and suggestions to <bug-wget@gnu.org>. arent directory. s. wget.HLP: No such file or directory C:\Users\root>curl --help Usage: curl [options...] <url> --abstract-unix-socket <path> Connect via abstract Unix domain socket --anyauth Pick any authentication method -a, --append Append to target file when uploading --basic Use HTTP Basic Authentication --cacert <CA certificate> CA certificate to verify peer against --capath <dir> CA directory to verify peer against -E, --cert <certificate[:password]> Client certificate file and password --cert-status Verify the status of the server certificate --cert-type <type> Certificate file type (DER/PEM/ENG) --ciphers <list of ciphers> SSL ciphers to use --compressed Request compressed response -K, --config <file> Read config from a file --connect-timeout <seconds> Maximum time allowed for connection --connect-to <HOST1:PORT1:HOST2:PORT2> Connect to host -C, --continue-at <offset> Resumed transfer offset -b, --cookie <data> Send cookies from string/file -c, --cookie-jar <filename> Write cooki
curl命令详解
wang11876的博客
07-27 2668
利用URL规则在命令行下工作的文件传输工具。
curl -O 下载文件 curl -o 下载文件并重命名
wlzx059的博客
10-14 1万+
默认使用URL 的最后部分当作文件名 curl -O https://httpbin.org/image/png 红色框就是默认的下载路径 curl -o image.jpg https://httpbin.org/image 区别：网站的资源如果在下载的时候已经命名很规范使用-O，比如我前面下载下来的默认是png文件名，还不带后缀的得自己再添加文件名后缀！！！-o可以解决这个问题！！！ ...
curl 指定host和IP
weixin_33788244的博客
04-22 4479
如果要访问网站需要指定到源IP。实现方法如下：修改请求头wget -d http://www.ttlsa.com/ --header "X-Forwarded_For: 1.1.1.1" -e http_proxy=192.168.10.234 -O /dev/null1wget -d http://www.ttlsa.com/ --header "X-Forwarded_F...
curl 请求指定host 的 URL
热门推荐
ggg Freak
07-30 6万+
 通常我们调试WEB程序都是在 host配置文件绑定 xxx.com 192... ,然后重开浏览器，curl 可以自动实现这块。 shell 代码curl --silent -H "Host: www.zggo.com" "192.168.0.1/xxx/xxx/db.error.log"    php 代码 //httpHeader 设置的 htt
curl下载文件遇到的一个小坑，保持原文件名
pudge_yang_zhang的博客
05-15 3745
最近做了一个下载文件的api，然后实际并没有想象中的美好，用户只能使用curl来下载文件，类似如下: curl -X POST http://ip/company/api//export -H ‘Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,/;q=0.8’ -H ‘Ac...
curl 常用命名整理
追求自由的码砖人
12-10 857
基础命令 详细命名可参考 https://man.linuxde.net/curl 查看网页源码 curl www.sina.com -o 保存网页相当于 wget curl -o [文件名] www.sina.com -L 抓取自动跳转页面，www.sina.com 会自动跳转到www.sina.com.cn ，该参数会返回跳转后的内容 curl -L www.sina.com -i 查看...
Linux curl 命令详解
踏歌行的专栏
08-08 2万+
该命令设计用于在没有用户交互的情况下工作。 curl 是一个工具，用于传输来自服务器或者到服务器的数据。「向服务器传输数据或者获取来自服务器的数据」 可支持的协议有（DICT、FILE、FTP、FTPS、GOPHER、HTTP、HTTPS、IMAP、IMAPS、LDAP、LDAPS、POP3、POP3S、RTMP、RTSP、SCP、SFTP、SMTP、SMTPS、TELNET和TFTP）。 cur...
ctf curl常用命令
09-06
CTF中，使用curl命令可以进行各种网络请求和数据交互。下面是一些常用的curl命令： 1. 发送GET请求： ```shell curl <URL> ``` 例如： ```shell curl https://example.com ``` 2. 发送POST请求： ```shell curl -X POST -d '<data>' <URL> ``` 例如： ```shell curl -X POST -d 'username=test&password=123456' https://example.com/login ``` 3. 设置请求头： ```shell curl -H "Header-Name: Header-Value" <URL> ``` 例如： ```shell curl -H "Authorization: Bearer token123" https://example.com/api ``` 4. 下载文件： ```shell curl -O <URL> ``` 例如： ```shell curl -O https://example.com/file.txt ``` 5. 上传文件： ```shell curl -F 'key=value' -F 'file=@/path/to/file' <URL> ``` 例如： ```shell curl -F 'username=test' -F 'avatar=@/path/to/avatar.jpg' https://example.com/profile ``` 6. 跟随重定向： ```shell curl -L <URL> ``` 例如： ```shell curl -L https://example.com/redirect ``` 这些是一些常见的curl命令用法，可根据具体情况进行调整和扩展。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值