Linux命令curl使用权威指南

最新推荐文章于 2022-11-26 18:44:30 发布
最新推荐文章于 2022-11-26 18:44:30 发布
阅读量635 收藏 2
点赞数
分类专栏： Linux 文章标签： curl linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/William0318/article/details/102971128
版权

curl是一个命令行工具，通过指定的URL来上传或下载数据，并将数据展示出来。curl中的c表示client，而URL，就是URL。这里我们介绍一下curl的使用。

1、查看url访问详细信息

$ curl -v www.baidu.com -o baidu

得到如下信息：

* About to connect() to www.baidu.com port 80 (#0)
*   Trying 180.101.49.12... connected
* Connected to www.baidu.com (180.101.49.12) port 80 (#0)
> GET / HTTP/1.1
> User-Agent: curl/7.19.7 (x86_64-redhat-linux-gnu) libcurl/7.19.7 NSS/3.16.2.3 Basic ECC zlib/1.2.3 libidn/1.18 libssh2/1.4.2
> Host: www.baidu.com
> Accept: */*
> 
< HTTP/1.1 200 OK
< Accept-Ranges: bytes
< Cache-Control: private, no-cache, no-store, proxy-revalidate, no-transform
< Connection: Keep-Alive
< Content-Length: 2381
< Content-Type: text/html
< Date: Fri, 08 Nov 2019 05:53:25 GMT
< Etag: "588604c8-94d"
< Last-Modified: Mon, 23 Jan 2017 13:27:36 GMT
< Pragma: no-cache
< Server: bfe/1.0.8.18
< Set-Cookie: BDORZ=27315; max-age=86400; domain=.baidu.com; path=/
< 
<!DOCTYPE html>
<!--STATUS OK--><html> <head><meta http-equiv=content-type content=text/html;charset=utf-8><meta http-equiv=X-UA-Compatible content=IE=Edge><meta content=always name=referrer><link rel=stylesheet type=text/css href=http://s1.bdstatic.com/r/www/cache/bdorz/baidu.min.css><title>鐧惧害涓€涓嬶紝浣犲氨鐭ラ亾</title></head> <body link=#0000cc> <div id=wrapper> <div id=head> <div class=head_wrapper> <div class=s_form> <div class=s_form_wrapper> <div id=lg> <img hidefocus=true src=//www.baidu.com/img/bd_logo1.png width=270 height=129> </div> <form id=form name=f action=//www.baidu.com/s class=fm> <input type=hidden name=bdorz_come value=1> <input type=hidden name=ie value=utf-8> <input type=hidden name=f value=8> <input type=hidden name=rsv_bp value=1> <input type=hidden name=rsv_idx value=1> <input type=hidden name=tn value=baidu><span class="bg s_ipt_wr"><input id=kw name=wd class=s_ipt value maxlength=255 autocomplete=off autofocus></span><span class="bg s_btn_wr"><input type=submit id=su value=鐧惧害涓€涓?class="bg s_btn"></span> </form> </div> </div> <div id=u1> <a href=http://news.baidu.com name=tj_trnews class=mnav>鏂伴椈</a> <a href=http://www.hao123.com name=tj_trhao123 class=mnav>hao123</a> <a href=http://map.baidu.com name=tj_trmap class=mnav>鍦板浘</a> <a href=http://v.baidu.com name=tj_trvideo class=mnav>瑙嗛</a> <a href=http://tieba.baidu.com name=tj_trtieba class=mnav>璐村惂</a> <noscript> <a href=http://www.baidu.com/bdorz/login.gif?login&amp;tpl=mn&amp;u=http%3A%2F%2Fwww.baidu.com%2f%3fbdorz_come%3d1 name=tj_login class=lb>鐧诲綍</a> </noscript> <script>document.write('<a href="http://www.baidu.com/bdorz/login.gif?login&tpl=mn&u='+ encodeURIComponent(window.location.href+ (window.location.search === "" ? "?" : "&")+ "bdorz_come=1")+ '" name="tj_login" class="lb">鐧诲綍</a>');</script> <a href=//www.baidu.com/more/ name=tj_briicon class=bri style="display: block;">鏇村浜у搧</a> </div> </div> </div> <div id=ftCon> <div id=ftConw> <p id=lh> <a href=http://home.baidu.com>鍏充簬鐧惧害</a> <a href=http://ir.baidu.com>About Baidu</a> </p> <p id=cp>&copy;2017&nbsp;Baidu&nbsp;<a href=http://www.baidu.com/duty/>浣跨敤鐧惧害鍓嶅繀璇?/a>&nbsp; <a href=http://jianyi.baidu.com/ class=cp-feedback>鎰忚鍙嶉</a>&nbsp;浜琁CP璇?30173鍙?nbsp; <img src=//www.baidu.com/img/gs.gif> </p> </div> </div> </div> </body> </html>
* Connection #0 to host www.baidu.com left intact
* Closing connection #0

如果觉得使用-v的信息还不够的话，还可以使用--trace [filename]选项来讲完整的流保存到filename中。比如：

$ curl --trace dump www.baidu.com

verbose模式的对立模式，就是silence，可以使用-s或--silence选项来告诉curl不输出任何程序的信息或者错误信息，但也会输出响应的结果。

如果需要在有错误的时候输出错误信息，可以使用-S或--show-error来指定。

2. 浏览器到curl

别人使用浏览器发起了一个请求之后，如果自己想用curl再来一次同样的请求，这里日常的工作中是比较常见的一个操作。在curl中，有没有什么比较简便快捷的方式来获得curl命令呢？

Chrome浏览器和Firefox浏览器都实现了复制成curl的工具，可以将浏览器的请求快速复制成curl命令，非常方便快捷。

1. Chrome

在Chrome中，打开More tools->Developer模式，选择Network选项卡，然后就可以看到所有的请求，选中相应的请求，右键就有Copy as cURL选项，单击就可以了。

 

2. Firefox

在Firefox中，打开Web Developer->Network工具，然后右键想要复制的链接，就有一个Copy as cURL的选项，单击就可以了。

3. HTTP与curl

与curl一起使用的协议，最多的还是HTTP，这里就将介绍如何有效地使用curl来发送HTTP请求。

3.1 HTTP方法

在每一个HTTP请求中，都有一个对应的方法，常用的方法有：GET、POST、HEAD和PUT。

如果在一个curl命令中不指定具体的方法，那么默认的就是使用GET方法。对于其它的方法，可以在curl命令中指定：

methodoption
POST-d或-F
HEAD-I
PUT-T

3.2 Header

在curl中，使用-i选项可以显示Response的Header信息，连同Body数据：

$ curl -i www.baidu.com

结果：

HTTP/1.1 200 OK
Accept-Ranges: bytes
Cache-Control: private, no-cache, no-store, proxy-revalidate, no-transform
Connection: Keep-Alive
Content-Length: 2381
Content-Type: text/html
Date: Mon, 17 Sep 2018 10:26:42 GMT
Etag: "588604dd-94d"
Last-Modified: Mon, 23 Jan 2017 13:27:57 GMT
Pragma: no-cache
Server: bfe/1.0.8.18
Set-Cookie: BDORZ=27315; max-age=86400; domain=.baidu.com; path=/

<!DOCTYPE html>
<!--STATUS OK--><html> <head><meta http-equiv=content-type content=text/html;charset=utf-8><meta
http-equiv=X-UA-Compatible content=IE=Edge><meta content=always name=referrer><link rel=styleshee
t type=text/css href=http://s1.bdstatic.com/r/www/cache/bdorz/baidu.min.css><title>百度一下，你就
知道</title></head> <body link=#0000cc> ... </body> </html>

使用-I选项可以只显示Response的Header信息：

$ curl -I www.baidu.com

3.3 POST

POST是HTTP中向服务端提交数据的一种方法。在浏览器中，但在表单中填写完数据后，浏览器就会默认将填写的数据使用key=value串的形式进行转化。在curl中，我们可以使用-d或--data选项来指定具体的数据：

$ curl -d key1=value1&key2=value2 http://example.com

我们也可以使用多个-d选项来指定多组数据，curl会自动把这些数据连接起来，因此上面的例子还可以这样：

$ curl -d key1=value1 -d key2=value2 http://example.com

当然，如果数据过多，我们还可以把数据放在一个文件中：

$ curl -d @filename http://example.com

1. Content-Type

当使用POST方法提交数据时，对于提交的数据主要有如下四种形式：

  • application/x-www-form-urlencoded：默认的形式，即key1=value1&key2=value2的形式；
  • multipart/form-data：使用表单上传文件时使用这个形式；
  • application/json：提交JSON格式的数据；
  • text/xml：提交XML格式的数据。

Content-Type是一个Header，如果不指定的话，那么默认就是使用application/x-www-form-urlencoded形式传输数据，当需要使用别的形式进行数据传输的话，那么就需要指定这个Header：

$ curl -d '{I Am A JSON FORM}' -H 'Content-Type: application/json' http://example.com

其中，-H就是用来指定一个具体的Header的选项，值就是key=value 的形式。当需要指定其它的Header，可以使用-H选项。

2. POST一个二进制数据

在curl中，我们也可以提交一个文件，可以使用--data-binary选项来指定一个文件：

$ curl --data-binary @filename http://example.com

3. 转化成一个GET

使用-G或-get选项，可以把一个POST请求转化成一个GET请求。如果有-d选项指定的参数，那么curl就会把-d后面的数据添加到URL的后面，用?连接。比如：

$ curl -d "key1=value1" -G http://example.com

得到的请求URL就是：

http://example.com/?key1=value1

4. URL编码

如果使用的数据没有编码，那么可以指定curl来帮助自己进行编码。这时可以使用--data-urlencode选项来指定。比如：

$ curl --data-urlencode "name=Alan Walker" http://example.com

5. multipart formposts

如果一个HTTP POST具有如下形式的表单：

<form action="submit.cgi" method="post" enctype="multipart/form-data">
    Name: <input type="text" name="person"><br>
    File: <input type="file" name="secret"><br>
    <input type="submit" value="Submit">
</form>

用户可以在Name中填写名字，在File中选择一个文件，然后单击Submit按钮提交数据。

为了可以在curl中模拟这个请求，我们可以使用-F或--form选项来指定数据：

$ curl -F person=annonymous -F secret=@filename http://example.com/submit.cgi

在上面的表单中，action指定了这个请求发送到哪里；method指定这是一个POST请求；而enctype指定了这是一个multipart formpost。

当执行上面的curl命令后，curl会产生如下的请求头：

POST /submit.cgi HTTP/1.1
Host: example.com
User-Agent: curl/7.46.0
Accept: */*
Content-Length: 313
Content-Type: multipart/form-data; boundary=------------------------d74496d66958873e

其中Content-Type是和enctype一致的。

当使用-F选项时，默认的Content-Type就是multipart/form-data，不过，我们也可以使用-H进行指定：

$ curl -F 'name=Dan' -H 'Content-Type: multipart/magic' https://example.com

6. -d vs -F

在前面我们介绍了使用-d构造一个基本的POST请求，和-F构造一个multipart formpost请求。那么这两个选项有啥区别以及什么时候使用呢？

这两个选项都是把指定的数据发送到服务器上，区别在于数据传递的格式。大多数时候，接收端来指定希望客户端发送数据的格式，客户端不能随意自己指定格式。

  • HTML表单

当使用HTML表单时，会使用<form>标签指定一个表单，这会让浏览器使用POST方法。如果标签中含有enctype=multipart/form-data，这意味着使用multipart formpost方式，在curl中就是使用-F选项。一个典型的场景就是表单中含有<input type=file>标签。

  • 不用HTML表单

POST方法不一定非要在HTML中，在好多的service、APIs中，也可以使用POST请求。

如果这些service期望使用JSON或者其它类似的格式的数据，那么这就是一个普通的POST请求。在curl中就可以使用-d选项。不过要注意-d的默认Content-Type是不是期望的格式，如果不是的话，可以使用-H进行更改。

3.4 HTTP重定向（redirect）

重定向是HTTP协议中的一个基础部分。在重定向中，服务器给客户端的并不是客户端想要的内容，而是一个车具体的指令，告诉客户端如果想获取想要的数据，应该到哪里去请求。

但不是所有的重定向都一样。重定向之后的请求使用什么方法呢？重定向多久呢？

所有的重定向都会返回Location:的Header，来指定一个新的URL。

1. curl：redirect

在curl中，默认不会重定向，可以使用-L或--location选项来告诉curl重定向：

$ curl -L http://example.com

2. GET还是POST

第一次请求后，服务器会告诉客户端下一次请求需要使用的方法。关于重定向的响应码如下：

MethodPermanentTemporary
切换到GET301302和303
使用第一次请求的方法308307

我们可以指定curl在重定向时使用什么方法。如果我们第一次请求使用的不是GET方法，重定向后也不希望curl默认使用GET方法，那么我们可以使用--post301,--post302和--post303选项来指定。

3.5 修改HTTP请求

每一个请求都有一个请求行、一些请求头和可选的请求体，这里我们看看在curl中可以具体修改的部分，包括请求行和请求头。

1. 请求方法

在请求行中包含这次请求所使用的方法。我们使用下面的简单命令就可以进行一个GET方法：

$ curl http://example.com/file

这会生成如下的请求行：

GET /file HTTP/1.1

在HTTP方法中我们可以通过具体的选项指定使用什么方法。这里我们也可以使用-X选项来进行指定：

$ curl -X POST http://example.com

2. 修改请求头

在curl中，我们可以使用-H或--header选项来指定Header。之前我们就使用-H指定了Content-Type，其实Header就是一个key: value对：

$ curl -H "HeaderName: HeaderValue" http://example.com

3. Referer

我们还可以在curl通过--referer选项来指定我们是从哪里跳转过来的：

$ curl --referer http://fromexample.com http://toexample.com

4. User Agent

这个字段是用来表示客户端的设备信息的，服务器会根据这个字段，针对不同的设备，返回不同格式的网页。在curl中，可以使用--user-agent选的来指定：

$ curl --user-agent "[User Agent]" http://example.com

3.6 Cookies

HTTP是一种无状态的协议，为了在会话中保存一些状态，可以使用Cookies。服务器通过Set-Cookie:来设置Cookie，客户端就可以在下一次请求中携带这些数据。

1. 设置Cookie

我们可以使用--cookie选项来设置一个Cookie：

$ curl --cookie "CookieName=CookieValue" http://example.com

2. 从文件中读取Cookies

curl默认不会记住服务器设置的Cookie，也不会在下一次请求中携带Cookie。除非用户通过选项自己设置。

我们可以把之前的Cookies保存到一个文件，然后在下一次请求中指定curl读取文件中的Cookies：

$ curl -b cookies.txt http://example.com

-b选项指定curl去给定的文件中读取Cookies。

不过要主要，这里仅仅是读取Cookies，如果这次请求中服务器修改了Cookie，那么curl是不会进行保存的，除非我们手动指定。

3. 写Cookies到文件

我们可以使用-c选项指定curl保存这次请求中服务器设置的Cookies：

$ curl -c cookie.jar.txt http://example.com

有时，我们既需要从文件中读取Cookies，也需要保存服务器设置的Cookies。那么就可以同时使用-b和-c选项：

 

—————————————————————————————————
作者：今天中午吃啥
链接：https://www.jianshu.com/p/fc0eb6c60816
来源：简书
著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。

小山沟里的程序猿
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
linux 环境下 curl文件上传post总结变式
qq_29689973的博客
05-12 710
1 openstack horizon 的 django api部分 /root/bin/file_upload/php/post.sh curl -F "userfile=@/root/image333.jpg" http://192.168.1.11/face/upload_ok.php curl -F "file=@/tmp/tmp" http://10.99.3.156:22222/api/rest/swcloud/file/upload curl -v -F "file=@/root/sw
linux curl命令详解及实例分享
09-15
curl命令使用了libcurl库来实现，libcurl库常用在C程序中用来处理HTTP请求，curlpp是libcurl的一个C++封装，这几个东西可以用在抓取网页、网络监控等方面的开发，而curl命令可以帮助来解决开发过程中遇到的问题。
apache更改网站目录
CPriLuke的博客
10-03 1291
目标：将默认网站修改成/home/wwwroot 1.修改配置文件 [root@lufoserver lufoserver]# [root@lufoserver lufoserver]# mkdir -p /home/wwwroot/ [root@lufoserver lufoserver]# echo "this new web directory" >> /home/...
MYSQL--can‘t connect to MySQL server on‘localhost‘(0)解决办法（全网最简）
AKA12138_的博客
08-22 3477
1.右键点击“电脑”-----“管理”
Linux curl命令
zhangustb
04-09 333
以下代码可以作为测试接收请求的程序直接复制使用： from flask import Flask, request app = Flask(__name__) @app.route('/service', methods=['POST']) def post_route(): if request.method == 'POST': headers = request.headers data = request.get_json() pr
curl
忆的博客
10-24 673
curl -# 显示进度(具体显示啥进度测试不出来) -0 指定使用http1.0协议发起请求 $curl -svI ab.text.com/jdk-8u101-linux-x64.tar.gz ...... > HEAD /big/SGWS5.PC6game.zip HTTP/1.1 #默认协议为1.1 $curl -0 -svI ab.text.com/jdk-8u...
mysql workbench中Unable to connect to localhost
BAB__的博客
05-11 1万+
unable to connect to localhost;本地计算机上的MySQL服务启动后停止
Linux系统中curl命令用法详解
热门推荐
IT之一小佬的博客
11-26 3万+
Linux系统中curl命令用法详解
深入理解HTTP协议
qq_15021091的专栏
07-22 2393
HTTP(Hyper Text Transfer Protocol) 超文本传输协议，是基于应用层(TCP/IP参考模型)的通信规范；是从Web服务器传输超文本到客户端的传输协议，无状态的传输协议；不仅能够保证正确、快速、高效的传输超文本文档，而且可以确定资源加载顺序等；在Web开发中，页面缓存控制、数据传递、文档语言参数设定等等，都离不开HTTP协议。HTTP协议是整个Web应用的基础，深入理解...
multipart/form-data中boundary的作用
yilu_beiyu的博客
03-14 1万+
主要用于分割key-value对，多个kv之间使用boundary来进行分割 参考自： https://stackoverflow.com/questions/3508338/what-is-the-boundary-in-multipart-form-data#:~:text=multipart%2Fform%2Ddata%20contains%20boundary,type%20of%20a%20request%20header. multipart/form-data containsbo.
curl网络访问时报错：(56) Recv failure: Connection timed out
企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net
02-22 1万+
一、问题描述 某次用户对接某业务平台，在用户侧curl平台侧资源，报错：(56) Recv failure: Connection timed out； 二、分析处理 1、在服务器端curl上述地址正常；公网访问该url地址也正常； 2、用户侧访问，telnet 端口访问正常，这是curl Url时，提示连接超时； 3、可能原因： 客户端侧查看socket：显示：ESTABLISHED 当tcp连接完成syn->syn ack后进入ESTABLISHED状态， 而可能由于客户侧iptables的
Linux 中 CURL常用命令详解
09-15
主要介绍了Linux 中 CURL常用命令详解,需要的朋友可以参考下
Linux-curl 命令用法大总结.docx
10-22
Linux—curl 命令用法大总结 1、基本用法 2、保存访问的网页 3、测试网页返回值 4、指定proxy服务器以及其端口 5、cookie 6、模仿浏览器 7、伪造referer（盗链） 8、***下载文件 9、断点续传 10、***上传文件 11、...
Linux中curl命令和wget命令的使用介绍与比较
09-15
主要给大家介绍了Linux中curl命令和wget命令使用以及这两者之间的区别比较的相关资料，curl和wget命令都是Linux下的工具，可以用来下载文件。文中介绍的非常详细，相信对大家具有一定的参考价值，需要的朋友们下面来...
linux下Tomcat正常启动 Unable to connected localhost原因
YesWinner1026的博客
10-11 749
linux下Tomcat正常启动 Unable to connected localhost原因
使用NGINX作为HTTPS正向代理服务器
SmallCatBaby的博客
06-24 4426
NGINX主要设计作为反向代理服务器，但随着NGINX的发展，它同样能作为正向代理的选项之一。正向代理本身并不复杂，而如何代理加密的HTTPS流量是正向代理需要解决的主要问题。本文将介绍利用NGINX来正向代理HTTPS流量两种方案，及其使用场景和主要问题。 HTTP/HTTPS正向代理的分类 简单介绍下正向代理的分类作为理解下文的背景知识： 按客户端有无...
linux之curl get、post
xiaoxiao_2001的博客
08-22 156
GET请求 POST请求 - 增加`-d`给到参数即可，eg：`curl 'http://127.0.0.1:5028/test' -d 'action=post'` 说明：一般此时使用的是`request.form`接收参数，比如`request.form["action"]` - 服务器若接收的是`json`类的参数，则需增加`HEADER`，`-H 'Content-Type:application/json'`，eg：`curl 'http://127.0.0.1:5028/tes
curl用法：post、header、body
进击的小白
10-24 7832
介绍 cURL是一个利用URL语法在命令行下工作的文件传输工具，复杂的就不在这介绍了。 这里主要一般用于在linux环境下模拟web请求测试接口或者网络。 用法 ps:下面使用-v来显示设置的信息 基本用法 #请求网址并输出返回结果,默认get方式提交 $ curl http://baidu.com ############################## <html> <meta http-equiv="refresh" content="0;url=http://ww
网络编程：构建 HTTP服务
xk_moving的博客
01-03 4823
1.http 模块 Node的 http 模块包含对HTTP处理的封装。在Node中,HTTP服务继承自TCP服务器( net 模块),它能够与多个客户端保持连接,由于其采用事件驱动的形式,并不为每一个连接创建额外的线程或进程,保持很低的内存占用,所以能实现高并发。HTTP服务与TCP服务模型有区别的地方在于,在开启 keepalive 后,一个TCP会话可以用于多次请求和响应。TCP服务以 ...
linux的curl命令怎么使用
最新发布
06-10
curl是一个常用的命令行工具，用于与服务器进行数据交互，支持多种协议，如HTTP、FTP等。以下是curl命令的一些常用用法： 1. 获取网页内容并输出到终端： ``` curl http://www.example.com ``` 2. 将网页内容输出到文件： ``` curl http://www.example.com -o example.html ``` 3. 使用POST方法提交数据： ``` curl -X POST -d "key1=value1&key2=value2" http://www.example.com ``` 4. 使用HTTP认证： ``` curl -u username:password http://www.example.com ``` 5. 设置请求头： ``` curl -H "Content-Type: application/json" http://www.example.com ``` 以上是curl命令的一些常用用法，更多用法可以查看curl命令的帮助文档。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值