Linux下深入理解curl可以做什么？

最新推荐文章于 2024-06-23 08:00:00 发布
最新推荐文章于 2024-06-23 08:00:00 发布
阅读量1.6k 收藏 3
点赞数
分类专栏： Linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/chen1415886044/article/details/117404575
版权

curl是一个命令行工具，经常在shell脚本中使用它，但是现在我们想深入的介绍一下curl到底能做什么，以及怎么样使用curl功能。目前curl所支持常见的协议有FTP、HTTP、HTTPS、IMAP、LDAP、POP3、RTMP、RTSP、TELNET、TFTP、SCP等等。

curl–详细模式

如果执行curl命令没有执行或者返回我们想要期望看到的东西，例如执行以下命令：

curl https://www.baidu.com/ -o saved

在这里插入图片描述
上面的信息看，显示的信息量太少了，使用参数-v选项，以获得更多详细信息。

如果使用-v选项，界面上会显示更多信息，例如执行：

curl -v https://www.baidu.com/ -o saved

在这里插入图片描述

从截屏上面的信息来看，curl运行会用前缀*来打印信息。下面我们来分析https请求打印了哪些信息。

*   Trying 183.232.231.172...

这行信息告诉我们，curl正在尝试连接到这个IP地址，域名是“baidu.com”已被解析成为一个或者多个IP地址。

* Connected to www.baidu.com (183.232.231.172) port 443 (#0)

这行说明了连接到了目标网站(百度)，连接到的端口是443(https默认端口)，（#0）是curl为这个连接分配的内部数字。

* SSL connection using TLS_ECDHE_RSA_WITH_AES_128_GCM_SHA256
* Server certificate:
* 	subject: CN=baidu.com,O="Beijing Baidu Netcom Science Technology Co., Ltd",OU=service operation department,L=beijing,ST=beijing,C=CN
* 	start date: 4月 02 07:04:58 2020 GMT
* 	expire date: 7月 26 05:31:02 2021 GMT
* 	common name: baidu.com
* 	issuer: CN=GlobalSign Organization Validation CA - SHA256 - G2,O=GlobalSign nv-sa,C=BE
  0     0    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0> GET / HTTP/1.1

从上面的信息上来看，使用HTTPS协议，在HTTP的基础上通过传输加密和身份认证保证了传输过程的安全性。HTTPS 在HTTP 的基础下加入SSL，因此加密的详细内容就需要 SSL。上面的信息显示了服务器证书的一些细节，使用了哪些加密方式。

> User-Agent: curl/7.29.0
> Host: www.baidu.com
> Accept: */*
>

我们在看看上面的信息，这个对网站的请求，请求的版本是7.29.0版本的curl发起的，host是www.baidu.com。如果注意的话，我们会看到HTTPS请求的最后一行是以后空行。这里表示标头和正文的分隔。

< HTTP/1.1 200 OK
< Accept-Ranges: bytes
< Cache-Control: private, no-cache, no-store, proxy-revalidate, no-transform
< Connection: keep-alive
< Content-Length: 2443
< Content-Type: text/html
< Date: Sun, 30 May 2021 12:20:21 GMT
< Etag: "58860411-98b"
< Last-Modified: Mon, 23 Jan 2017 13:24:33 GMT
< Pragma: no-cache
< Server: bfe/1.0.8.18
< Set-Cookie: BDORZ=27315; max-age=86400; domain=.baidu.com; path=/
<

上面的信息使用的是HTTP响应消息的标头，看到200表示能正常访问。conten-Length长度2443字节的数据被保存到saved文件中。更多具体信息我们就不一一往下介绍了。

curl–跟踪详细信息

有时候-v选项已经不能够满足我们的需求，当使用HTTPS、FTPS、SFTP协议进行加密传输文件时，我们使用Wireshark或者tcpdump不能保存完整信息。

在这里我们就要介绍一下curl自带的两个选项 --trace和 --trace-ascii

curl --trace dump_file https://www.baidu.com/

在这里插入图片描述
上面执行完命令后，会生成一个叫作dump_file的文件，如下所示：
在这里插入图片描述

发送和接收的每个字节都以十六进制的数组显示出来。

如果你觉得十六进制对你没有什么帮助，可以使用二进制显示，如下命令

curl --trace-ascii dump_file https://www.baidu.com/

在这里插入图片描述
高精度的时间戳

有个选项–trace-time能把所有输出的信息都会加上高精度的时间戳。它可以与常规的-v和–trace、–trace-ascii选项一起使用。

curl -v --trace-time https://www.baidu.com/

在这里插入图片描述
这些都是本地时间，格式都是小时：分钟：秒以及微妙。

输出内容写入stdout

使用选项-w会在传输任务后完成打印一些信息。并且还提供了大量可添加输出内容。

如歌将一个字符串传给这个选项，那么这个字符串就会被打印出来。

curl -w “hello world\n” https://www.baidu.com/

在这里插入图片描述
压缩（–compressed）

HTTPS压缩可以通过使用–compressed选项进行压缩。

curl --compressed https://www.baidu.com/

使用这个选项后，如果服务器支持压缩，它会传输压缩过的数据，curl会在保存或发送到的stdout前对数据进行压缩。

shell重定向

在Linux系统中，你可以使用重定向 > filename将stdout重定向到文件中。

curl https://www.baidu.com/ > test.html

在这里插入图片描述
文件重定向会将curl的所有输出重定向到文件中。可以使用多个curl重定向到指定的文件中，这里就不举例了。

速率限定

在传输数据时，curl会尝试尽快完成任务。它可以用于上传和下载，它的速度取决于硬件设备、网络连接宽带、远程服务器的负载和延迟等等。

如果你可能希望curl可以减慢速度，以便其他网络用户有机会获取数据，可以使用选项–limit-rate让速率不超过指定的字节/秒。

下面我们想使用命令curl下载速率不超过500字节。这里要说一下，K表示千字节、M表示兆字节、G表示千兆字节。

curl https://www.bilibili.com/ --limit-rate 500K

这里要注意一下，你可能会知道最大速率，但是curl永远不会知道最大速度是多少，它会在运行范围内尽快完成传输。

连接超时

如果网络状况不稳定或远程服务器出现故障，TCP连接可能会失败或者速度慢。

要想减少对脚本或者其他应用影响，你可以为curl设置允许尝试连接的最长时间，使用选项 --connect-timeout 设置curl允许尝试连接的最长时间。

curl --connect-timeout 2 https://www.bilibili.com/

可以运行curl在2毫秒内建立连接。

总结

curl关心所有网络协议传输相关的东西，为指定的URL资源执行网络传输，在Linux中，curl可以被完美地应用在脚本或者自动化程序中。

欢迎关注微信公众号【程序猿编码】，欢迎添加本人微信号(17865354792)，交个朋友，咱们一起学习进步！

程序猿编码
关注
专栏目录
将Linux curl命令转换为windows平台的Python代码
weixin_43178406的博客
03-15 9万+
本文主要介绍了将Linux curl命令转换为windows平台的Python代码，希望能对使用curl命令的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
Linux curl命令详解
LU_ZHAO的博客
02-22 1653
curl curl 是一种命令行工具，作用是发出网络请求，然后获取数据 常用参数 -o: --output FILE Write to FILE instead of stdout -X: --request COMMAND Specify request command to use -A: --user-agent STRING Send User-Agent STRING to se...
linux curl 是什么
他山之石，可以凿玉
01-29 1252
百度百科: cURL是一个利用URL语法在命令行下工作的文件传输工具，1997年首次发行。它支持文件上传和下载，所以是综合传输工具，但按传统，习惯称cURL为下载工具。cURL还包含了用于程序开发的libcurl。 cURL是一个利用URL语法在命令行下工作的文件传输工具，1997年首次发行。它支持文件上传和下载，所以是综合传输工具，但按传统，习惯称cURL为下载工具。cURL还包含了用于程序开...
Linux命令行工具：curl详解（与服务器之间传输数据）
weixin_70208651的博客
06-21 1984
Linux(centos)下的curl工具是一个功能强大、用于与服务器之间传输数据的命令行工具。支持许多常见协议，如HTTP/HTTPS/FTP等。curl命令在开发、测试和日常使用中广泛使用，它可以帮助用户检查服务器的响应、上传或下载数据，以及进行各种网络相关的操作。curl 的选项非常丰富，可以根据不同的需求进行组合使用。此外，curl 还支持自定义请求头、处理 JSON、XML 等数据格式，以及通过脚本进行更复杂的操作。进行网络开发、测试，还是进行日常的网络操作，curl都能提供极大的便利和灵活性。
linux命令之curl的作用与常用实例
小白之路
08-14 782
linux命令之curl的作用与常用实例 转载：https://www.jianshu.com/p/85fadef0b7ef curl是linux系统中利用url规则在命令行中进行文件传输的工具。支持文件的上传、下载功能，是比较常用到的linux命令。 1/获取url内容并输出到命令行 curl https://www.baidu.com 获取https://www.baidu.com链接内容内...
curl是什么？
qq_38837032的博客
04-12 2344
模拟web请求的工具有： postman Jmeter curl 所以curl 是一种的命令行工具，用来请求 Web 服务器。它的名字就是客户端（client）的 URL 工具的意思。 它的功能非常强大，命令行参数多达几十种。如果熟练的话，完全可以取代 Postman。 ...
CURL是什么？怎么用？
qq_42305808的博客
12-14 894
What? CURL是一种命令行工具，用于发出各种协议的网络请求（像Postman一样，GET、POST…），然后得到和提取数据，并显示在“标准输出”上； How? 一、查看网页源码 curl [options] www.baidu.com options: -o [文件名] #将该网页源码保存为...文件名 eg: curl -o baidu.html www.baidu.com 二、发送表单信息 发送表单信息有GET和POST两种方法。 GET方法相对简单，只要把数据附在网址后面就行。 curl
curl-7.68.0_curllinux_c++https_rtsp_libcurlmac_libcurl_
09-28
《深入理解libcurl：从curl-7.68.0到跨平台网络通信》 libcurl，一个强大的网络通信库，被广泛应用于各种操作系统中，包括Linux、macOS等。在标题“curl-7.68.0_curllinux_c++https_rtsp_libcurlmac_libcurl_”中，...
java--curl工具，用于生成curl链接，直接在服务器上使用
02-01
Java中的Curl工具主要用于生成curl命令，这在服务器端操作和调试HTTP请求时...通过分析`CurlAspect.java`和`Curl.java`这两个源代码文件，我们可以更深入地理解这一工具的工作原理，并可能根据项目需求进行定制和扩展。
Linux查看公网IP的解决方案
最新发布
weixin_43178406的博客
06-23 8万+
本文主要介绍了Linux查看公网IP的解决方案，希望能对使用Linux的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
curl-rtsp:基于libcurl的rtsp客户端
07-05
curl-rtsp 基于libcurl RTSP客户端。 RTSP请求序列 请求媒体服务器支持的OPTIONS 。 请求媒体服务器DESCRIBE特定的媒体流。 响应中的会话描述被写入SDP文件。 通过指定传输协议请求媒体服务器SETUP特定的媒体流。 请求媒体服务器PLAY选择的媒体流。 请求当前会话的TEARDOWN 。 示例输出 $./curl_rtsp rtsp://192.168.1.105/ch1/main cURL V7.39.0 loaded RTSP: OPTIONS rtsp://192.168.1.105/ch1/main RTSP/1.0 200 OK CSeq: 1 Public: OPTIONS, DESCRIBE, PLAY, PAUSE, SETUP, TEARDOWN, SET_PARAMETER, GET_PARAMETER Date
php采用curl访问域名返回405 method not allowed提示的解决方法
01-21
/** * http测试 * 注：PHP版本5.2以上才支持CURL_IPRESOLVE_V4 * @param $url 网站域名 * @param $type 网站访问协议 * @param $ipresolve 解析方式 */ public function web_http($url,$type,$ipresolve) { //设置Header头 $header[] = Accept: application/json; $header[] = Accept-Encoding: gzip; $httptype = function_
深入理解linux网络 下载
07-02
深入理解Linux网络下载可以从以下几个方面来进行讨论。 首先，了解Linux网络下载的基本原理。Linux操作系统采用TCP/IP协议栈进行网络通信，下载是通过TCP协议来实现的。下载操作在用户程序中发起请求，Linux内核...
cURL是什么？
candice931020的博客
04-30 7628
cURL应用 cURL无处不在。它几乎隐藏在所有设备中，例如汽车，蓝光播放器等。它通过互联网协议传输任意类型数据。 在本文中，我们将揭开cURL神秘命令行工具的面纱，解释它是如何成为一种通用代码的，并举例说明其用法。 cURL是什么意思？ cURL（客户端URL）是一个开放源代码的命令行工具，也是一个跨平台的库（libcurl），用于在服务器之间传输数据，并分发给几乎所有新的操作系统。cURL编程用于需要通过Internet协议发送或接收数据的几乎任何地方。 cURL支持几乎所有的..
cURL 使用指南
潜心做事的博客
12-16 616
本文原始链接：cURL 使用指南 简介 cURL，全称 CommandLine Uniform Resource Locator，是一个利用 URL 语法在命令行下工作的文件传输工具。 大多情况下，我们会使用 cURL 用于文件的下载，就像使用 wget 一样，然而它的功能不仅仅于此。利用 cURL，可以在命令行下模拟发出各种网络请求，通过添加适当的参数，可以得到和提取返回的数据，非常方便。 ...
curl 命令行参数的若干示例
e5pool的博客
02-25 3316
curl 是一种用于与 Web 服务器进行交互的命令行工具，它支持多种协议（HTTP、FTP、SMTP、POP3 等）以及各种选项和参数。
curl --compressed报错，此版本不支持此命令
eruiwen1624的博客
12-03 423
然后把安装目录的bin目录放到path环境变量里最开始, 让cmd优先使用该curl而不是微软自带的curl.可能有人后来使用过程中curl重新变成微软版的curl, 那么建议给新安装的curl设置别名,比如curl2,执行where curl 时,可以看到输出为 C:\Windows\System32\curl.ee。Autorun 属性,类型为字符串,将其值设为上面的bat文件的路径。3. ok ,现在curl2就对应你新安装的crul,解决方法是使用其它curl,下载地址如下。运行下面命令查看版本。
curl命令常用参数
识途老码
12-27 2万+
curl用法大全
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值