Linux命令之curl

curl

在Linux中curl是一个利用URL规则在命令行下工作的文件传输工具，可以说是一款很强大的http命令行工具。它支持文件的上传和下载，是综合传输工具，但按传统，习惯称url为下载工具。

curl命令语法：

curl [options] [URL…]

常见参数：

-A/–user-agent 设置用户代理发送给服务器
-b/–cookie <name=string/file> cookie字符串或文件读取位置
-c/–cookie-jar 操作结束后把cookie写入到这个文件中
-C/–continue-at 断点续转
-D/–dump-header 把header信息写入到该文件中
-e/–referer 来源网址
-f/–fail 连接失败时不显示http错误
-o/–output 把输出写到该文件中
-O/–remote-name 把输出写到该文件中，保留远程文件的文件名
-r/–range 检索来自HTTP/1.1或FTP服务器字节范围
-s/–silent 静音模式。不输出任何东西
-T/–upload-file 上传文件
-u/–user <user[:password]> 设置服务器的用户和密码
-w/–write-out [format] 什么输出完成后
-x/–proxy <host[:port]> 在给定的端口上使用HTTP代理
-#/–progress-bar 进度条显示当前的传送状态

实例

1、下载页面：
curl -o index.html http://aiezu.com

2、下载文件并显示简单进度条：
curl -# -o centos6.8.iso http://mirrors.aliyun.com/centos/6.8/isos/x86_64/CentOS-6.8-x86_64-minimal.iso

3、断点续传：
#继续完成上次终止的未完成的下载
curl -# -o centos6.8.iso -C - http://mirrors.aliyun.com/centos/6.8/isos/x86_64/CentOS-6.8-x86_64-minimal.iso

4、伪造来源页面：
#告诉爱E族，我是从百度来的
curl -e http://baidu.com http://aiezu.com
5、伪造代理设备：
#告诉爱E族，我是GOOGLE爬虫蜘蛛（其实我是curl命令）
curl -A " Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" http://aiezu.com

#告诉爱E族，我用的是微信内置浏览器
curl -A “Mozilla/5.0 AppleWebKit/600 Mobile MicroMessenger/6.0” http://aiezu.com

6、http头：
看看本站的http头是怎么样的
curl -I http://aiezu.com
输出：

HTTP/1.1 200 OK
Date: Fri, 25 Nov 2016 16:45:49 GMT
Server: Apache
Set-Cookie: rox__Session=abdrt8vesprhnpc3f63p1df7j4; path=/
Expires: Thu, 19 Nov 1981 08:52:00 GMT
Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
Pragma: no-cache
Vary: Accept-Encoding
Content-Type: text/html; charset=utf-8

6、设置http请求头：

curl -H “Cache-Control:no-cache” http://aiezu.com

7、发送表单数据：

curl -F “pic=@logo.png” -F “site=aiezu” http://aiezu.com/

8、发送cookie：

curl -b “domain=aiezu.com” http://aiezu.com

get &post

一、get请求
1.显示全部信息
curl -i “http://www.dangdang.com”
2.只显示头部信息
curl -I “http://www.dangdang.com”
3.显示get请求全过程解析
curl -v “http://www.dangdang.com”
4.发送HTTPS请求，忽略认证
curl -k “https://www.baidu.com”
5.通过代理发送请求，-x
curl -x “ip:port” “http://www.dangdang.com”
6.添加自定义头部,–header
curl --header “content-type:text/html” -v “http://www.dangdang.com”

7.保存网页-o

curl -o page.html www.sina.com

8.保存cookie信息:-D

curl -x ip:n -o page.html -D cookie001.txt www.sina.com

9.访问时添加cookie信息：-b

curl -x ip:n -o page.html -D cookie001.txt -b cookie001.txt www.sina.com

二、post请求

1.添加请求data
curl -d “param1=value1” “http://www.dangdang.com”

curl -l -H “Content-type: application/json” -X POST -d ‘{“phone”:“12345678900”,“password”:“test”}’ “http://www.test.com”