【网络通信】Ubuntu下LibCurl库的学习与使用

最新推荐文章于 2023-08-06 22:30:27 发布
最新推荐文章于 2023-08-06 22:30:27 发布
阅读量441 收藏 2
点赞数
分类专栏： 网络通信编程 文章标签： linux c语言 ubuntu
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43704348/article/details/110710308
版权

目录

一、实验准备

实验目的：

  • 基本的http GET/POST操作
  • 取html网页
  • 网页下载保存
  • 文件的断点续传

实验环境：

环境：Ubuntu 18.04
语言：C语言

Ubuntu下载安装Libcurl库，命令如下:

sudo apt-get update
sudo apt-get install libcurl4-openssl-dev

安装完成
在这里插入图片描述

二、基本的http GET/POST操作

使用命令gedit http1.c创建一个.c文件，写入以下代码：

#include <stdio.h>
#include <curl/curl.h>
void getUrl(char *filename)
{
    CURL *curl;
    CURLcode res;
    FILE *fp;
    /*
    以可写的形式打开文件，若没有则创建一个
    返回结果用文件存储
    */
    if ((fp = fopen(filename, "w")) == NULL)
    {
        return;
    }
    //定义一个curl列表指针
    struct curl_slist *headers = NULL;
    //申请一个curl列表并向列表中添加：Accept:Agent-007
    headers = curl_slist_append(headers, "Accept: Agent-007");
    //开始一个curl会话
    curl = curl_easy_init();
    //传递自定义标头列表
    if (curl)
    {
        //代理
        //curl_easy_setopt(curl, CURLOPT_PROXY, "10.99.60.201:8080");
        //更改协议头
        curl_easy_setopt(curl, CURLOPT_HTTPHEADER, headers);
        //设置访问的URL（百度）
        curl_easy_setopt(curl, CURLOPT_URL,"http://www.baidu.com");
        //将返回的html主体数据输出到fp指向的文件
        curl_easy_setopt(curl, CURLOPT_WRITEDATA, fp);
        //将返回的http头输出到fp指向的文件
        curl_easy_setopt(curl, CURLOPT_HEADERDATA, fp);
        //执行curl，返回0则一切ok，否则有错
        res = curl_easy_perform(curl);
        //释放资源
        curl_slist_free_all(headers);
        //结束curl会话
        curl_easy_cleanup(curl);
        //关闭fp指向的文件
        fclose(fp);
    }
}
void postUrl(char *filename)
{
    CURL *curl;
    CURLcode res;
    FILE *fp;
    if ((fp = fopen(filename, "w")) == NULL)
    {
        return;
    }
    curl = curl_easy_init();
    if (curl)
    {
        //指定cookie文件去访问其它页面
        curl_easy_setopt(curl, CURLOPT_COOKIEFILE, "/home/zcj/code/cookie.txt");
        //指定post内容（传递一个作为HTTP “POST”操作的所有数据的字符串）
        curl_easy_setopt(curl, CURLOPT_POSTFIELDS, "&logintype=uid&u=xieyan&psw=xxx86");
        //curl_easy_setopt(curl, CURLOPT_PROXY, "10.99.60.201:8080");
        //指定url
        curl_easy_setopt(curl, CURLOPT_URL, "http://mail.sina.com.cn/cgi-bin/login.cgi");
        curl_easy_setopt(curl, CURLOPT_WRITEDATA, fp);
        res = curl_easy_perform(curl);
        curl_easy_cleanup(curl);
    }
    fclose(fp);
}
int main(void)
{
    //传参：文件路径
    getUrl("/home/zcj/code/get.html");
    postUrl("/home/zcj/code/post.html");
}

编译运行

gcc http1.c -o http1 –lcurl
./http1

然后get.html 文件内有了百度返回的网页内容
在这里插入图片描述

三、获取html网页

新建一个.c文件

gedit http2.c

文件中写入以下代码

#include <stdio.h>
#include <curl/curl.h>
#include <stdlib.h>
int main(int argc, char *argv[])
{
    //定义CURL类型的指针
    CURL *curl;
    //定义CURLcode类型的变量，保存返回状态码
    CURLcode res;
    //如果命令行参数不等于 2 ，则执行
    if(argc!=2)
    {
        printf("Usage : file <url>;\n");
        exit(1);
    }
    //初始化一个CURL类型的指针
    curl = curl_easy_init();
    if(curl!=NULL)
    {
        //设置 curl 选项. 其中 CURLOPT_URL 是让用户指定 url. argv[1] 中存放的命令行传进来的网址
        curl_easy_setopt(curl, CURLOPT_URL, argv[1]);
        //调用 curl_easy_perform 执行我们的设置.并进行相关的操作. 在这里默认打印出来
        res = curl_easy_perform(curl);
        //清除curl操作.
        curl_easy_cleanup(curl);
    }
    return 0;
}

编译运行

gcc http2.c -o http2 –lcurl
./http2 www.baidu.com

在这里插入图片描述

四、网页下载保存

新建一个.c文件

gedit http3.c

文件中写入以下代码

// 采用 CURLOPT_WRITEFUNCTION 实现网页下载保存功能
#include <stdio.h>
#include <stdlib.h>
#include <unistd.h>
 
#include <curl/curl.h>
#include <curl/easy.h>

//定义FILE类型指针
FILE *fp;
/*
这个函数是为了符合 CURLOPT_WRITEFUNCTION 而构造的
完成数据保存功能
*/
size_t write_data(void *ptr, size_t size, size_t nmemb, void *stream)  
{
    int written = fwrite(ptr, size, nmemb, (FILE *)fp);
    return written;
}

int main(int argc, char *argv[])
{
    CURL *curl;
    //初始化所有的可能的调用
    curl_global_init(CURL_GLOBAL_ALL);
    //初始化一个CURL类型的指针
    curl = curl_easy_init();
    //设置 curl 选项（这里通过参数二设置）
    curl_easy_setopt(curl, CURLOPT_URL, argv[1]);
    //打开文件（根据参数三）
    if((fp=fopen(argv[2],"w"))==NULL)
    {
        curl_easy_cleanup(curl);
        exit(1);
    }
    //CURLOPT_WRITEFUNCTION 将后继的动作交给 write_data 函数处理
    curl_easy_setopt(curl, CURLOPT_WRITEFUNCTION, write_data);
    //执行
    curl_easy_perform(curl);
    curl_easy_cleanup(curl);
    exit(0);
}

在这里插入图片描述
这里使用的是额外的函数进行写入文件并保存。

五、文件的断点续传

新建一个.c文件

gedit http4.c

文件中写入以下代码：

//采用 CURLOPT_RESUME_FROM_LARGE 实现文件断点续传功能
#include <stdlib.h>
#include <stdio.h>
#include <sys/stat.h>

#include <curl/curl.h>
//这个函数为 CURLOPT_HEADERFUNCTION 参数构造
/* 从 http 头部获取文件 size */
size_t getcontentlengthfunc(void *ptr, size_t size, size_t nmemb, void *stream) 
{
    int r;
    long len = 0;

    /* _snscanf() is Win32 specific */
    // r = _snscanf(ptr, size * nmemb, "Content-Length: %ld\n", &len);

    //字符串解析函数
    r = sscanf(ptr, "Content-Length: %ld\n", &len);
    if (r) /* Microsoft: we don't read the specs */
    {
        *((long *) stream) = len;
    }
    return size * nmemb;
}
 
/* 保存下载文件 */
size_t wirtefunc(void *ptr, size_t size, size_t nmemb, void *stream)
{
    //写进文件中
    return fwrite(ptr, size, nmemb, stream);
}
 
/* 读取上传文件 */
size_t readfunc(void *ptr, size_t size, size_t nmemb, void *stream)
{
    FILE *f = stream;
    size_t n;

    //打开文件出错
    if (ferror(f))
    {
        return CURL_READFUNC_ABORT;
    }
    //读文件
    n = fread(ptr, size, nmemb, f) * size;
 
    return n;
}
 
/* 下载或者上传文件函数 */
int download(CURL *curlhandle, const char * remotepath, const char * localpath, long timeout, long tries)
{
    FILE *f;
    curl_off_t local_file_len = -1;
    long filesize = 0;

    CURLcode r = CURLE_GOT_NOTHING;
    int c;
    struct stat file_info;
    int use_resume = 0;

    /* 得到本地文件大小 */
    //if(access(localpath,F_OK) == 0)
    if(stat(localpath, &file_info) == 0) 
    {
        local_file_len =  file_info.st_size;
        use_resume  = 1;
    }

    //采用追加方式打开文件，便于实现文件断点续传工作
    f = fopen(localpath, "ab+"); 
    if (f == NULL) {
        perror(NULL);
        return 0;
    }
 
    //curl_easy_setopt(curlhandle, CURLOPT_UPLOAD, 1L);

    //设置 URL 值
    curl_easy_setopt(curlhandle, CURLOPT_URL, remotepath);
    //设置连接超时，单位秒
    curl_easy_setopt(curlhandle, CURLOPT_CONNECTTIMEOUT, timeout);
    //设置 http 头部处理函数
    curl_easy_setopt(curlhandle, CURLOPT_HEADERFUNCTION, getcontentlengthfunc);
    //设置 http 头部的文件大小数据
    curl_easy_setopt(curlhandle, CURLOPT_HEADERDATA, &filesize);
    //设置文件续传的位置给 libcurl
    curl_easy_setopt(curlhandle, CURLOPT_RESUME_FROM_LARGE, use_resume?local_file_len:0);
    //将主体数据写入到文件中
    curl_easy_setopt(curlhandle, CURLOPT_WRITEDATA, f);
    //调用写数据函数
    curl_easy_setopt(curlhandle, CURLOPT_WRITEFUNCTION, wirtefunc);
 
    //curl_easy_setopt(curlhandle, CURLOPT_READFUNCTION, readfunc);
    //curl_easy_setopt(curlhandle, CURLOPT_READDATA, f);

    //不会 PHP 为 CURL 传输显示一个进程条，设置这个选项为一个非零值
    curl_easy_setopt(curlhandle, CURLOPT_NOPROGRESS, 1L);
    //想 CURL 报告每一件意外的事情，设置这个选项为一个非零值
    curl_easy_setopt(curlhandle, CURLOPT_VERBOSE, 1L);

    //执行
    r = curl_easy_perform(curlhandle);

    //关闭文件
    fclose(f);

    //执行成功，返回 1
    if (r == CURLE_OK)
        return 1;
    //执行失败，返回 0
    else
    {
        fprintf(stderr, "%s\n", curl_easy_strerror(r));
        return 0;
    }
}
 
int main(int c, char **argv) {

    CURL *curlhandle = NULL;
    //初始化所有的可能的调用
    curl_global_init(CURL_GLOBAL_ALL);
    //初始化 CURL
    curlhandle = curl_easy_init();
 
    //download(curlhandle, "ftp://user:pass@host/path/file", "C:\\file", 0, 3);
    download(curlhandle , "http://software.sky-union.cn/index.asp", "/home/zcj/code/index.asp", 1, 3);
    //清除缓存
    curl_easy_cleanup(curlhandle);
    curl_global_cleanup();
 
    return 0;
}

编译运行

gcc http4.c -o http4 –lcurl
./http4

在这里插入图片描述

六、参考

①C++ 用libcurl库进行http通讯网络编程

浮空花园
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ios libcurl库的简单使用
03-15
iOS开发 libcurl库的简单使用
libcurl安卓通信库支持https
08-28
开源通信库openssl，主要用于安卓的底层通信，支持https
Lua 使用 —— IO 操作
最新发布
猛猛的小盆友的博客
08-06 1330
Lua 语言是以一个脚本存在，所以他自身不会提供太多和外部交互的机制。需要交互则由宿主提供或是由外部库。接下来分享下如何使用以 iso c 作为宿主，进行标准库的 io 操作。Github传送门(如果对你有所帮助或喜欢的话，赏个star吧，码字不易，请多多支持)本章相关代码传送门公众号搜索 “江澎涌” 可以更快的获取到后续的更新文章。
利用libcurl库进行http通讯网络
Harriet的博客
12-05 617
一、了解libcurl libcurl是什么 libcurl是一个跨平台的网络协议库，支持http, https, ftp, gopher, telnet, dict, file, ldap 协议。libcurl同样支持HTTPS证书授权，HTTP POST, HTTP PUT, FTP 上传, HTTP基本表单上传，代理，cookies,用户认证。 libcurl基本函数 ①CURLcode curl_global_init(long flags) 这个函数只能用一次。 参数：flags CUR
io.write()和print()函数的区别
hqzxsc2006的专栏
02-28 1829
1、io.write函数 io.write(h,e,l,l,o) io.write(h..e..l..l..o) 参数间用逗号隔开，或者用“..”连接，实现的功能一样。 不过使用逗号分隔的，其参数不能是 nil， 否则报错， 像这样：(lua: hello.lua:4: bad argument #4 to 'write' (string expected, got nil) 使用“
Linux文件I/O编程（二）
hello
10-18 420
目录 实现cp指令 修改文件某字段内容 写一个整数到文件 写结构体数组到文件 标准C库文件I/O函数 标准C库函数（fopen、fwrite、fread、fseek、fclose） 实现cp指令 文件名通过参数传入，打开文件 —>读取内容到缓冲区—>缓冲区内容写入目标文件。 #include <stdio.h> #include <string.h> #include <stdlib.h> #include <sys/types.h.
python文件读写小结
JHON07的博客
01-04 1848
读文件 打开一个文件用open()方法(open()返回一个文件对象，它是可迭代的)： >>> f = open('test.txt', 'r') r表示是文本文件，rb是二进制文件。（这个mode参数默认值就是r） 如果文件不存在，open()函数就会抛出一个IOError的错误，并且给出错误码和详细的信息告诉你文件不存在： >>> f=open('test.t
Lua io.write() 对比 print 函数， 简单 I/O 模式
热门推荐
zhangxaochen的专栏
10-18 2万+
原文链接：http://blog.csdn.net/zhangxaochen/article/details/8086647 1. 先说 io.write() vs. print(), 举例如下：看这里： http://is.gd/VoBVUJ io.write("sin(3)= ", math.sin(3), '\n') ----- 输出 sin(3)= 0.14112000805987
lua文件读写
dejz8829的专栏
08-14 152
lua里的文件读写模型来自C语言，分为完整模型（和C一样）、简单模型。 1、简单模型 io.input([file]) 设置默认的输入文件，file为文件名（此时会以文本读入）或文件句柄（可以理解为把柄，有了把柄就可以找到文件），返回文件句柄。 io.output([file])设置默认的输出文件，参数意义同上。 io.close([file])关闭文件，不带参数关闭默认...
io.write("\27[2J")
青子的专栏
05-04 626
Programming in Lua 第六章 More About Function 开头有一个例子。它在终端屏幕上输出一个用*号组成的正弦曲线： function eraseTerminal() io.write("\27[2J") end -- writes an `*' at column `x' , row `y' function mark (x,y) io.write(strin
mac下编译libcurl.a库供ios使用
01-27
mac命令行下全自动编译libcurl.a库(support SSL)供ios开发用！zip包含ios-build-libcurl.sh、ios-build-openSSL.sh、Readme.txt三个文件
Windows下的libcurl库编译.docx
06-02
下的libcurl库编译方式介绍，Word文档形式总结，经过实践验。
linux下编译libcurl库支持https
12-15
linux环境下编译移植libcurl库支持https帮助文档，可查看当前编译的功能是否成功
windows下libcurl库
05-09
自己整理的libcurl库，只含有代码和vs-proj，vs为2015版本位7.26
【网络通信】使用WireShark抓包分析TCP协议
weixin_43704348的博客
12-05 1659
目录一、实验目的：二、TCP协议解析三、抓包分析三次握手连接四、抓包分析四次握手断开五、参考 一、实验目的： 以“金庸梦“游戏的客户端连接服务器（10.1.230.41）、断开服务器为例，用wireshark抓包分析TCP协议的三次握手连接、四次握手断开，与计算机网络原理进行验证。 游戏客户端详见C#实现网游客户端与服务器的连接 二、TCP协议解析 1.连接建立 三次握手连接 三次握手过程分析： （1）首先A向B发出连接请求报文段，这时首部中的同步位SYN=1。TCP规定，SYN报文段不能携带数据。
【网络通信】Windows API程序设计入门（一个简单的窗口）
weixin_43704348的博客
09-26 1221
目的 了解 windows操作系统应用程序开发的基本概念，win32 API函数、消息与事件驱动； 掌握WinMain函数的基本框架，窗口定义、窗口创建、消息循环及窗口过程函数; 定义 WinMain 函数 1.设计窗口类 WNDCLASS win; //窗口类 win.cbClsExtra = 0; //类的附加信息 win.cbWndExtra = 0; //窗口附加信息 win.hbrBackground = CreateSolidBrush(RGB(255,255,255)); //白色
【网络通信】Fiddler抓包HTTPS网站的TCP连接过程
weixin_43704348的博客
12-05 1197
1.Fiddler配置 Fiddler官网地址：https://www.telerik.com/download/fiddler 安装完成后打开Fiddler，弹出的界面点No。 Tools中打开Options 然后在HTTPS中进行以下操作 信任证书一直点是就行 2.抓取HTTPS包 Edit→Remove→All Sessions清除所有记录 清除记录后用浏览器访问www.baidu.com 下面就是Fiddler抓取的HTTPS包 随便打开一个图片文件 3.分析 Header 标签—
【网络通信】学生成绩管理系统（基于JSP/MySQL环境搭建）
weixin_43704348的博客
01-11 1042
目录一、实验准备 一、实验准备 实验目的： 首先在Mysql中创建相应的学生成绩表，然后基于 JSP+Mysql 做一个简单的学生成绩查询web系统。下面两个博客作为参考，作者写得很清晰，也有源代码，只需按照说明搭建软件环境和数据库，把代码编译调试通过。 1、学生成绩管理系统3.0(JSP+Servlet+MySQL) 代码： https://github.com/G-lory/StudentAchievementManagementSystem 2、基于JSP实现的学生成绩管理系统 实验工具 JDK
【网络通信】C#实现网游客户端与服务器的连接
weixin_43704348的博客
11-19 973
目录一、 目的： 编写一个网游客户端，游戏服务器的校园内网IP地址为 10.160.52.106，端口为3900，采用TCP连接。 连接成功后，可以将服务器发来的消息不停地显示在 listbox 中 客户端要发给服务器的数据，通过 textbox输入 或者点击button 能够播放背景音乐 每隔30秒，变换一次游戏背景图片 一、 ...
UBUNTU libcurl 静态库下载
06-04
你可以通过以下步骤下载 Ubuntu 的 libcurl 静态库： 1. 打开终端，输入以下命令安装 libcurl-dev 包： ``` sudo apt-get update sudo apt-get install libcurl4-openssl-dev ``` 2. 安装完成后，在终端中输入以下命令查找 libcurl.a 文件的位置： ``` sudo find / -name "libcurl.a" ``` 这将会在系统中查找所有名为 libcurl.a 的文件，并输出它们的位置。 3. 一旦你找到了 libcurl.a 文件，就可以将其静态链接到你的程序中了。 例如，在编译时，你可以使用以下命令将 libcurl.a 静态链接到你的程序中： ``` gcc -o myprogram myprogram.c -lcurl ``` 这将会编译你的程序并将 libcurl.a 静态链接到其中。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值