使用libcurl库获取网页信息(C++ php)

这周要做一个小项目，需要获得学生的账户名密码后，去本校教务系统验证是否正确并且抓一个网页信息下来。
查网上时候，可以通过发送POST或GET请求来实现，然后尝试用POST先。
首先安装libcurl库

sudo yum install libcurl

安装好后之后代码中添加头文件curl/curl.h就可以使用curl的函数了。

当时需要访问的正方网页(222.24.62.120)需要验证码，但是有另一个网站222.24.162.120/default4.aspx 可以用来验证帐号密码是否正确，从这个网站上拿到Cookie然后带着Cookie去访问正方网站就可以进去了。

然后我们来看看进入网页发送的请求包内容。

这个是带着帐号密码访问该网站时发送的请求包，图中Request Headers是发送包头部信息，Form Data下面还有两个信息分别是帐号密码，它里面是发送包的数据部分，代码访问网站就是模拟这个过程，将这些信息手动加入，然后打包发出去。

过程中用到一共三个函数：

curl_slist_append();
curl_easy_init();
curl_easy_setopt();
curl_easy_perform();
curl_easy_cleanup();

1.curl_easy_init()

函数原型

CURL *curl_easy_init();

函数功能

初始化一个CURL指针，相应的末尾要清理这个指针。

2.curl_easy_setopt()

函数原型

CURLcode curl_easy_setopt(CURL *handle, CURLoption option, parameter);

函数功能

这个参数很重要，要通过它对访问过程做很多设置。基本都是通过第二个参数在设置，所以第二个参数牵扯到很多宏，下面列几个我用到的。

重要宏(option)

• CURLOPT_HTTPHEADER 用来设置HTTP头部字段，第三个参数是一个数组，包含了所有头部信息
• CURLOPT_COOKIEJAR 指定连接结束后保存Cookie信息的文件
• CURLOPT_COOKIEFILE 指定读取Cookie的文件
• CURLOPT_URL 设置要访问的URL
• CURLOPT_WRITEDATA 指定将网页信息写进去的文件
• CURLOPT_POSTFIELDS 全部数据使用HTTP协议中的POST操作来发送。第三个数据指定要发送发送数据。
• CURLOPT_RETURNTRANSFER 将curl_exec()获取的信息以文件流的形式返回，而不是直接输出。

3.curl_easy_perform()

函数原型

CURLcode curl_easy_perform( CURL *easy_handle);

该函数完成curl_easy_setopt指定的所指定的值，返回0意味一切ok，非0代表错误发生。主要错误码说明：
1.CURLE_OK
任务完成一切都好
2.CURLE_UNSUPPORTED_PROTOCOL
不支持的协议，由URL的头部指定
3.CURLE_COULDNT_CONNECT
不能连接到remote 主机或者代理
4.CURLE_REMOTE_ACCESS_DENIED
访问被拒绝
5.CURLE_HTTP_RETURNED_ERROR
Http返回错误
6.CURLE_READ_ERROR
读本地文件错误

1.curl_easy_cleanup()

函数原型

void curl_easy_cleanup(CURL *handle);

函数功能

结束licurl使用时，清理掉curl_easy_init的指针。

6.curl_slist_append()

函数原型

struct curl_slist *curl_slist_append(struct curl_slist *list, const char *string);

函数功能

追加字符串string到链表list尾,返回添加后的链表，在代码中用来将头部信息逐句添加到字符串中。

这一段便可访问到222.24.162.120/default4.aspx 的网站，然后获取到Cookie数据存入文件。

bool postUrl(const char *filename, std::string id, std::string passwd )
{
    CURL *curl;    
    CURLcode res;
    FILE *fp;
    std::string mess = "__VIEWSTATE=dDwxMTE4MjQwNDc1Ozs%2BYofaNxf5dpXqcC3ZAqYdKfPCdbw%3D&TextBox1=" 
        + id + "&TextBox2=" + passwd + "&RadioButtonList1=%D1%A7%C9%FA&Button1=+%B5%C7+%C2%BC+";