Http是TCP的上层协议,HTTP通信是基于TCP连接的。
那么Http通信过程是怎么样的呢?
我们最常用的Http客户端就是浏览器,我们浏览网站的过程就是一个Http的通信过程。
1.输入网址,回车;浏览器会根据网址在DNS中查找对应的IP地址。
首先在DNS本地缓存表中查找,如果有则直接告诉IP地址。如果没有则要求网关DNS进行查找,如此下去,找到对应的IP后,则返回会给浏览器。
2.建立TCP连接
在HTTP工作开始之前,Web浏览器首先要通过网络与Web服务器建立连接,该连接是通过TCP来完成的。连接建立过程即著名的TCP三次握手,IP为上个步骤中获取的IP,端口一般为80。
3.发送HTTP消息
Web浏览器向Web服务器发送请求命令。
我在下面例子中使用了如下格式的HTTP消息:
GET / HTTP/1.1\r\nAccept: */*\r\nHost: %s:%d\r\nConnection: close\r\nAccept-Language: zh-cn\r\nUser-Agent: Chrome (compatible; MSIE 5.01; Windows NT 5.0)
4.Web服务器发送数据
服务器收到HTTP请求消息后,首先会发回一个ACK消息;
然后发送HTML数据包(经过分段的TCP数据包(TCP segment of PDU),根据数据流的大小分成几个段);
浏览器回复相应的ACK消息。
(通过抓包得到)
5.Web服务器发送应答码
待数据发送完毕后,服务器会发送应答码HTTP/1.1 200 OK。
浏览器会通过TCP PDU的序列号进行组包、解析HTML,在浏览器上显示。
6、Web服务器关闭TCP连接
在HTTP请求消息中当Connection: close,数据发送完毕后,TCP连接将关闭,
当Connection: keep-alive, 数据发送完毕后,TCP连接仍然保持打开状态,于是,浏览器可以继续通过相同的连接发送请求。
下面这个例子用Socket发送HTTP请求消息,接收返回的HTML数据写入文件中,可打开显示网页信息。
#include <sys/socket.h>
#include <arpa/inet.h>
#include <fcntl.h>
#include <fstream>
using namespace std;
#define BUFFER_SIZE 1024
//将接收到的数据保存到文件中(应答码也会保存 )
int write_html(char * buffer)
{
ofstream outPut;
outPut.open("./google.html", ios::app);
if(!outPut)
{
outPut.close();
return 0;
}
outPut.write(buffer, strlen(buffer));
outPut.close();
return 1;
}
int tcp_http()
{
int sock_fd;
char host_addr[16] ="74.125.236.212"; //IP对应的域名是www.google.se
int portNumber = 80;
struct sockaddr_in address;
address.sin_family = AF_INET;
address.sin_addr.s_addr = inet_addr(host_addr);
address.sin_port = htons(portNumber);
sock_fd = socket(AF_INET, SOCK_STREAM, 0);
//fcntl(sock_fd,F_SETFL,O_NONBLOCK); //客户端不能用非阻塞模式,否则connect失败,为什么呢?
int result = connect(sock_fd, (struct sockaddr *)&address, sizeof(sockaddr_in));
if(result == -1)
{
perror("client connect failed");
return(1);
}
char recvBuffer[BUFFER_SIZE];
char requestMsg[BUFFER_SIZE];
memset(recvBuffer,0,sizeof(recvBuffer));
memset(requestMsg,0,sizeof(recvBuffer));
sprintf(requestMsg, "GET / HTTP/1.1\r\nAccept: */*\r\nHost: %s:%d\r\nConnection: close\r\nAccept-Language: zh-cn\r\nUser-Agent: Chrome (compatible; MSIE 5.01; Windows NT 5.0)\r\n\r\n ", host_addr, portNumber);
//sprintf(requestMsg, "GET / HTTP/1.1\r\nAccept: */*\r\nHost: www.google.se\r\nConnection: close\r\nAccept-Language: zh-cn\r\nUser-Agent: Mozilla/4.0 (compatible; MSIE 5.01; Windows NT 5.0)\r\n\r\n ", host_addr, portNumber);
send(sock_fd, requestMsg, strlen(requestMsg)+1,0);
fd_set watchset;
FD_ZERO(&watchset);
FD_SET(sock_fd,&watchset);
struct timeval tv;
tv.tv_sec = 5;
tv.tv_usec = 0;
int retval = 0;
int iRecvStrLen = 0;
//int select(int maxfdp,fd_set *readfds,fd_set *writefds,fd_set *errorfds,struct tim *timeout);
//int maxfdp是一个整数值,是指集合中所有文件描述符的范围,即所有文件描述符的最大值加1,
while ((retval = select(static_cast<int>(sock_fd+1), &watchset, NULL, NULL, &tv)) > 0)
{ //当协议栈把数据接收完毕,recv函数就把sock_fd的接收缓冲中的数据copy到recvBuffer中(协议栈接收到的数据可能大于recvBuffer的长度,所以在这种情况下要调用几次recvBuffer函数才能把sock_fd的接收缓冲中的数据copy完。recv函数仅仅是copy数据,真正的接收数据是协议栈来完成的);
iRecvStrLen = recv(sock_fd, recvBuffer, 1024, 0 );
if (iRecvStrLen <= 0)
{
return 0;
}
write_html(recvBuffer);
memset(recvBuffer,0,sizeof(recvBuffer));
}
close(sock_fd);
return 1;
}
int main(int argc, char *argv[])
{
tcp_http();
return 1;
}