HTTP Connection 头（header）说明：keep-alive和closer的区别

1.前言

在http请求时，我们一般会在request header 或 response header 中看到”Connection:Keep-Alive”或 “Connection:close”，这里具体的含义是有关http 请求的是否保持长连接，即链接是否复用，每次请求是复用已建立好的请求，还是重新建立一个新的请求。
而在实际生产环境中，可能会受到ECS/VM 的连接数限制而会对该配置项进行选择调配。例如VM规格只能支持65535个链接，如果链接不复用，都是短连接的话，并发过高的情况下，会直接把VM的连接数打满导致出现问题等，下面来详细说明下这个配置项。

2.基本释义

Connection 头（header） 决定当前的事务完成后，是否会关闭网络连接。如果该值是“keep-alive”，网络连接就是持久的，不会关闭，使得对同一个服务器的请求可以继续在该连接上完成。
更加官方的说明可见：RFC 2616

https://tools.ietf.org/html/rfc2616#section-8

3. 详细说明

HTTP协议采用“请求-应答”模式，当使用普通模式，即非KeepAlive模式时，每个请求/应答客户和服务器都要新建一个连接，完成之后立即断开连接（HTTP协议为无连接的协议）；当使用Keep-Alive模式（又称持久连接、连接重用）时，Keep-Alive功能使客户端到服务器端的连接持续有效，当出现对服务器的后继请求时，Keep-Alive功能避免了建立或者重新建立连接。

3.1 短连接

所谓短连接，就是每次请求一个资源就建立连接，请求完成后连接立马关闭。每次请求都经过“创建tcp连接->请求资源->响应资源->释放连接”这样的过程

3.2 长连接

所谓长连接(persistent connection)，就是只建立一次连接，多次资源请求都复用该连接，完成后关闭。要请求一个页面上的十张图，只需要建立一次tcp连接，然后依次请求十张图，等待资源响应，释放连接。

3.3 并行连接

所谓并行连接(multiple connections)，其实就是并发的短连接。

具体client和server要从短连接到长连接最简单演变需要做如下改进:
client发出的HTTP请求头需要增加Connection:keep-alive字段
Web-Server端要能识别Connection:keep-alive字段，并且在http的response里指定Connection:keep-alive字段，告诉client，我能提供keep-alive服务，并且”应允"client我暂时不会关闭socket连接

在HTTP/1.0里，为了实现client到web-server能支持长连接，必须在HTTP请求头里显示指定

Connection:keep-alive

在HTTP/1.1里，就默认是开启了keep-alive，要关闭keep-alive需要在HTTP请求头里显示指定

Connection:close

现在大多数浏览器都默认是使用HTTP/1.1，所以keep-alive都是默认打开的。一旦client和server达成协议，那么长连接就建立好了。

在http1.1中request和reponse header中都有可能出现一个connection头字段，此header的含义是当client和server通信时对于长链接如何进行处理。

在http1.1中，client和server都是默认对方支持长链接的， 如果client使用http1.1协议，但又不希望使用长链接，则需要在header中指明connection的值为close；如果server方也不想支持长链接，则在response中也需要明确说明connection的值为close.

不论request还是response的header中包含了值为close的connection，都表明当前正在使用的tcp链接在请求处理完毕后会被断掉。以后client再进行新的请求时就必须创建新的tcp链接了。 HTTP Connection的 close设置允许客户端或服务器中任何一方关闭底层的连接双方都会要求在处理请求后关闭它们的TCP连接。

4. Nginx keep-alive配置

具体到Nginx的HTTP层的keepalive配置有

keepalive_timeout

    Syntax: keepalive_timeout timeout [header_timeout];
    Default:    keepalive_timeout 75s;
    Context:    http, server, location

The first parameter sets a timeout during which a keep-alive client connection will stay open on the server side. The zero value disables keep-alive client connections. The optional second parameter sets a value in the “Keep-Alive: timeout=time” response header field. Two parameters may differ.

keepalive_requests

    Syntax: keepalive_requests number;
    Default:    keepalive_requests 100;
    Context:    http, server, location

Sets the maximum number of requests that can be served through one keep-alive connection. After the maximum number of requests are made, the connection is closed.
可以看看Nginx的关于 keepalive_timeout 是实现

./src/http/ngx_http_request.c

static void
ngx_http_finalize_connection(ngx_http_request_t *r){
...
    if (!ngx_terminate
         && !ngx_exiting
         && r->keepalive
         && clcf->keepalive_timeout > 0)
    {
        ngx_http_set_keepalive(r);
        return;
    }
...
}


static void
ngx_http_set_keepalive(ngx_http_request_t *r){

    //如果发现是pipeline请求，判断条件是缓存区里有N和N+1个请求同时存在
    if (b->pos < b->last) {

        /* the pipelined request */
    }
    // 本次请求已经结束，开始释放request对象资源
    r->keepalive = 0;

    ngx_http_free_request(r, 0);

    c->data = hc;

    // 如果尝试读取keep-alive的socket返回值不对，可能是客户端close了。那么就关闭socket
    if (ngx_handle_read_event(rev, 0) != NGX_OK) {
        ngx_http_close_connection(c);
        return;
    }

    //开始正式处理pipeline
    ...

    rev->handler = ngx_http_keepalive_handler;
    ...
    // 设置了一个定时器，触发时间是keepalive_timeout的设置
    ngx_add_timer(rev, clcf->keepalive_timeout);

    ...

}


static void
ngx_http_keepalive_handler(ngx_event_t *rev){

    // 发现超时则关闭socket
    if (rev->timedout || c->close) {
        ngx_http_close_connection(c);
        return;
    }

    // 读取keep-alive设置从socket
    n = c->recv(c, b->last, size);
    if (n == NGX_AGAIN) {
        if (ngx_handle_read_event(rev, 0) != NGX_OK) {
            ngx_http_close_connection(c);
            return;
        }
        ...
    }

    //此处尚有疑惑？
    ngx_reusable_connection(c, 0);

    c->data = ngx_http_create_request(c);
    // 删除定时器
    ngx_del_timer(rev);
    // 重新开始处理请求
    rev->handler = ngx_http_process_request_line;
    ngx_http_process_request_line(rev);
}

5. 相关优质文章

• requests.session()的用法
• Requsets库的基本使用
• requests.get()和requests.session.get()的区别与联系
• python requests timeout详解
• linux下安装nginx
• nginx 配置|禁止访问规则

参考资料

• http://nginx.org/en/docs/http/ngx_http_core_module.html