Linux_网络项目_WEB服务器 HTTP请求的读取与解析

最新推荐文章于 2024-05-22 12:31:21 发布
最新推荐文章于 2024-05-22 12:31:21 发布
阅读量906 收藏 1
点赞数 2
分类专栏： # Linux(CentOS)-C++ HttpSever 文章标签： 网络 linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/dodamce/article/details/123958733
版权
本文详细介绍了如何从网络套接字接收HTTP报文，包括读取HTTP请求行、首部字段，根据Content-Length解析空行，并针对GET和POST方法处理正文。通过实例代码展示了HTTP请求的完整解析过程。
摘要由CSDN通过智能技术生成

文章紧跟web服务器处理HTTP框架之后

文章目录

1. HTTP报文报头与空行的读取

首先先按行读取HTTP报头。报头分为两部分，请求行与首部字段。

//已经存在套接字，线程通过套接字处理任务

#include<iostream>
#include<unistd.h>
#include<sys/types.h>
#include<sys/socket.h>
#include"Util.h"
#include<string>
#include<vector>
#include"Log.h"

//HTTP响应报文
class HttpResponse{
  public:
    std::string StatusLine_HTTP;//状态行
    std::vector<std::string>ResponHeads;//首部字段
    std::string ResponBlank;//空行
    std::string ResponBody;//正文
};

//HTTP请求报文
class HttpRequest{
  public:
    std::string RequestLine_HTTP;//请求行
    std::vector<std::string>RequestHeads;//首部字段
    std::string RequestBlank;//空行
    std::string RequestBody;//正文
};

class EndPoint{
  private:
    int sock;
    HttpRequest http_request;//http请求
    HttpResponse http_response;//http响应
  private:
    void GetHttpRequestLine(){//读请求行
      Util::ReadLine(sock,http_request.RequestLine_HTTP);//读取HTTP请求第一行
      http_request.RequestLine_HTTP.pop_back();
      ERRORLOG(INFO,http_request.RequestLine_HTTP);
    }
    void GetHttpRequstHeads(){//读取首部字段
      std::string line;
      while(true){
        Util::ReadLine(sock,line);
        if(line=="\n"){
          ERRORLOG(INFO,line);
          http_request.RequestBlank=line;
          break;
        }
        line.pop_back();//去掉每行的\n
        http_request.RequestHeads.push_back(line);
        ERRORLOG(INFO,line);
        line.clear();
      }
    }
  public:
    EndPoint(int _sock):sock(_sock){}

    void RecvQuest_HTTP(){//读取请求
      GetHttpRequestLine();
      GetHttpRequstHeads();
    }
    
    void AnalyQuest_HTTP(){//解析请求
    }

    void MakeRespon_HTTP(){//构建响应

    }

    void SendRespon_HTTP(){//发送响应

    }
    ~EndPoint(){}
};

运行结果如下图：
在这里插入图片描述

读取报文正文时需要对报头字段进行分析。

2. 解析HTTP请求行

首先解析HTTP请求行，需要将一个字符串分成三个字符串保存起来

这里使用stringstream函数格式化字符串，这个函数默认按照空格打散字符串
在这里插入图片描述
测试代码

#include<iostream>
#include<sstream>

int main(){
  std::string msg="Get /reference/sstream HTTP/1.1";
  std::string method;
  std::string url;
  std::string version;
  std::stringstream ss(msg);

  ss>>method>>url>>version;

  std::cout<<method<<"+"<<url<<"+"<<version<<std::endl;
  return 0;
}

在这里插入图片描述

//HTTP请求报文
class HttpRequest{
  public:
    std::string RequestLine_HTTP;//请求行
    std::vector<std::string>RequestHeads;//首部字段
    std::string RequestBlank;//空行
    std::string RequestBody;//正文

    //解析完请求行后的结果
    std::string Method;
    std::string URI;
    std::string Version;
};
//读取请求，分析请求，构建响应，基本IO通信，实现基本业务逻辑
class EndPoint{
  private:
    int sock;
    HttpRequest http_request;//http请求
    HttpResponse http_response;//http响应
  private:
    void AnalyQuestLine(){//解析请求行  方法 URL HTTP版本
      std::stringstream Str(http_request.RequestLine_HTTP);
      Str>>http_request.Method>>http_request.URI>>http_request.Version;
    }
  public:
    EndPoint(int _sock):sock(_sock){}
    
    void AnalyQuest_HTTP(){//解析请求
      AnalyQuestLine();
    }
    ~EndPoint(){}
};

3. 解析HTTP首部字段

首部字段解析成KeyValue模型，通过查找：（:+空格两个字符分开的）来把字符串分成两部分

//HTTP请求报文
class HttpRequest{
  public:
    std::string RequestLine_HTTP;//请求行
    std::vector<std::string>RequestHeads;//首部字段
    std::string RequestBlank;//空行
    std::string RequestBody;//正文

    //解析完请求报文后的结果
    std::string Method;
    std::string URI;
    std::string Version;

    //保存解析首部字段的map
    std::unordered_map<std::string,std::string>Head_KVS;
};

在工具类中新添加切分函数

class Util{
  public:
    static bool CutString(std::string&src,std::string& key,std::string&value,std::string gist){
    //根据gist(: )字符串切分HTTP首部字段，将切分的两个字符串放入到map中
      size_t pos=src.find(gist);
      if(pos!=std::string::npos){
        key=src.substr(0,pos);
        value=src.substr(pos+gist.size());//默认截取到字符串尾
        return true;
      }
      return false;
    }
};

//读取请求，分析请求，构建响应，基本IO通信，实现基本业务逻辑
class EndPoint{
  private:
    int sock;
    HttpRequest http_request;//http请求
    HttpResponse http_response;//http响应
  private:
  
    void AnalyQuestLine(){//解析请求行  方法 URL HTTP版本
      std::stringstream Str(http_request.RequestLine_HTTP);
      Str>>http_request.Method>>http_request.URI>>http_request.Version;
    }

    void AnalyuestHeadS(){
      std::string key;
      std::string value;
      for(auto&line:http_request.RequestHeads){
        if(Util::CutString(line,key,value,": ")){
          http_request.Head_KVS.insert(std::make_pair(key,value)); 
        }
        else{
          ERRORLOG(FATA,"AnalyuestHeadS error");
        }
      }
    }
  public:
    EndPoint(int _sock):sock(_sock){}
    
    void AnalyQuest_HTTP(){//解析请求
      AnalyQuestLine();
      AnalyuestHeadS();
    }

    ~EndPoint(){}
};

4.根据解析后的HTTP首部（Content-Length）读取HTTP空行

注意：此web服务器先考虑GET 和POST 方法
如果HTTP请求方法是GET方法，没有正文。
POST方法才有正文。

如果需要读取正文，正文长度在Content-Length中。

#pragma once 


//已经存在套接字，线程通过套接字处理任务

#include<iostream>
#include<unistd.h>
#include<sys/types.h>
#include<sys/socket.h>
#include"Util.h"
#include<string>
#include<vector>
#include"Log.h"

#include<sstream>
#include<unordered_map>
//HTTP请求报文
class HttpRequest{
  public:
    std::string RequestLine_HTTP;//请求行
    std::vector<std::string>RequestHeads;//首部字段
    std::string RequestBlank;//空行
    std::string RequestBody;//正文

    //解析完请求报文后的结果
    std::string Method;
    std::string URI;
    std::string Version;

    //保存解析首部字段的map
    std::unordered_map<std::string,std::string>Head_KVS;

    int Content_Lenth=0;
};


//读取请求，分析请求，构建响应，基本IO通信，实现基本业务逻辑
class EndPoint{
  private:
    int sock;
    HttpRequest http_request;//http请求
    HttpResponse http_response;//http响应
  private:
  
    bool HaveHttpBody(){
      //判断是否是GET方法，GET方法没有正文
      std::string& Method=http_request.Method;
      if(Method=="POST"){
        std::unordered_map<std::string,std::string>::iterator iter=http_request.Head_KVS.find("Content-Lenth");
        if(iter!=http_request.Head_KVS.end()){
          http_request.Content_Lenth=atoi(iter->second.c_str());
          return true;
        }
      }
      return false;
    }

    void GetHttpBody(){
      if(HaveHttpBody()){
        int Content_Lenth=http_request.Content_Lenth;
        char ch=0;
        while(Content_Lenth>0){
          ssize_t size=recv(sock,&ch,1,0);
          if(size>0){
            http_request.RequestBody.push_back(ch);
            Content_Lenth--;
          }
          else{
            break;
          }
        }
      }
    }
  public:
    EndPoint(int _sock):sock(_sock){}

    void RecvQuest_HTTP(){//读取请求
      GetHttpRequestLine();
      GetHttpRequstHeads();
    }

    void AnalyQuest_HTTP(){//解析请求
      AnalyQuestLine();
      AnalyuestHeadS();
      GetHttpBody();
    }

   
    ~EndPoint(){}
};

HTTP请求与解析完整代码

#pragma once 


//已经存在套接字，线程通过套接字处理任务

#include<iostream>
#include<unistd.h>
#include<sys/types.h>
#include<sys/socket.h>
#include"Util.h"
#include<string>
#include<vector>
#include"Log.h"

#include<sstream>
#include<unordered_map>

//HTTP响应报文
class HttpResponse{
  public:
    std::string StatusLine_HTTP;//状态行
    std::vector<std::string>ResponHeads;//首部字段
    std::string ResponBlank;//空行
    std::string ResponBody;//正文
};

//HTTP请求报文
class HttpRequest{
  public:
    std::string RequestLine_HTTP;//请求行
    std::vector<std::string>RequestHeads;//首部字段
    std::string RequestBlank;//空行
    std::string RequestBody;//正文

    //解析完请求报文后的结果
    std::string Method;
    std::string URI;
    std::string Version;

    //保存解析首部字段的map
    std::unordered_map<std::string,std::string>Head_KVS;

    int Content_Lenth=0;
};


//读取请求，分析请求，构建响应，基本IO通信，实现基本业务逻辑
class EndPoint{
  private:
    int sock;
    HttpRequest http_request;//http请求
    HttpResponse http_response;//http响应
  private:
    void GetHttpRequestLine(){//读请求行
      Util::ReadLine(sock,http_request.RequestLine_HTTP);//读取HTTP请求第一行
      http_request.RequestLine_HTTP.pop_back();
      ERRORLOG(INFO,http_request.RequestLine_HTTP);
    }

    void GetHttpRequstHeads(){//读取首部字段
      std::string line;
      while(true){
        Util::ReadLine(sock,line);
        if(line=="\n"){
          ERRORLOG(INFO,line);
          http_request.RequestBlank=line;
          break;
        }
        line.pop_back();//去掉每行的\n
        http_request.RequestHeads.push_back(line);
        ERRORLOG(INFO,line);
        line.clear();
      }
    }

    void AnalyQuestLine(){//解析请求行  方法 URL HTTP版本
      std::stringstream Str(http_request.RequestLine_HTTP);
      Str>>http_request.Method>>http_request.URI>>http_request.Version;
    }

    void AnalyuestHeadS(){
      std::string key;
      std::string value;
      for(auto&line:http_request.RequestHeads){
        if(Util::CutString(line,key,value,": ")){
          http_request.Head_KVS.insert(std::make_pair(key,value)); 
        }
        else{
          ERRORLOG(FATA,"AnalyuestHeadS error");
        }
      }
    }

    bool HaveHttpBody(){
      //判断是否是GET方法，GET方法没有正文
      std::string& Method=http_request.Method;
      if(Method=="POST"){
        std::unordered_map<std::string,std::string>::iterator iter=http_request.Head_KVS.find("Content-Lenth");
        if(iter!=http_request.Head_KVS.end()){
          http_request.Content_Lenth=atoi(iter->second.c_str());
          return true;
        }
      }
      return false;
    }

    void GetHttpBody(){
      if(HaveHttpBody()){
        int Content_Lenth=http_request.Content_Lenth;
        char ch=0;
        while(Content_Lenth>0){
          ssize_t size=recv(sock,&ch,1,0);
          if(size>0){
            http_request.RequestBody.push_back(ch);
            Content_Lenth--;
          }
          else{
            break;
          }
        }
      }
    }
  public:
    EndPoint(int _sock):sock(_sock){}

    void RecvQuest_HTTP(){//读取请求
      GetHttpRequestLine();
      GetHttpRequstHeads();
    }

    void AnalyQuest_HTTP(){//解析请求
      AnalyQuestLine();
      AnalyuestHeadS();
      GetHttpBody();
    }

    void MakeRespon_HTTP(){//构建响应

    }

    void SendRespon_HTTP(){//发送响应

    }

    ~EndPoint(){}
};

class Entry{//线程执行任务的入口
  public:
    static void*SolveQuest(void*_sock){
      ERRORLOG(INFO,"Processing Requests...");
      int sock=*(int*)_sock;
      delete(int*)_sock;
      //std::cout<<" Get a New Link: sock="<<sock<<std::endl;
      EndPoint* endpoint=new EndPoint(sock);
      endpoint->RecvQuest_HTTP();
      endpoint->AnalyQuest_HTTP();
      endpoint->MakeRespon_HTTP();
      endpoint->SendRespon_HTTP();
      delete endpoint;
      ERRORLOG(INFO,"Processing Request End!");
      return nullptr;
    }
};

Github项目代码位置
Gitee项目代码位置

NUC_Dodamce
关注
专栏目录
Linux系统运维命令：查看http的并发请求数及其TCP连接状态（使用netstat结合awk和sort，组合命令实现功能）
weixin_70208651的博客
02-25 2203
用户访问一个视频监控平台的web服务特别频繁，有大概2000个用户登录，要随机访问这个视频监控平台，这样对带宽的要求非常大。因此，他们需要查看到底有多少个http的并发请求，并想了解这些请求是不是活跃的。可以使用netstat结合awk、sort，组合命令来实现：netstat显示的TCP连接状态是底层的TCP连接状态，，然后通过分析TCP连接状态来间接了解HTTP的并发情况。
Linux查找对外发出的http请求来自哪个进程
yu980219的博客
05-29 1661
公司的生产环境linux，近日报警，在不断地向一个海外IP发出请求，有严重的安全问题，要求我们查一下。
Linux上的HTTP请求监控与日志分析
weixin_73725158的博客
05-09 533
另外，许多Web服务器（如Apache和Nginx）都提供了内置的日志记录功能，可以记录每个HTTP请求的详细信息，包括请求的IP地址、时间戳、请求的资源、HTTP方法、响应状态码等。管理员应确保只收集和分析必要的数据，并遵循最佳的安全实践来保护日志文件和数据。通过合理配置和使用这些工具，管理员可以确保Web服务的正常运行，优化性能，并及时发现和解决潜在问题。在Linux系统中，对HTTP请求进行监控和日志分析是确保Web服务正常运行、优化性能和识别潜在安全威胁的关键步骤。）以及专门的日志分析工具（如。
Linux下的HTTP请求与响应分析
最新发布
weixin_73725158的博客
05-22 478
在Linux环境下，对HTTP请求与响应进行深入分析是理解Web应用程序交互、优化性能以及排查问题的重要步骤。HTTP请求和响应是客户端（如Web浏览器）与服务器之间通信的基础，它们遵循HTTP协议，通过请求和响应的头部、主体等信息来传递数据。你可以使用各种工具和技术来捕获和分析HTTP请求与响应，如Linux下的。通过分析响应的状态码、头部和主体内容，你可以了解服务器的响应状态、返回的数据类型以及数据的具体内容。命令来发送一个HTTP请求，并查看详细的请求和响应信息。在Linux下，你可以使用。
HTTP的请求过程解析
泡^泡
03-01 1747
HTTP的请求过程解析
linux-web-sever.zip_c编写web_web服务器_嵌入式 web
09-23
在本压缩包“linux-web-server.zip”中，包含的是一个基于C语言编写的简单嵌入式Web服务器的相关资源。这个项目对于理解Web服务器的工作原理、C编程以及嵌入式系统开发具有很高的学习价值。下面我们将深入探讨这个...
HttpServer.rar_C++ web服务器_HTTPServer_c++ webserver_c++ webserv
07-13
【标题】"HttpServer.rar_C++ web服务器_HTTPServer_c++ webserver_c++ webserv" 涉及的核心知识点是C++实现的Web服务器，通常称为HTTPServer。在Web开发中，服务器端扮演着至关重要的角色，它们负责接收客户端...
cgi-0.7.zip_CGI linux_cgi_linux c cgi_linux 封装_web接口
09-22
总之，"cgi-0.7.zip"提供了一个方便的工具，帮助Linux开发者在C语言环境中轻松创建和部署CGI应用程序，实现与Web服务器的高效交互，构建动态和功能丰富的网站。通过深入理解CGI的工作原理和这个特定实现的特点，...
webserver1.0.4.rar_CGI linux_Linux cgi_cgi_linux server_linux 服务
07-14
在IT领域，Web服务器是互联网服务的核心组成部分，用于接收HTTP（超文本传输协议）请求并返回HTML页面或其他类型的网络资源。本项目名为"webserver1.0.4.rar"，是一个专为LINUX平台设计的小型Web服务器，特别强调了...
httpser.zip_Web 下载服务_linux网络编程
09-24
总的来说，"httpser.zip"项目是一个学习Linux网络编程和Web服务器实现的好起点。通过对"httpser.c"代码的研究，我们可以深入了解TCP/IP通信、HTTP协议、多线程/多路复用、文件I/O以及服务器的响应构建等核心概念。这...
Linux 网络编程用C处理HTTP请求
wwxy1995的博客
05-14 1507
请求的解析 在 HTTP 协议中规定请求的第一行是类似如下的格式: GET / HTTP/1.1 GET /img/wx_qrcode_258.jpg HTTP/1.1 很显然,它是使用空格分开的三个部分.method,uri和version, 这个是基本的 HTTP 请求格式.更多信息请参考相关的 HTTP 协议内容吧. 我们考虑的是怎么解析,首先我们需要从 TCP 连接流里面读取一行数据,我们也不用读太多, 后面功能完善的时候再继续读吧. 由于 TCP 是流协议,如果我们按...
WebServer代码解读（4）【解析HTTP请求】【解析请求行/请求头】【URI基础知识】
日月既往，不可复追
06-01 2184
文章目录1 - 解析HTTP请求1-1 URI基础知识1-2 HTTP请求消息1-3 解析请求行1-4 解析请求头2 - 下一步工作 1 - 解析HTTP请求 1-1 URI基础知识 首先了解一下什么是URI：统一资源标志符URI就是在某一规则下能把一个资源独一无二地标识出来，可以理解为一个用于标识某一互联网资源名称的字符串。 常见的URL（就是浏览器中输入的网址，比如http://www.163.com就是一个URL）就是URI的一个子集，URI能够定位网络上的各种资源，包含HTML文档、图像、视频、程
Linux上的Web和Http协议
YsDou的博客
10-04 249
目录 一、DNS和域名 二、域名 1、定义 2、域名空间结构（从右往左看） 3、域名注册 三、网页访问（HTTP/HTTPS） 1、网页基本 2、HTML 四、Web 1、Web概述 2、Web1.0 vs Web2.0 3、静态见面与动态员页面 ⑴静态页面定义 ⑵静态页面特点 ⑶动态页面 ⑷动态页面特点 五、HTTP协议概述 1、HTTP协议简介、版本 2、HTTP1. 0和HTTP1.1之间的区别 ⑴缓存处理 ⑵带宽优化及网络连接的使用 ⑶错误通知的管理 ⑷
高性能Linux服务器--解析HTTP请求报文
weixin_44446277的博客
10-11 389
解析HTTP请求报文
解析请求体_web容器是如何解析http报文的
weixin_39522103的博客
12-24 140
来源于公众号方丈的寺院 ，作者cnstonefang摘要作为服务端，web容器是如何解析http报文的呢？本文以jetty和undertow容器为例，来解析web容器是如何处理http报文的。http报文其实就是一定规则的字符串，那么解析它们，就是解析字符串，看看是否满足http协议约定的规则。start-line: 起始行,描述请求或响应的基本信息*( header-field CRLF ): ...
Linux下常用Web访问工具
热门推荐
终南的IT空间
08-25 2万+
 Linux下常用Web访问工具 作者：终南   li.zhongnan@hotmail.com> 在Linux下工作的时候，经常需要访问Web页面。Linux下有很多程序可以用来访问Web，有图形界面的，也有命令行的，还有基于命令行来模拟图形界面从而是你能看到页面布局情况的。当对使用的Linux系统环境不是很熟悉，特别是使用其他人安装好的系统的时候，可以试着运行以下的We
Linux基础——Web（一）http协议原理
Xiaofa_123的博客
06-15 341
http
Linux平台C简单解析Http报文
dujian2698的博客
09-19 528
版权声明：本文为CSDN博主「lichaofan2008」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。原文链接：https://blog.csdn.net/lichaofan2008/article/details/121990221。// 解析body 如果最后一行不是空行，说明有body数据。char *code;char *desc;// HttpResponse解析函数。// HttpResponse结构体。// 解析header。
（协议分析）通过抓包分析HTTP协议以及包中内容
zdzzdz123123的博客
02-27 2709
因为网络安全往往需要一门脚本语言的支持，不然只能用着别人的工具。因此决定从学习编写一只爬虫开始，来入门python掌握一门脚本语言，学习爬虫，当然与http协议离不了关系，因此先分析一下http的工作流程 HTTP协议 1.什么是HTTP http协议是超文本传输协议，它定义了浏览器和服务器之间的通信规则， ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

NUC_Dodamce

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值