【云备份】服务端热点管理&业务处理模块

最新推荐文章于 2024-08-19 18:41:12 发布

小鳄鱼爱吃薯片

最新推荐文章于 2024-08-19 18:41:12 发布

阅读量388

点赞数 8

分类专栏：云备份文章标签： c++ 服务器

本文链接：https://blog.csdn.net/zzxz8/article/details/134791144

版权

云备份专栏收录该内容

7 篇文章 0 订阅

订阅专栏

28. 服务端热点管理模块实现-热点管理实现思路

服务器端的热点文件管理是对上传的非热点文件进行压缩存储，节省磁盘空间。

而热点文件的判断在于上传的文件的最后一次访问时间是否在热点判断时间之内，比如如果一个文件一天都没有被访问过我们就认为这是一个非热点文件，其实就是当前系统时间，与文件最后一次访问时间之间的时间差是否在一天之内的判断。

而我们需要对上传的文件每隔一段时间进行热点检测，相当于遍历上传文件的存储文件夹，找出所有的文件，然后通过对逐个文件进行时间差的判断，来逐个进行热点处理。

基于这个思想，我们需要将上传的文件存储位置与压缩后压缩文件的存储位置分开。这样在遍历上传文件夹的时候不至于将压缩过的文件又进行非热点处理了。

关键点：

上传文件有自己的上传存储位置，非热点文件的压缩存储有自己的存储位置
遍历上传存储位置文件夹，获取所有文件信息。
获取每个文件最后一次访问时间，进而完成是否热点文件的判断。
对非热点文件进行压缩存储，删除原来的未压缩文件。

29. 服务端热点管理模块实现-热点管理类的设计

//因为数据管理是要在多个模块中访问的，因此将其作为全局数据定义，在此处声明使用即可
extern DataManager *_data;
class HotManager{
	private:
		std::string _back_dir;
    	std::string _pack_dir;
    	std::string _arc_suffix;
    	std::string _url_prefix;
    	time_t _hot_time;
    public:
    	HotManager();
    	bool HotJudge(const std::string &file);
    	bool RunModule();
};

30. 服务端业务处理模块实现-业务处理实现思路

云备份项目中，业务处理模块是针对客户端的业务请求进行处理，并最终给与响应。而整个过程中包含以下要实现的功能：

借助网络通信模块httplib库搭建http服务器与客户端进行网络通信
针对收到的请求进行对应的业务处理并进行响应（文件上传，列表查看，文件下载（包含断点续传））

31. 服务端业务处理模块实现-网络通信接口设计

业务处理模块要对客户端的请求进行处理，那么我们就需要提前定义好客户端与服务端的通信，明确客户端发送什么样的请求，服务端处理后应该给与什么样的响应，而这就是网络通信接口的设计。

HTTP文件上传：

POST /upload HTTP/1.1
Content-Length：11
Content-Type：multipart/form-data;boundary= ----WebKitFormBoundary+16字节随机字符
------WebKitFormBoundary
Content-Disposition：form-data;filename="a.txt"；
hello world
------WebKitFormBoundary--

HTTP/1.1 200 OK
Content-Length: 0

HTTP文件列表获取：

GET /list HTTP/1.1
Content-Length: 0

HTTP/1.1 200 OK
Content-Length: 
Content-Type: text/html

<html>
  <head>
    <meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />
  	<title>Page of Download</title>
  </head>
  <body>
  	<h1>Download</h1>
  	<table>
  	  <tr>
  	    <td><a href="/download/a.txt"> a.txt </a></td>
  	    <td align="right"> 1994-07-08 03:00 </td>
  	    <td align="right"> 27K </td>
  	  </tr>
  	</table>
  </body>
</html>

HTTP文件下载：

GET /download/a.txt http/1.1
Content-Length: 0

HTTP/1.1 200 OK
Content-Length: 100000
ETags: "filename-size-mtime一个能够唯一标识文件的数据"
Accept-Ranges: bytes

文件数据

HTTP断点续传：

GET /download/a.txt http/1.1
Content-Length: 0
If-Range: "文件唯一标识"
Range: bytes=89-999

HTTP/1.1 206 Partial Content
Content-Length: 
Content-Range: bytes 89-999/100000
Content-Type: application/octet-stream
ETag: "inode-size-mtime一个能够唯一标识文件的数据"
Accept-Ranges: bytes

对应文件从89到999字节的数据。

32. 服务端业务处理模块实现-业务处理类设计

//因为业务处理的回调函数没有传入参数的地方，因此无法直接访问外部的数据管理模块数据
//可以使用lamda表达式解决，但是所有的业务功能都要在一个函数内实现，于功能划分上模块不够清晰
//因此将数据管理模块的对象定义为全局数据,在这里声明一下，就可以在任意位置访问了
extern cloud::DataManager *_data;

class Service{
    private:
    	int _server_port;
    	std::string _server_ip;
    	std::string _url_prefix;
    	httplib::Server _srv;
    public:
    	static void Upload(const httplib::Request &req, httplib::Response &rsp);
    	static void List(const httplib::Request &req, httplib::Response &rsp);
    	static void Download(const httplib::Request &req,httplib::Response &rsp);
    public:
    	Service();
    	bool RunModule();
}

小鳄鱼爱吃薯片

关注

8
点赞
踩
9

收藏

觉得还不错? 一键收藏
0
评论
【云备份】服务端热点管理&业务处理模块

而热点文件的判断在于上传的文件的最后一次访问时间是否在热点判断时间之内，比如如果一个文件一天都没有被访问过我们就认为这是一个非热点文件，其实就是当前系统时间，与文件最后一次访问时间之间的时间差是否在一天之内的判断。而我们需要对上传的文件每隔一段时间进行热点检测，相当于遍历上传文件的存储文件夹，找出所有的文件，然后通过对逐个文件进行时间差的判断，来逐个进行热点处理。基于这个思想，我们需要将上传的文件存储位置与压缩后压缩文件的存储位置分开。服务器端的热点文件管理是对上传的非热点文件进行压缩存储，节省磁盘空间。
复制链接

扫一扫

专栏目录