文件分块上传客户端实现

UDP协议下文件分块上传实现详解

最新推荐文章于 2024-08-28 22:15:00 发布

原创

最新推荐文章于 2024-08-28 22:15:00 发布 · 2.2k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#chunk #sha1 #udp

该博客探讨了如何在UDP协议中实现文件分块上传。通过将文件内容分成固定大小的块，每个块作为独立的UDP数据报进行传输。数据报包含包头，标明块号、块长度及使用SHA1生成的块指纹，确保接收端能准确无误地重组文件。

首先对文件按内容分块（有块大小的约束），然后对于每个chunk构造单独的一个UDP 数据报进行传输，在应用层的开始是自定义的包头，有块号，块长度，块指纹等元数据信息，这些信息便于接收端能够按序正确接收。

/*--vonzhou
 ---this project is to upload file after chunking using 
    rabin fingerprint, here use UDP so that every packet nodelay.
    but we need to ensure the reliability.

*/

#include "global.h"

#define SERV_PORT 2500

typedef struct {
        unsigned char fp[20];
        int chunk_id;
        short flags;
        short chunk_len; // The max is 32767 enough
        char data[MAX_CHUNK_SIZE];
}TransferUnit;

// some flags for this chunk transfered.
enum{
        CHUNK_NEED_DEDU = 0x0001,   // need deduplication
        CHUNK_OTHER = 0x0002      // other