linux socket 传输大文件解决方案

最新推荐文章于 2024-05-30 22:51:04 发布

置顶

海南之恋

最新推荐文章于 2024-05-30 22:51:04 发布

阅读量4.4k

点赞数 2

分类专栏：其他文章标签： linux socket 网络大文件传输源码

本文链接：https://blog.csdn.net/zhqianpeng/article/details/46489959

版权

思路： 1 服务器端把大文件分包每一个包大小建立一个socket（对应一个线程）进行传输

2 客户端对每一个包对应一个线程（同时对应一个socket）进行接收

3 在发送每一个包时包前要发送这个包的大小和对应的偏移量

4 在32位系统中要开启大文件的宏开关

5 利用pread pwrite 可以保证原子操作

废话不多说直接附上源码测试结果在局域网中能达到10Mb/s 若有问题欢迎直接交流 qq:294178101

/*
*******************

server.cpp 源代码 by 海南之恋
说明： 在32系统中运行  
*******************

*/
//#define _XOPEN_SOURCE 500  
#define _FILE_OFFSET_BITS 64  //开启大文件支持宏开关
//#define _LARGEFILE64_SOURCE
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#include <unistd.h>
#include <sys/types.h>
#include <sys/socket.h>
#include <sys/time.h>
#include <netinet/in.h>
#include <arpa/inet.h>
#include <pthread.h>
#include <fcntl.h>
#include <errno.h>
#include <sys/stat.h>



#define BUFFER_SIZE 4096
#define MAX_LISTEN 2048

typedef struct
{
	long long cur;
	int size;
	int sockfd;
}thread_data;
int filefd;
int file_block_size = 0;

void* sender(void* s)
{
    thread_data tdata = *((thread_data*)s);
    long long cur = tdata.cur;
    int size = tdata.size;
    int connfd = tdata.sockfd;
    char buf[BUFFER_SIZE] = {0};
    int read_count;
    char head_buf[29] = {0};
	snprintf(head_buf,29,"%016lld:%011d",cur,size);
    send(connfd, &head_buf, strlen(head_buf), 0);
	long long  read_size = 0;
    while (size)
    {    // (sizeof(buf) < size)?sizeof(buf):size 最后一次读取的时候 千万不要多读哦
        read_count = pread(filefd, buf,(sizeof(buf) < size)?sizeof(buf):size, cur + read_size);
        if (read_count < 0 && errno == EINTR)
        {                           //pread 是原子操作 这样的话可以多个线程同时读写一个文件
            puts("break by signal");
			continue;
        }
        else if (read_count == 0)
        {
            break;
        }
		else if(read_count < 0)
		{
			perror("pread"); exit(1);
		}
        send(connfd, buf, read_count, 0);
        size -= read_count;
        read_size += read_count;
    }
    close(connfd);
	printf("cur = %lld, end\n",tdata.cur);
    free(s); //要释放掉哦
	
    pthread_exit((void*)connfd);
}

int main(int a