文件和参数一起上传_自己动手实现分布式文件系统easy-dfs

业余时间基于golang,参考fastdfs,实现了一个简单的分布式文件管理系统。

项目地址:https://github.com/smally84/easy-dfs

项目说明

本项目参考fastdfs逻辑进行简单实现,主要功能包括:

  • 文件上传
  • 文件删除
  • 文件下载
  • 文件多副本同步保存和删除
  • tracker自动容量均衡到不同的存储组

使用说明

  • 1.clone源代码,编译出二进制文件
cd cmdgo build main.go -o dfs./dfs
  • 2.配置文件 将 configs/dsf.yml放到dfs可执行文件目录
server_type: "storage"#http_porthttp_port: 9000#默认语言default_lang: zh_cn#跟踪服务器的配置tracker:  node_id: 1# 存储服务器的配置    storage:  #http_scheme  http_scheme: http  #存储服务所属的group  group: group1   #文件大小限制,单位字节  file_size_limit: 100000  #存储目录  storage_path: ./  #跟踪服务器,可以有多个  tracker:     - http://127.0.0.1:9000

服务的类型:用server_type来定义。 最小系统,要配置一个tracker,一个storage

接口说明

  • 上传api: /uploadmethod: post参数:file
  • 下载api: /完整文件路径method: get
  • 删除api: /deletemethod: post参数: file_name(注意为完整路径)

项目工具

  • gin,高效的golang web框架
  • leveldb,基于golang的kv数据库

拓扑图

662b67cedd565e841527e6f3a256f8ed.png

单集群

2f38868379a2cd585c1b94a39a1569bd.png

多集群

85115fa855dcd6d52537e76fa3d1d304.png

tracker服务器定时任务

e65ae27a893d89e011b593ed8d82e2d8.png

上传流程

业余时间还会继续完善该项目,欢迎一起学习交流!

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值