fastdfs:海量小文件存储的秘密

引言:

FastDFS 是由国人余庆所开发,其项目地址: https://github.com/happyfish100
FastDFS 主要的功能包括:文件存储,同步和访问,设计基于高可用和负载均衡。 FastDFS 非常适用于基 于文件服务的站点。

一.fastdfs的架构分析

FastDFS 跟踪服务器( tracker server 存储服务器( storage server 客户端( client 三个 部分组成,主要解决海量数据存储问题,特别适合以中小文件
(建议范围:4KB < file_size < 500MB )为载体的在线服务,例如图片分享和视频分享网站。

 1.同步机制

 FastDFS服务有三个角色:跟踪服务器(tracker server)、存储服务器(storage server)和客户端(client)

 FastDFS 的同步机制主要用于保证分布式文件存储系统中各存储节点(storage server)之间的数据一致性。

 ①主从同步:Fastdfs的存储组(group)内有多个storage节点,组内节点之间是对等关系(无主从), 但文件上传只会写入到一个storage节点,然后通过同步机制将文件同步到组内其他节点。

②文件同步流程:客户端上传文件,tracker server会选择一个storage节点作为源节

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值