FastDFS是什么
FastDFS是一个开源的轻量级分布式文件系统,
它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。
特别适合以文件为载体的在线服务,如相册网站、视频网站等等。
FastDFS为互联网量身定制,充分考虑了冗余备份、负载均衡、在线扩容等机制,并注重高可用、高性能等指标,使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务
FastDFS 作用
适合用来存储用户图片、视频、文档等文件。
出于简洁考虑,FastDFS没有对文件做分块存储,因此不太适合分布式计算场景
FastDFS架构设计
Tracker server:追踪服务器,负责管理文件存储和同步,可以有多台,客户端和Storage server主动连接Tracker server。
Storage server:存储服务器,负责文件存储和同步,可以有多台,连接Tracker server和文件服务器,启动一个单独的线程来完成对一台Tracker server的连接和定时报告。
Client:客户端,连接Tracker server和文件服务器,通过API实现文件的上传和下载。
在FastDFS中,Tracker server之间相互独立,不存在直接联系。
客户端和Storage server主动连接Tracker server。
Storage server主动向Tracker server报告其状态信息,包括磁盘剩余空间、文件同步状况、文件上传下载次数等统计信息。
Storage server会连接集群中所有的Tracker server,向他们报告自己的状态。
FastDFS优缺点
优点
适合中小文件存储(建议范围:4KB<file_size<500MB)。
主备Tracker服务,增强系统的可用性。
系统不需要支持POSIX,这样的话就降低了系统的复杂度,使得处理的速度会更高。
支持主从文件,支持自定义扩展名。
支持在线扩容机制,增强了系统的可扩展性。
实现了软RAID,增强了系统的并发处理能力和数据容错恢复能力
缺点
直接按文件存储,可直接读取文件内容,缺乏文件安全性。
通过API下载,存在单点的性能瓶颈。
不支持断点续传,对大文件将是噩梦。
同步机制不支持文件正确性校验,降低了系统的可用性。
不支持POSIX通用接口访问,通用性比较的低。
对跨公网的文件同步,存在着比较大的延迟,需要应用做相应的容错策略