-
fastdfs介绍
FastDFS是一个以C语言开发的开源轻量级分布式文件系统,由阿里巴巴开发并开源。它对文件进行管理,功能包括:文件存储、文件同步、文件访问(上传、下载)等。解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务,如相册网站、视频网站等等。 -
优点
FastDFS作为一个分布式服务器,对轻量级、横向扩展、容灾备份、高可用、高性能、负载均衡都有着充分的考虑 -
组成
FastDFS由跟踪服务器(Tracker Server)、存储服务器(Storage Server)和客户端(Client)构成
跟踪器(Tracker ) 主要做调度工作,类似微服务注册中心,在内存中记录集群存储节点的storage的状态信息,是客户端和服务端存储节点storage的枢纽,因为相关信息全部在内存中,每个Storage在启动后会连接Tracker,告知自己所属的group等信息,并周期性发送心跳,TrackerServer的性能非常高,假设我们有上百个Storage节点,我们只需要3台左右的Tracker就足够了。
存储节点(Storage) 用于存储文件,包括文件和文件属性(metaData)都保存到服务器磁盘上,完成文件管理的所有功能:文件存储、文件同步和文件访问等。Storage以group为组织单位,一个group内可以包含多台Storage机器,数据互为备份,总存储空间以group内容量最小的storage为准(木桶),所以建议一个group内的机器存储空间大小应该尽量相同,以免造成空间的浪费。Storage在第一次启动时,会在每一个存储目录里创建二级目录,共计256 * 256个目录,我们上传的文件会以Hash的方式被路由到其中某个子目录下。 -
文件上传下载流程
文件上传
文件下载
-
为什么选用docker安装fastdfs
个人认为的优点有以下几个,
1)简化配置
2)应用隔离
3)能快速部署 -
docker镜像选择
这里我们选择的是集成好了Tracker和Storage的单机版镜像qbanxiaoli/fastdfs
docker pull qbanxiaoli/fastdfs
- 启动
docker run -d --restart=always \
--privileged=true \
--net=host \
--name=myfastdfs \
-e IP=172.18.0.1 \
-e WEB_PORT=8098 \
-v $PWD/fdfs:/var/local/fdfs \
qbanxiaoli/fastdfs
参数解释:
–restart=always:当docker服务启动时候,fastdfs容器会自动启动
–privileged=true:使该容器拥有真正的root权限
–net=host:容器就和宿主机共用网络,不需要做宿主机和容器的端口映射
-e:-e和–env设置的环境变量和服务器执行export含义相同,后面的ip为docker网卡ip,WEB_PORT为文件上传的端口
-v:挂载容器的/var/local/fdfs目录到本地的/fdfs
- 测试文件上传
进入容器
docker exec -it myfastdfs /bin/bash
创建测试文件
echo "hello word" >test.txt
测试上传
bash-5.0# /usr/bin/fdfs_upload_file /etc/fdfs/client.conf test.txt
group1/M00/00/00/rBIAAV9v7oGAdLd1AAAACxjRz44232.txt
如上就是服务器返回的文件路径
- 测试访问
可以直接在服务器curl查看
[root@iz2ze7wcj55cdtojxd395nz ~]# curl localhost:8098/group1/M00/00/00/rBIAAV9v7oGAdLd1AAAACxjRz44232.txt
hello word
[root@iz2ze7wcj55cdtojxd395nz ~]#
也可以配置nginx,通过转发后,在浏览器查看
nginx新加如下配置
浏览器测试访问
如图单机版的fastdfs就搭建成功了