分布式文件系统FastDFS-安装配置

本文详细介绍了FastDFS分布式文件系统的安装配置过程,包括FastDFS的架构、上传下载流程、术语介绍以及安装步骤。FastDFS是一个轻量级的分布式文件系统,通过TrackerServer和StorageServer提供文件存储、同步和访问服务。安装过程涉及Tracker和Storage的配置、客户端配置、以及Nginx组件的安装,以实现HTTP访问存储文件。
摘要由CSDN通过智能技术生成

一、FastDFS简介

技术论坛: http://bbs.chinaunix.net/forum-240-1.html
资源地址: https://sourceforge.net/projects/fastdfs/
源码资源: https://github.com/happyfish100

FastDFS 是一个开源的轻量级分布式文件系统,它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。
FastDFS 服务端有两个角色:跟踪器(tracker)和存储节点(storage)。跟踪器主要做调度工作,在访问上起负载均衡的作用。storage采用了分卷(或分组)的组织方式。卷之间是相互独立的卷中的多台存储服务器起到了冗余备份和负载均衡的作用。FastDFS 中的文件标识分为两个部分:卷名和文件名,二者缺一不可。

1 架构图

图一

2 上传流程

图二
client 询问 tracker 上传到的 storage,不需要附加参数;
tracker 返回一台可用的 storage;
client 直接和 storage 通讯完成文件上传。

3 下载流程

图三
client 询问 tracker 下载文件的 storage,参数为文件标识(组名和文件名);
tracker 返回一台可用的 storage;
client 直接和 storage 通讯完成文件下载。

4 术语简介

TrackerServer:跟踪服务器,主要做调度工作,在访问上起负载均衡的作用。记录 storage server 的状态,是连接 Client 和 Storage server 的枢纽。
StorageServer:存储服务器,文件和 meta data 都保存到存储服务器上 。
group:组,也称为卷。同组内服务器上的文件是完全相同的 。
文件标识:包括两部分:组名和文件名(包含路径) 。
metadata:文件相关属性,键值对(KeyValuePair)方式,如:width=1024,heigth=768。

5 同步机制

同一组内的 storage server 之间是对等的,文件上传、删除等操作可以在任意一台storage server 上进行;文件同步只在同组内的 storage server 之间进行,采用 push 方式,即源服务器同步给目 标服务器;源头数据才需要同步,备份数据不需要再次同步,否则就构成环路了;上述第二条规则有个例外,就是新增加一台storage server时,由已有的一台storage server 将已有的所有数据(包括源头数据和备份数据)同步给该新增服务器。

6 FastDFS 运行时目录结构
6.1 TrackerServer 目录

图四

6.2 StorageServer 目录

图五

一、安装

准备两个 Linux 服务器。两个服务器分别作为 tracker 服务器(跟踪服务器)和 storage 服务器(存储服务器)。

  • Tracker 服务器 : 39.98.139.190
  • Storage 服务器 : 39.98.156.205
1、核心安装

TrackerServer 和 Storage Server 完全一致的安装。 安装 FastDFS 5.08 版本

1.1 安装 FastDFS 依赖

FastDFS 是 C 语言开发的应用。安装必须使用 make、cmake 和 gcc 编译器。

yum install -y make cmake gcc gcc-c++
1.2 解压 FastDFS 核心库

libfastcommon 是从 FastDFS 和 FastDHT 中提取出来的公共 C 函数库

cd /tmp
unzip libfastcommon-master.zip -d /usr/localfastdfs
1.3 进入解压后的目录
cd /usr/local/fastdfs/libfastcommon-master
1.4 编译安装

libfastcommon没有提供 make 命令安装文件。使用的是 shell 脚本执行编译和安装。 shell 脚本为 make.sh。
编译:

./make.sh

安装:

  • 2
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值