FastDFS简介 安装 配置

最新推荐文章于 2024-08-01 17:52:41 发布
最新推荐文章于 2024-08-01 17:52:41 发布
阅读量225 收藏
点赞数
分类专栏： linux 文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_58016905/article/details/118697282
版权
本文详细介绍了FastDFS的原理、组成部分、配置与安装流程，重点涉及文件存储、负载均衡与容量扩展。通过实例演示如何在Linux上安装并配置Tracker和Storage节点，以及集成Nginx实现文件上传服务。
摘要由CSDN通过智能技术生成

FastDFS

fastDFS是一个开源的轻量级分布式文件系统，它可以对文件进行管理操作，功能包括：

  • 文件存储
  • 文件自动同步
  • 文件的访问（文件的上传 下载等）

解决了大容量存储和负载均衡，特别适合以文件为载体的在线服务，例如相册网站，视频网站，商城等。

FastDFS是一个专门为互联网量身定制，充分考虑了冗余备份，负载均衡，扩容机制，并注重高可用，高性能等指标，使用FastDFS可以何用意搭建一套高性能的问及那服务集群提供服务。

FastDFS里面又两个核心角色：

  • 跟踪器(tracker)

    负责调度工作，在访问上负责负载均衡

  • 存储节点(storage)

    文件的储存，以及文件的管理操作，他提供文件的存储，同步，提取等接口

FastDFS会对文件的metaData进行管理，所谓的metaData是指文件的相关属性，以及key value的形式表示，如果我们上传的是一张图片，图片的宽，高等属性会被记录成 width=888,metaData也就是文件的属性列表包含多个键值对。

跟踪器以及存储节点都可以使一台或多台服务服务器组成，并且跟踪器和存储节点的服务增加贺下线都不会应该想服务的正常运行，其中跟踪器里面的所有服务都是对等的，可以根据服务器的压力岁时调整。

为了支持大容量数据的存储，存储节点采用分卷的组织方式，这存储系统由一个或者多个卷组成。卷与卷之间的系统是相互独立的，所有的卷中的我呢见容量累加就是整个存储系统的所有文件。每一个卷都可以由一台或多台服务器组成的，卷中的所有存储服务中文件都是相同的，卷中的多台服务实现了冗余备份及高可用的负载均衡。在卷中增加服务器的时候，所有文件都由系统自动完成同步，当文件同步完成后系统自动将服务器上线提供服务。

当存储空间不足时，可以动态的添加卷，来达到容量的扩充，FastDFS中文件的标识符由两部分组成

卷名+文件名

安装FastDFS

  1. 安装gcc和c++

    [root@Test1 ~]# yum install gcc
[root@Test1 ~]# yum install gcc -c++

  2. 解压V1.0.7(fastDFS运行的一些基本库)

    [root@Test1 local]# tar -zxvf V1.0.7.tar.gz

  3. 编译

    [root@Test1 ~]# cd libfastcommon-1.0.7
[root@Test1 libfastcommon-1.0.7]# ./make.sh

  4. 安装

    [root@Test1 libfastcommon-1.0.7]# ./make.sh install

  5. 简历软连接

    [root@Test1 libfastcommon-1.0.7]# ln -s /usr/lib64/libfastcommmon.so /usr/local/lib/libfafstcommon.so
[root@Test1 libfastcommon-1.0.7]# ln -s /usr/lib64/libfastcommmon.so /usr/lib/libfafstcommon.so
[root@Test1 libfastcommon-1.0.7]# ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
[root@Test1 libfastcommon-1.0.7]#  ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so

安装tracker

[root@Test1 local]# tar -zxvf V5.05.tar.gz 
[root@Test1 fastdfs-5.05]# ./make.sh
[root@Test1 fastdfs-5.05]# ./make.sh install
[root@Test1 fastdfs-5.05]# cd  /etc/fdfs/

# 拷贝一份相同的文件
[root@Test1 fdfs]# cp client.conf.sample  client.conf
[root@Test1 fdfs]# cp storage.conf.sample storage.conf
[root@Test1 fdfs]# cp tracker.conf.sample tracker.conf


[root@Test1 local]# cd /etc/fdfs
[root@Test1 fdfs]# ls
client.conf         storage.conf         tracker.conf
client.conf.sample  storage.conf.sample  tracker.conf.sample

# 修改配置文件
[root@Test1 fdfs]# vim tracker.conf
bind_addr=192.168.218.130
bese_path=/usrdata/fastdfs

[root@Test1 fdfs]# vim storage.conf
bind_addr=192.168.218.130
bese_path=/usrdata/fastdfs
store_path0=usrdata/fastdfs
tracker_server=192.168.218.130:22122

[root@Test1 fdfs]# vim client.conf
bese_path=/usrdata/fastdfs
tracker_server=192.168.218.130:22122

# 创建目录
[root@Test1 fdfs]# mkdir /usrdata
[root@Test1 fdfs]# mkdir /usrdata/fastdfs
# 启动服务
[root@Test1 fdfs]# fdfs_trackerd /etc/fdfs/tracker.conf
[root@Test1 fdfs]# fdfs_storaged /etc/fdfs/storage.conf

## 安装nginx
# 解压文件
[root@Test1 local]# tar -zxvf fastdfs-nginx-module_v1.16.tar.gz

# 切换目录
[root@Test1 local]# cd fastdfs-nginx-module/src/

# 修改配置文件
[root@Test1 src]# vim config 
CORE_INCS="$CORE_INCS/usr/include/fastdfs/usr/include/fastcommon/"

# 拷贝文件
[root@Test1 src]# cp mod_fastdfs.conf /etc/fdfs
# 编辑文件
[root@Test1 src]# vim /etc/fdfs/mod_fastdfs.conf 

base_path=/usrdata/fastdfs
tracker_server=192.168.218.130:22122
url_have_group_name = true
store_path0=/usrdata/fastdfs

# 建立软连接
[root@Test1 src]# ln -s /usrdata/fastdfs/data /usrdata/fastdfs/data/M00

# 拷贝http相关文件到 etc fdfs下
[root@Test1 src]# cp /usr/local/fastdfs-5.05/conf/http.conf  /etc/fdfs/
[root@Test1 src]# cp /usr/local/fastdfs-5.05/conf/mime.types  /etc/fdfs/

## ngin 安装
# 安装pcre
[root@Test1 local]# tar -zxvf pcre-8.36.tar.gz 
[root@Test1 local]# cd pcre-8.36
[root@Test1 pcre-8.36]# ./configure
[root@Test1 pcre-8.36]# make && make install

检查/lib64/下是否有 libpcre.so.1 如果没有建立软连接(有就不用执行这个命令)
[root@Test1 pcre-8.36]# ln -s /usr/local/lib/libpcre.so.1/lib64

# 安装zlib
[root@Test1 local]# tar -zxvf zlib-1.2.8.tar.gz
[root@Test1 local]# cd zlib-1.2.8
[root@Test1 zlib-1.2.8]# ./configure
[root@Test1 zlib-1.2.8]# make && make install

# 安装 openssl
[root@Test1 zlib-1.2.8]# yum install openssl openssl-devel


## 正式安装nginx
[root@Test1 local]# tar -zxvf nginx-1.8.0.tar.gz 
[root@Test1 local]# cd nginx-1.8.0
[root@Test1 nginx-1.8.0]# ./configure --prefix=/usr/local/ngin --add-module=/usr/local/fastdfs-nginx-module/src
[root@Test1 nginx-1.8.0]# make && make install

[root@Test1 local]# cd nginx/conf/
[root@Test1 conf]# vim nginx.conf

# 第2行
user  root;
# 在第47行插入以下内容
location /group1{
    root /usrdata/fastdfs/data;
    ngx_fastdfs_module;
}

# 安装killall
[root@Test1 conf]# yum install psmisc

# 启动nginx
[root@Test1 sbin]# ./nginx -c /usr/local/nginx/conf/nginx.conf

# 关闭命令
[root@Test1 sbin]# killall fdfs_trackerd
[root@Test1 sbin]# killall fdfs_storaged

# 启动命令
[root@Test1 sbin]# fdfs_trackerd /etc/fdfs/tracker.conf
[root@Test1 sbin]# fdfs_trackerd /etc/fdfs/storage.conf

# nginx相关命令
# 配置文件启动
[root@Test1 sbin]# ./nginx -c /usr/local/ngin/conf/nginx.conf
# 关闭命令
[root@Test1 sbin]# ./nginx -s quit
[root@Test1 sbin]# ./nginx -s stop

# 普通启动
[root@Test1 sbin]# service nginx restart

# 重新加载配置文件
[root@Test1 sbin]# ./nginx -s reload

# 查看
[root@Test1 sbin]# tail -f /usr/local/ngin/logs/error.log

# 测试上传
[root@Test1 sbin]# /usr/bin/fdfs_test /etc/fdfs/client.conf upload /1.png
未 来.
关注
专栏目录
FastDFS安装配置使用
qq_47711757的博客
12-30 706
FastDFS安装测试
FastDFS安装配置详解
Anbernet的专栏
07-04 4054
FastDFS简介FastDFS是一个开源的分布式文件系统，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等FastDFS服务端有两个角色：跟踪器（tracker）和存储节点（storage）。跟踪器主要做调度工作，在访问上起负载均衡的作用。存储节点存储文件，完成文件管理的所有功能：存储、同步...
FastDFS安装与配置
mr_zhang2014的博客
01-08 1012
简介：FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。 FastDFS为互联网量身定制，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件
本地搭建FastDFS文件系统结合内网穿透实现无公网IP远程管理内网文件
最新发布
小程的博客
08-01 443
本地搭建FastDFS文件系统
FastDFS安装配置手册
weixin_33724046的博客
05-24 215
FastDFS安装配置手册 目录 FastDFS安装配置手册... 1 一、 安装... 3 (一) 下载FastDFS安装包... 3 (二) 安装tracker. 3 1. 安装... 3 2. 配置... 5 3. 运行... 5 (三) 安装storage. 6 1. 安装...
fastDFS的安装和配置
qq_64011418的博客
08-11 1705
本文介绍fastDFS安装的全过程，包含文件安装、配置，出现的各种错误以及解决办法，无需动脑，各种bug，跟着本文砍瓜切菜，一键安装成功
FastDFS 的安装与配置
qq_32029605的博客
11-24 270
FastDFS 的安装与配置 参考文献 GitHub 项目主页 WIKI 环境准备 CentOS 7.x 两台，分别安装 tracker 与 storage 下载安装包： libfastcommon：FastDFS 分离出的一些公用函数包 FastDFS：FastDFS 本体 fastdfs-nginx-module：FastDFS 和 nginx 的关联模块 nginx：发布访问服务 安装步骤 (tracker 与 storage 都要执行) 安装基础环境 yum install -y
FastDFS安装以及配置
qq_24667243的博客
08-04 317
FastDFS安装 本篇博文着重讲解FastDFS的安装流程 若对FastDFS没有了解的请参考以下博文后再进行查看 技术点了解： Nginx(反向代理) tracker（负载均衡，查询你storage的IP和端口） storage(上传/下载文件，上传storage服务器信息) 博文： FASTDFS部署结构 FastDFS的架构及介绍 下载地址https://github.com/happ...
FastDFS所有安装配置文件
06-12
在这个压缩包文件中，包含了FastDFS安装和配置所需的全部文件，包括客户端配置、存储节点配置、追踪节点配置、Nginx集成配置等。 1. **client.conf**：这是FastDFS客户端的配置文件，主要用于设置客户端连接到...
FastDFS需要的配置需要软件和配置说明
07-10
在安装过程中，需要配置FastDFS的安装路径、数据存储路径等信息。 3. **配置FastDFS**：修改`/etc/fdfs`目录下的`tracker.conf`和`storage.conf`文件。`tracker.conf`是追踪服务器的配置，包含服务器的IP、端口等...
Redhat下Fastdfs安装配置及nginx模块安装配置文档.pdf
11-24
在本文档中，我们详细讨论了如何在Redhat操作系统上安装和配置FastDFS以及其Nginx模块。FastDFS是一个开源的高性能、轻量级的分布式文件系统，主要用于解决大容量存储和负载均衡的问题。以下是安装和配置FastDFS及其...
FastDFS安装与配置（一）
01-07
Linux系统上FastDFS安装与配置 1. 相关依赖配置 1.需要安装 gcc yum install gcc-c++ 2.安装libevent【FastDFS依赖libevent库】 yum -y install libevent 3.安装libfastcommon 1. 将libfastcommonV1.0.7.tar.gz...
fastdfs安装与配置
yk950309的博客
07-18 915
一、准备资源文件 如下所示三个压缩包 1、libfastcommon-1.0.42.tar.gz : FastDFS分离出来的一些公用函数包 2、fastdfs-6.04.tar.gz ：FastDFS本体 3、fastdfs-nginx-module-1.22.tar.gz ：与FastDFS相关联的 nginx 模块 二、安装相关依赖 1、因为 fastdfs 主要是C语言编写的，所以要安装 gcc yum install -y gcc gcc-c++ 2、安装 libevent yum
fastDFS的安装与配置
yutaixin的博客
02-17 296
fastDFS是开源的分布式文件存储系统 安装fastDFS依赖包 解压缩libfastcommon-master.zip 进入到libfastcommon-master的目录中 执行 ./make.sh #fastDFS是c语言写的，需要编译 执行 sudo ./make.sh install #安装 安装fasDFS 解压 fastdfs-master.zip 进入到fas...
FastDFS的安装与配置
亦翼的博客
08-15 358
文章目录安装配置启动 安装 # 安装gcc（编译时需要） yum -y install gcc gcc-c++ # 安装libevent（运行时需要） yum -y install libevent # 安装 libfastcommon # libfastcommon由FastDFS官方提供，包含了FastDFS运行所需要的一些基础库 # 上传 libfastcommon-master.zip 到 /opt 目录 # 解压 unzip libfastcommon.zip # 进入目录 cd libfas
FastDFS安装配置
云丶起的博客
06-12 778
FastDFS安装配置 一、简介 FastDFS是一个开源的轻量级分布式文件系统，由跟踪服务器（tracker server）、存储服务器（storage server）和客户端（client）三个部分组成，主要解决了海量数据存储问题，特别适合以中小文件（建议范围：4KB < file_size <500MB）为载体的在线服务。 二、安装 下载 https://github.com/...
fastDfs安装配置
weixin_42546729的博客
07-14 211
系统结构 1.因为底层是用c语言写的 首先下载c和c++的依赖 2.下载libevent yum -y install libevent 3.安装Tracker 3.Storage安装 测试 修改/etc/fdfs/client.conf Nginx结合fastdfs 测试类 public void textFileUpload() throws IOExcepti...
FastDFS 学习笔记
热门推荐
建伟博客
04-14 4万+
一、理论基础 FastDFS比较适合以中小文件为载体的在线服务，比如跟NGINX（APACHE）配合搭建图片服务器。 FastDFS是纯C语言实现，只支持Linux、FreeBSD等UNIX系统。 FastDFS的两个核心概念分别是：Tracker（跟踪器）、Storage（存储节点）         跟踪器Tracker主要做调度工作，相当于mvc中的contro
【FastDFS】FastDFS安装配置
程序媛一枚
09-03 410
先安装wget插件  yum -y install wget 1 FastDFS安装 1.1 下载FastDFS及相关 进入目录 cd/usr/local/ 下载fastdfs-5.08： wget https://codeload.github.com/happyfish100/fastdfs/zip/master 下载libfastcommon-
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值