fastDFS搭建

最新推荐文章于 2024-01-16 00:58:03 发布
最新推荐文章于 2024-01-16 00:58:03 发布
阅读量230 收藏
点赞数
文章标签： fastdfs
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lucifer32149899/article/details/105769645
版权

下载地址

https://github.com/happyfish100/FastDFS

镜像

CentOS-7-x86_64-Minimal-1810.iso

测试服务器

Tracker Server：192.168.10.130
Storage Server1：192.168.10.141
Storage Server2：192.168.10.142

说明

名称说明
Centos7.x
LibfatscommonFastDFS分离出的一些公用函数包
FastDFSFastDFS本体
Fastdfs-nginx-moduleFastDFS和nginx的关联模块
Nginxnginx1.15.4

编译环境

yum install git gcc gcc-c++ make automake autoconf libtool pcre pcre-devel zlib zlib-devel openssl-devel wget vim -y

yum -y install net-tools #使用netstat查看端口需要

如果服务器未联网状态需要手动下载缺少的环境包并进行安装

路径

说明位置
所有安装包/dfs/soft
tracker服务器数据存储位置/dfs/tracker
storage服务器数据存储位置/dfs/storage
mkdir /dfs/tracker #创建数据存储目录（tracker服务器）
mkdir /dfs/storage #创建数据存储目录（storage服务器）

安装libfastcommon（tracker安装和storage安装）

cd /dfs/soft #切换到安装目录准备下载安装包
git clone https://github.com/happyfish100/libfastcommon.git --depth 1
#如果服务器未联网，需要手动下载libfastcommon的安装包，并且解压后进入libfastcommon目录，手动./make.sh && ./make.sh install
cd libfastcommon/
./make.sh && ./make.sh install #编译安装

安装FastDFS（tracker安装和storage安装）

cd /dfs/soft #切换到安装目录准备下载安装包
git clone https://github.com/happyfish100/fastdfs.git --depth 1
#如果服务器未联网需要手动下载FastDfs的安装包，解压后进入fastdfs目录中，并手动./make.sh && ./make.sh install
cd fastdfs/
./make.sh && ./make.sh install #编译安装
#配置文件准备
cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf #tracker配置文件（tracker服务器使用）
cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf #storage配置文件（storage服务器使用）
cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf #客户端文件，测试用
cp /dfs/soft/Fastdfs/conf/http.conf /etc/fdfs/ #/dfs/soft/Fastdfs为fastdfs安装路径，这里是我的安装路径，请以自己的实际安装路径为准
cp /dfs/soft/Fastdfs/conf/mime.types /etc/fdfs/ #/dfs/soft/Fastdfs为fastdfs安装路径，这里是我的安装路径，请以自己的实际安装路径为准

安装fastdfs-nginx-module（storage服务器安装）

cd /dfs/soft #切换到安装目录准备下载安装包
git clone https://github.com/happyfish100/fastdfs-nginx-module.git --depth 1
#如果服务器未连接互联网，需要手动下载fastdfs-nginx-module包，并解压
#此处的fastdfs-nginx-module包需要注意版本
cp /dfs/soft/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs # /dfs/soft/fastdfs-nginx-module为解压目录，这里是我的目录，实际请以自己的为准

安装Nginx（storage服务器安装）

cd /dfs/soft #切换到安装目录准备下载安装包
wget http://nginx.org/download/nginx-1.15.4.tar.gz #下载nginx压缩包
#如果服务器未连接互联网，需要手动下载nginx包，并解压
tar -zxvf nginx-1.15.4.tar.gz #解压
cd nginx-1.15.4/
#添加fastdfs-nginx-module模块(prefix指定一个自己的nginx目录，add-module指定对应的fastdfs-nginx-module目录)
./configure --prefix=/dfs/soft/nginx --add-module=/dfs/soft/fastdfs-nginx-module/src/ #/dfs/soft/fastdfs-nginx-module这里是我自己的目录，实际请以自己的为准
make && make install #编译安装

单机部署

略

集群部署

Tracker配置

vim /etc/fdfs/tracker.conf
#需要修改的内容如下
port=22122  # tracker服务器端口（默认22122,一般不修改）
base_path=/dfs/tracker  # 存储tracker日志和数据的根目录
store_group=group1 #设置组名
http.server_port = 8080 #tracker HTTP服务端口

修改防火墙，开放22122端口和8080端口（iptables或firewall，此处以firewall为例）

# 开放端口
firewall-cmd --permanent --add-port=22122/tcp
firewall-cmd --permanent --add-port=8080/tcp
#重启防火墙(修改配置后要重启防火墙)
firewall-cmd --reload
# 查询端口是否开放
firewall-cmd --query-port=22122/tcp
firewall-cmd --query-port=8080/tcp

启动Tracker

/etc/init.d/fdfs_trackerd start #启动tracker服务
/etc/init.d/fdfs_trackerd restart #重启动tracker服务
/etc/init.d/fdfs_trackerd stop #停止tracker服务
chkconfig fdfs_trackerd on #自启动tracker服务

Storage配置

vim /etc/fdfs/storage.conf
#需要修改的内容如下
port=23000  # storage服务端口（默认23000,一般不修改）
base_path=/dfs/storage  # 数据和日志文件存储根目录
store_path0=/dfs/storage  # 第一个存储目录
tracker_server=192.168.10.130:22122  # tracker服务器1
#tracker_server=192.168.10.131:22122  # tracker服务器2
#tracker_server=192.168.10.132:22122  # tracker服务器3
http.server_port=8888  # http访问文件的端口(默认8888,看情况修改,和nginx中保持一致)

修改防火墙，开放23000端口和8888端口（iptables或firewall，此处以firewall为例）

# 开放端口
firewall-cmd --permanent --add-port=23000/tcp
firewall-cmd --permanent --add-port=8888/tcp
#重启防火墙(修改配置后要重启防火墙)
firewall-cmd --reload
# 查询端口是否开放
firewall-cmd --query-port=23000/tcp
firewall-cmd --query-port=8888/tcp

启动Storage

/etc/init.d/fdfs_storaged start #启动storage服务
/etc/init.d/fdfs_storaged restart #重动storage服务
/etc/init.d/fdfs_storaged stop #停止动storage服务
chkconfig fdfs_storaged on #自启动storage服务

Client测试（storage服务器）

修改client.conf配置文件

vim /etc/fdfs/client.conf
#需要修改的内容如下
base_path=/dfs/tracker #tracker服务器
tracker_server=192.168.10.130:22122  # tracker服务器1
#tracker_server=192.168.10.131:22122  # tracker服务器2
#tracker_server=192.168.10.132:22122  # tracker服务器3
http.tracker_server_port=8080 #修改端口

测试

#保存后测试,返回ID表示成功 如：group1/M00/00/00/xx.tar.gz
fdfs_upload_file /etc/fdfs/client.conf /dfs/BLEACH.jpg

配置Nginx使可以通过HTTP访问

修改nginx-module

vim /etc/fdfs/mod_fastdfs.conf
#需要修改的内容如下
tracker_server=192.168.10.130:22122  # 服务器1
#tracker_server=192.168.10.131:22122  # 服务器2
#tracker_server=192.168.10.132:22122  # 服务器3
url_have_group_name=true #访问路径中携带组名,如group1
store_path0=/dfs/storage #storage地址

修改nginx

#配置nginx.config
vim /dfs/soft/nginx/conf/nginx.conf #/dfs/soft为上面添加nginx模块的时候指定的--prefix地址
#添加如下配置
server {
    listen       8888;    ## 该端口为storage.conf中的http.server_port相同
    server_name  localhost;
    location ~/group[0-9]/ {
        ngx_fastdfs_module;
    }
    error_page   500 502 503 504  /50x.html;
    location = /50x.html {
    root   html;
    }
}

启动Nginx

/dfs/soft/nginx/sbin/nginx #启动nginx
/dfs/soft/nginx/sbin/nginx -s reload #重启nginx
/dfs/soft/nginx/sbin/nginx -s stop #停止nginx
#/dfs/soft为上面添加nginx模块的时候指定的--prefix地址

测试
http://192.168.10.141:8888/group1/M00/00/00/wKgKhV6k76eAZAdDAANi9E9uQJc047.jpg
http://192.168.10.142:8888/group1/M00/00/00/wKgKhV6k76eAZAdDAANi9E9uQJc047.jpg

检测集群

/usr/bin/fdfs_monitor /etc/fdfs/storage.conf
# 会显示会有几台服务器 有3台就会 显示 Storage 1-Storage 3的详细信息
#ACTIVE 为启动状态

可能遇到的问题

1.如果不是root 用户 你必须在除了cd的命令之外 全部加sudo
2.如果不是root 用户 编译和安装分开进行 先编译再安装
3.如果上传成功 但是nginx报错404 先检查mod_fastdfs.conf文件中的store_path0是否一致
4.如果nginx无法访问 先检查防火墙 和 mod_fastdfs.conf文件tracker_server是否一致
5.如果不是在/usr/local/src文件夹下安装 可能会编译出错
6.如果 unknown directive “ngx_fastdfs_module” in /usr/local/nginx/conf/nginx.conf:151，可能是nginx一直是启动的，必须要重启nginx才可以，nginx -s reload无效。
7.如果遇到storage状态是WAIT_SYNC状态就把storage从集群中删除，然后在重新启动storage服务，使用如下命令，如果一次不成功，多试几次

#关闭storage服务
/usr/init.d/fdfs_storage stop
#删除192.xx.xxx.151这台服务器上的storage 
/usr/bin/fdfs_monitor /etc/fdfs/client.conf delete group1 192.xx.xxx.141
#启动storage服务
/usr/init.d/fdfs_storage start
量子版核子可乐
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
FastDFS 搭建过程
08-17
FastDFS 单间单机服务器
FastDFS的详细安装步骤一（亲搭--搭建时间2019年4月17号前后）
jdk_wangtaida的博客
04-18 3009
文章链接： FastDFS的详细安装步骤二 FastDFS的详细安装步骤三 前言： 项目中有需要上传文件或者图片功能的情况，应该是经常碰到的事情，每个公司可能都有不一样的处理方案，有的公司可能选择七牛云做图片服务器，有的可能选择搭建ftp+nginx做简单图片处理，或者搭建FastDFS+nginx来存储和管理图片。这篇博客主要讲解下如何在云服务器上搭建FastDFS和springboot...
FastDFS的安装及部署（实战篇）
关注我！带你一路 "狂飙" 到底！
03-30 4430
天猫、淘宝等购物网站，海量的商品图片和视频，是如何存储的？当用户访问量大时，又如何保证下载速度？分布式文件系统就是用来解决这些问题的。那么分布式文件系统该如何使用呢？
FastDFS环境搭建
热门推荐
通往精英的成长之路
04-29 1万+
【前言】 在工作过程中用到了FastDFS来做分布式文件管理和存储，关于FastDFS的东西百科（详情猛击me）写的很明白，在此不再赘述;接下来主要为大家介绍一下FastDFS搭建过程。 【FastDFS搭建详解】 一、所需基本环境 1、Linux版本：CentOS7 2、FastDFS版本：5.05 3、Xshee...
分布式文件存储-FastDFS环境搭建
皓亮君的博客
11-25 2884
文章目录一.简介二.安装准备1.安装环境2.安装包准备三.开始安装1.安装libfastcommon2.安装FastDFS3.配置tracker3.1创建tracker工作目录3.2.修改tracker配置文件3.3.启动tracker4.配置storage4.1 为storage配置工作目录4.2 修改storage配置文件4.3 启动storage4.4验证是否配置成功5.HTTP访问文件5.1.HTTP请求不能访问文件的原因5.2.FastDFS的nginx模块安装5.2.1.安装nginx依赖5.2
FastDFS服务器搭建（详细）
love_THL的博客
10-12 2213
FastDFS文件系统搭建
Fastdfs搭建
08-08
此文档详细介绍了fastdfs的安装步骤。并且包含所需的安装包。需要请下载
Nginx+FastDFS搭建图片服务器的方法实现
09-29
主要介绍了Nginx+FastDFS搭建图片服务器的方法实现，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
FastDFS搭建所需文件
06-15
该文件为学习FastDFS必备的安装包以及jar包，同时包含一个测试demo
FastDFS 介绍及安装部署
cc20100608的专栏
04-25 4223
FastDFS 组成FastDFS上传机制FastDFS使用场景FastDFS架构实验环境部署 FastDFS安装依赖安装服务端配置 Tracker 服务端配置 Storage 服务端文件上传测试安装配置 NginxNginx 集成 FastDFS 模块FastDFS 开启自启制作 RPM 包模拟文件迁移停止旧集群服务启动新集群服务FastDFS 常用命令查看集群状态删除节点FastDFS 是一款开源的轻量级分布式文件系统，纯C实现，支持Linux、FreeBSD等类UNIX系统；
fastDFS搭建-代码编写文档.zip
05-13
提供FastDFS分布式文件系统搭建，Java代码文件上传、下载、删除、更换、查询工具类、测试类，jar包，配置，提供压缩文件、解压后按需自提
搭建FastDFS(个人保姆级教程)
Crazyhao的博客
12-09 7545
搭建FastDFS
FastDFS 环境搭建及使用详解
最新发布
程序员大佬超的博客
01-16 3259
如题。
Fastdfs安装与配置
qq_1250652849的博客
11-25 280
FastDFS 是一个开源的高性能分布式文件系统（DFS）。它的主要功能包括：文件存储，文件同步和文件访问，以及高容量和负载平衡。主要解决了海量数据存储问题，特别适合以中小文件（建议范围：4KB < file_size
FastDFS之环境搭建
星 ~ 程 @的博客
12-22 1971
一、工具的准备 建议直接从官方地址下载 1、libfastcommon * 从 FastDFS 和 FastDHT 中提取出来的公共 C 函数库，基础环境 * 在安装 FastDFS 前需要先安装这个 * 下载地址址：https://github.com/happyfish100/libfastcommon/releases 2、FastDFS * FastDFS 安装包 * 下载地址：https://github.com/happyfish100/fastdfs/releases 3、f
fastdfs是什么？怎么搭建？
paul的博客
09-08 3028
1.什么是fastdfs FastDFS 是一个开源的高性能分布式文件系统（DFS）。 它的主要功能包括：文件存储，文件同步和文件访问，以及高容量和负载平衡。主要解决了海量数据存储问题，特别适合以中小文件（建议范围：4KB < file_size <500MB）为载体的在线服务。 FastDFS 系统有三个角色：跟踪服务器(Tracker Server)、存储服务器(Storage Server)和客户端(Client)。 　　Tracker Server：跟踪服务器，主要做调度工作，起
FastDFS集群搭建
用生命研发技术
09-18 3069
对于文件的操作需要使用 StorageClient，StorageClient的构造函数需要 TrackerServer 和 StorageServer，所以，我们首先通过加载配置文件，获取到 TrackerClient，再通过 TrackerClient获取 TrackerServer 和 StorageServer，最后通过 StorageClient 实现对文件的管理。
搭建FastDFS服务器
Skf_0004010的博客
03-24 3840
FastDFS 安装【文件服务存储服务器】 安装 FastDFS 依赖 FastDFS 是 C 语言开发的应用。安装必须使用 make、cmake 和 gcc 编译器。 # yum install -y make cmake gcc gcc-c++ perl 把FastDFS_v5.08.tar.gz和libfastcommon-master.zip进行上传到根目录下的/upload目录下 上传并解压 libfastcommon-master 上传 libfastcommon-master 到/upload
搭建Fastdfs
huishaocpdd的博客
10-21 436
由于工作需要，搭建了一个小型的fastdfs，用于测试环境
fastdfs搭建文件服务器
06-03
下面是在 Linux 系统上搭建 FastDFS 文件服务器的步骤： 1. 安装依赖库： ``` yum install -y gcc gcc-c++ make automake autoconf libtool pcre pcre-devel zlib zlib-devel openssl openssl-devel wget ``` 2. ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值