CentOS下安装FastDFS及使用Nginx

最新推荐文章于 2024-04-21 21:25:50 发布
最新推荐文章于 2024-04-21 21:25:50 发布
阅读量190 收藏
点赞数
分类专栏： Linux 文章标签： linux centos fastdfs nginx java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43222167/article/details/106886069
版权

FastDFS介绍

FastDFS是用c语言编写的一款开源的分布式文件系统。FastDFS为互联网量身定制,充分考了冗余备份,负载均衡,线性扩容等机制,并注重高可用,高性能等指标,使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传,下载等服务

FastDFS架构包括Tracker server和Storage server。客户端请求Tracker server进行文件的上传,下载,通过Tracker server调度最终由Storage server完成文件上传和下载

Tracker server作用是负载均衡和调度,通过Tracker server在文件上传时可以根据一些策略找到Storage server提供文件上传服务。可以将tracker称为追踪服务器或高度服务器

Storage sever作用是文件存储,客户端上传的文件最终存储在Storage服务器上,Storageserver没有实现自己的文件系统而是利用操作系统 的文件系统 来管理文件,可以将storage称为存储服务器

在这里插入图片描述
服务端两个角色:
Tracker:管理集群,tracker也可以实现集群,每个tracker节点地位平等,收集Storage集群的状态
Storage:实际保存Storage分为多个组,每个组之间保存的文件是不同的。每个组内部可以有多个成员,组成员内部保存的内容是一样的,组成员的地位是一致的,没有主从的概念

在这里插入图片描述
客户端上传文件后存储服务器将文件 ID 返回给客户端，此文件 ID 用于以后访问该文 件的索引信息。文件索引信息包括:组名，虚拟磁盘路径，数据两级目录，文件名。
例:group1/M00/00/00/wKgrgF1Rp8uAeU2IAA-itrfn0m4.tar.gz

group1 组名:文件上传后所在的 storage 组名称，在文件上传成功后有 storage 服务器返回， 需要客户端自行保存。 虚拟磁盘路径:storage 配置的虚拟路径，与磁盘选项 store_path*对应。如果配置了
/M00 : store_path0 则是 M00，如果配置了 store_path1 则是 M01，以此类推。
/00/00:数据两级目录:storage 服务器在每个虚拟磁盘路径下创建的两级目录，用于存储数据 文件。
/wKgrgF1Rp8uAeU2IAA-itrfn0m4.tar.gz文件名:与文件上传时不同。是由存储服务器根据特定信息生成，文件名包含:源存储 服务器 IP 地址、文件创建时间戳、文件大小、随机数和文件拓展名等信息。

在这里插入图片描述

1.下载

1.下载依赖组件且安装

1.Libfatscommon源码托管到github上,所以直接通过git clone将源码克隆到本地进行编译安装即可,如果系统中没有git就执行如下命令进行安装即可
yum install git-* -y

2.克隆源码
git clone https://github.com/happyfish100/libfastcommon.git --depth 1
在这里插入图片描述
3.编译
进入到刚下载的libfastcommon目录中编译
./make.sh
在这里插入图片描述
没有gcc则安装gcc
yum install gcc -y
在这里插入图片描述
安装成功后继续编译
./make.sh
在这里插入图片描述
4.安装
./make.sh install
在这里插入图片描述

2.安装FastDFS

1.同步骤1去github上克隆源码进行编译安装
git clone https://github.com/happyfish100/fastdfs.git --depth 1
在这里插入图片描述
cd fastdfs/

./make.sh && ./make.sh install
在这里插入图片描述
2.配置文件准备
  1.追踪器配置文件
cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf

  2.存储器配置文件
cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf

  3.客户端文件，测试用
cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf

  4.整合nginx需要的配置文件
cp /fastDFS/fastdfs/conf/http.conf /etc/fdfs #供nginx访问使用
cp /fastDFS/fastdfs/conf/mime.types /etc/fdfs/ #供nginx访问使用
在这里插入图片描述

3.安装Nginx支持插件

1.fastdfs-nginx-module
安装步骤同上,也是去github中克隆源码进行安装
git clone https://github.com/happyfish100/fastdfs-nginx-module.git --depth 1
在这里插入图片描述

2.复制插件配置文件到/etc/fdfs目录中
cp /soft/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs
在这里插入图片描述

3.下载Nginx并在安装的时候使用上一步指定的插件
wget http://nginx.org/download/nginx-1.17.6.tar.gz
在这里插入图片描述

4.解压nginx
tar -zxvf nginx-1.17.6.tar.gz
在这里插入图片描述
5.切换到解压目录且指定nginx插件配置路径
cd nginx-1.17.6
./configure --add-module=/fastDFS/fastdfs-nginx-module/src/ (文件所在的位置)

6.编译安装
make
make install
在这里插入图片描述
如果报这个很有可能是nginx的插件没有安装,安装:
yum -y install gcc openssl openssl-devel pcre-devel zlib zlib-devel
安装后再验证
./configure --add-module=/fastDFS/fastdfs-nginx-module/src/
make
在这里插入图片描述
make install
在这里插入图片描述

4.配置文件

我这里机器的ip为192.168.42.66
1.配置tracker.conf
vim /etc/fdfs/tracker.conf

需要修改的内容如下

port=22122 # tracker服务器端口（默认22122,一般不修改）

base_path=/home/dfs # 存储日志和数据的根目录

启动tracker服务
/etc/init.d/fdfs_trackerd start
在这里插入图片描述
/etc/init.d/fdfs_trackerd start #启动tracker服务

/etc/init.d/fdfs_trackerd restart #重启动tracker服务

/etc/init.d/fdfs_trackerd stop #停止tracker服务

chkconfig fdfs_trackerd on #自启动tracker服务

2.配置storage.conf文件
vim /etc/fdfs/storage.conf
需要修改的内容

port=23000 # storage服务端口（默认23000,一般不修改）

base_path=/home/dfs # 数据和日志文件存储根目录

store_path0=/home/dfs # 第一个存储目录

tracker_server=192.168.42.66:22122 # tracker服务器IP和端口

http.server_port=8888 # http访问文件的端口(默认8888,看情况修改,和nginx中保持一致)

启动storage服务
/etc/init.d/fdfs_storaged start
在这里插入图片描述
/etc/init.d/fdfs_storaged start #启动storage服务

/etc/init.d/fdfs_storaged restart #重动storage服务

/etc/init.d/fdfs_storaged stop #停止动storage服务

chkconfig fdfs_storaged on #自启动storage服务

3.配置clint.conf
vim /etc/fdfs/client.conf

#需要修改的内容如下

base_path=/home/dfs

tracker_server=192.168.43.128:22122 #tracker服务器IP和端口

#保存后测试,返回ID表示成功 如：group1/M00/00/00/xx.tar.gz

fdfs_upload_file /etc/fdfs/client.conf 软件地址,例如我自己的
fdfs_upload_file /etc/fdfs/client.conf /fastDFS/nginx-1.17.6.tar.gz
在这里插入图片描述
报错没有文件夹,则创建后再运行
fdfs_upload_file /etc/fdfs/client.conf /fastDFS/nginx-1.17.6.tar.gz

group1/M00/00/00/wKgAZF7vHhmAQOXDAA_U1_e6-1g.tar.gz
在这里插入图片描述

4.配置nginx访问FastDFS配置文件信息

vim /etc/fdfs/mod_fastdfs.conf

需要修改的内容如下

tracker_server=192.168.42.66:22122 #tracker服务器IP和端口

url_have_group_name=true

store_path0=/home/dfs

#配置nginx.config

vim /usr/local/nginx/conf/nginx.conf
配置如下(注意空格的对齐)
在这里插入图片描述

server {
    listen       8888;    ## 该端口为storage.conf中的http.server_port相同
    server_name  localhost;
    location ~/group[0-9]/ {
        ngx_fastdfs_module;
    }
    error_page   500 502 503 504  /50x.html;
    location = /50x.html {
    root   html;
    }

启动nginx服务

/usr/local/nginx/sbin/nginx #启动
在这里插入图片描述
/usr/local/nginx/sbin/nginx -s reload #重启nginx

使用浏览器访问检测或者使用wget 命令访问检测
wget http://192.168.0.100:8888/group1/M00/00/00/wKgAZF7vHhmAQOXDAA_U1_e6-1g.tar.gz
注意自己的ip地址端口和上传文件后返回的信息
在这里插入图片描述

Be Your Superhero
关注
专栏目录
CentOS7下fastDFS5.11的安装配置
朴端雕的博客
03-27 2969
GitHub地址：https://github.com/happyfish100  提供下载包                所需包1.安装zip解压              1.0 yum -y install unzip zip              1.1 unzip libfastcommon-master.zip              1.2     安装gcc环境 yum -...
Centos7安装FastDFS整合nginx.docx
12-23
Centos7安装FastDFS整合nginx
Centos下安装FastDFS
松鼠教授的博客
09-05 409
1. Centos下安装FastDFS 1.1 上传 将所需资料中的文件上传到linux下的/home/leyou/fdfs目录: 1.2 安装依赖 FastDFS运行需要一些依赖，在课前资料提供的虚拟中已经安装好了这些依赖，如果大家想要从头学习，可以按下面方式安装： 1.2.1 安装GCC依赖 GCC用来对C语言代码进行编译运行，使用yum命令安装： yum -y install gcc ...
centOS6.5 安装fastDFS
java-hope
11-16 205
   下载libfastcommon    下载地址：https://github.com/happyfish100/libfastcommon/archive/V1.0.7.tar.gz       解压 libfastcommon tar -zxvf V1.0.7.tar.gz      编译 cd libfastcommon-1.0.7 ./make.sh      ...
centos 上安装FastDFS
天道酬勤 厚积薄发
03-31 295
1、软件准备 wget https://github.com/happyfish100/libfastcommon/archive/V1.0.7.tar.gz wget http://jaist.dl.sourceforge.net/project/fastdfs/FastDFS%20Nginx%20Module%20Source%20Code/fastdfs-nginx-module_v1.16...
CentOS 安装 FastDFS
Linux猿
07-01 1765
CSDN博客专家🏆，华为云享专家🏆，Linux、C/C++、云计算、物联网、面试、刷题、算法尽管咨询我，关注我，有问题私聊！
centos7安装FastDFS_v5.08及配置
10-26
接下来，我们需要安装Nginx服务器，因为FastDFS通常与Nginx结合使用，以提供HTTP访问。执行以下命令安装Nginx： ```bash sudo yum install nginx -y ``` 然后，下载FastDFS的源代码包。你可以从FastDFS官方网站...
CentOS7安装FastDFS-单机版亲测
01-20
FastDFS是一款开源的轻量级分布式文件系统纯C实现，支持Linux、FreeBSD等UNIX系统类google FS，不是通用的文件系统，只能通过专有API访问，目前提供了C、Java和... fastdfs-nginx-module-master.zip  下载地址：  
centos7-fastdfs+nginx+php开发环境部署.doc
03-11
在本文中，我们将深入探讨如何在CentOS 7环境下搭建FastDFS+nginx+php的开发环境，这是一个常用的技术栈，适用于构建类似微信、京东、淘宝等大型应用的后端小文件服务器。首先，我们来看看所需的软件及其版本： 1. ...
Linux环境安装FastDFS及整合Nginx遇到的bug及解决方法
01-09
我的是阿里云ecs服务器，CentOS 7安装的，下面是我安装过程中遇到的问题 问题&解决方法 问题1： ERROR – file: storage_ip_changed_dealer.c, line: 163, connect to tracker server xx.xx.xx.xx:22122 fail, errno...
centos7搭建nginx+fastDFS
11-05
centos7下搭建fastdfs和nginx集成环境，详细！！ FastDFS 是一个开源的高性能分布式文件系统（DFS）。 它的主要功能包括：文件存储，文件同步和文件访问，以及高容量和负载平衡。主要解决了海量数据存储问题，特别适合以中小文件（建议范围：4KB < file_size <500MB）为载体的在线服务。 FastDFS 系统有三个角色：跟踪服务器(Tracker Server)、存储服务器(Storage Server)和客户端(Client)
Maxwell采集binlog系列（三）-Linux系统安装Zookeeper，Kafka
weixin_42183249的博客
09-30 448
Linux系统安装Zookeeper，Kafka教程 Zookeeper安装 1.解压安装包 tar -zxvf apache-zookeeper-3.5.8-bin.tar.gz 2.更改配置文件(我的安装目录:/home/liuyongkui/java/tools/zookeeper/apache-zookeeper-3.5.8-bin) 进入conf目录下：cd /home/liuyongkui/java/tools/zookeeper/apache-zookeeper-3...
在centos7的环境下安装fastdfs
qq_31032293的博客
05-22 308
1、安装gcc fastdfs是C语言开发的，要对fastdfs编译安装必须首先由gcc的环境,如果以前系统安装了nginx，则不需要安装这个环境，本机已经安装过了nginx了。 yum install -y gcc gcc-c++ 2、安装libevent 若系统已经有图形界面则不要安装此环境了。 3、 安装libfastcommon 1、本机把libfastcommon放在了/usr/src的目录下了，对其进行解压 1、进行解压：tar -zxvf libfas...
CentOS7安装 fastDFS 教程
最新发布
weixin_62632929的博客
04-21 1821
在一台主机上部署 fastDFS 文件系统的 tracker 服务器和 storage 服务器，提供了搭建 fastDFS 系统的示例。
（5）Centos6.X安装FastDFS（伪分布）
王培晓Carpenter
08-17 1933
什么是FastDFS 安装环境 安装FastDFS 1 安装FastDFS依赖 2 安装libfastcommon 3 FastDFS编译安装 4 验证FastDFS是否安装成功 FastDFS 和nginx整合 1 安装整合模块 2 安装nginx1.什么是FastDFS      FastDFS是用c语言编写的一款开源的分布式文件系统。FastDFS为互联网量身定制，充分考虑了冗余备份、负载均衡
CentOS安装FastDFS超详细教程
忆痕惜dxh 的博客
01-19 1788
请你用绝对的理智和清醒的头脑去压制你心里的爱和难过 首先下载所需要的安装文件，点击下载。 一、上传 将下载文件上传到linux下的/home/fdfs目录: 二、安装依赖 1、安装GCC依赖 GCC用来对C语言代码进行编译运行，使用yum命令安装： yum -y install gcc 2、安装unzip工具 unzip工具可以帮我们对压缩包进行解压 ： yum...
在 CentOS6.8 下配置安装部署FastDFS5.05+Nginx模块上传测试
vanthyanhon的博客
06-25 1763
本人这两天刚涉足分布式文件系统，在网上找了很多FastDFS相关文章都存在不少的坑，花了两天时间，总算还是弄出来了，针对刚涉足FastDFS分布式文件系统的童鞋，写了这篇文章，希望你们菜更少的坑，话不多说直接进入主题，有错误的地方请多指教。
CentOS7安装fastDFS详细步骤
另一个自己deer-Jie
01-04 550
安装fastDFS 安装依赖包:yum install -y libevent 进入安装路径：cd /usr/local 创建fastDFS文件夹：mkdir fastDFS 进入fastDFS文件夹：cd fastDFS 安装libfastcommon-1.0.7.tar.gz 下载：wget https://github.com/happyfish100/libfast...
Centos7中搭建fastdfs
kmushroomk的博客
07-21 183
1、在虚拟机中设置静态IP： [步骤 1]：点击第一步箭头所指的地方 [步骤 2]：配置网络，修改为“手动” [步骤 3]：在4所指箭头中输入固定IP [步骤 4]：在上图DNS位置设置DNS服务器：8.8.8.8 2、安装编译环境 [步骤 1]：#创建数据存储目录 mkdir /home/dfs [步骤 2]：#切换到安装目录准备下载安装包 cd /usr/local/src [步骤 3]：#下载相关包 yum install git gcc gcc-c++ make...
CentOS7环境下安装与配置FastDFS及配合Nginx
"在CentOS7环境下安装和使用FastDFS，以及配合Nginx进行文件访问配置的步骤文档。" 在Linux系统中，FastDFS是一个开源的高性能、轻量级的分布式文件系统，常用于存储和共享大型二进制文件，如图片、视频等。Nginx则...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值