centos7安装FastDFS

最新推荐文章于 2024-05-04 23:36:18 发布
最新推荐文章于 2024-05-04 23:36:18 发布
阅读量2k 收藏
点赞数
分类专栏： 开源 文章标签： centos fastdfs 分布式存储
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/malongning/article/details/78554264
版权

近期用到分布式存储，参照网上一些文章，自己实际搭建了一下测试环境。做下记录，给大家也分享下。



Centos 7.0 FastDfs安装

安装包：

 

安装依赖包：

yum install make cmake gcc gcc-c++

安装unzip命令：

yum install -y unzip zip

1      安装libfastcommon

解压文件：

unzip /home/packages/libfastcommon-master.zip-d /software/

cd /software/libfastcommon-master

./make.sh

./make.shinstall

进入/usr/lib64目录，查看有libfastcommon.so文件，安装成功。如下图：

2      配置libfastcommon

FastDFS主程序设置的lib目录是：/usr/local/lib

所以应该创建软链接到这里，执行下面的命令：

ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so

ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so

ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so

ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so

3      安装FastDFS

在所有的tracker和storage服务器上都要安装FastDFS。

3.1          编译安装fastdfs

解压软件包到/software/目录下面：

tar -zxvf /home/packages/ FastDFS_v5.08.tar.gz -C /software/

进入/software/FastDFS目录，执行编译命令：

cd /software/FastDFS

./make.sh

./make.sh install

 

安装成功。

采用默认安装方式，相应的文件与目录如下：

1> 服务脚本：

/etc/init.d/fdfs_storaged
/etc/init.d/fdfs_trackerd

2> 配置文件（示例配置文件）：

 ll /etc/fdfs/
-rw-r--r-- 1 root root  1461 1月   4 14:34 client.conf.sample
-rw-r--r-- 1 root root  7927 1月   4 14:34 storage.conf.sample
-rw-r--r-- 1 root root  7200 1月   4 14:34 tracker.conf.sample

3> 命令行工具（/usr/bin目录下）

-rwxr-xr-x    1 root root     260584 1月   4 14:34 fdfs_appender_test
-rwxr-xr-x    1 root root     260281 1月   4 14:34 fdfs_appender_test1
-rwxr-xr-x    1 root root     250625 1月   4 14:34 fdfs_append_file
-rwxr-xr-x    1 root root     250045 1月   4 14:34 fdfs_crc32
-rwxr-xr-x    1 root root     250708 1月   4 14:34 fdfs_delete_file
-rwxr-xr-x    1 root root     251515 1月   4 14:34 fdfs_download_file
-rwxr-xr-x    1 root root     251273 1月   4 14:34 fdfs_file_info
-rwxr-xr-x    1 root root     266401 1月   4 14:34 fdfs_monitor
-rwxr-xr-x    1 root root     873233 1月   4 14:34 fdfs_storaged
-rwxr-xr-x    1 root root     266952 1月   4 14:34 fdfs_test
-rwxr-xr-x    1 root root     266153 1月   4 14:34 fdfs_test1
-rwxr-xr-x    1 root root     371336 1月   4 14:34 fdfs_trackerd
-rwxr-xr-x    1 root root     251651 1月   4 14:34 fdfs_upload_appender
-rwxr-xr-x    1 root root     252781 1月   4 14:34 fdfs_upload_file

 

3.2          配置tracker

对所有的tracker服务器，进行如下配置：

进入配置目录：/etc/fdfs

该目录下有配置样本，首先复制一份来配置：

cp tracker.conf.sample tracker.conf

 

 

# 修改的内容如下：

disabled=false              # 启用配置文件

port=22122                  # tracker服务器端口（默认22122）

base_path=/software/FastDFS/trackerfiles  #存储日志和数据的根目录，需手动创建文件夹

其它参数保留默认配置， 具体配置解释可参考官方文档说明：

http://bbs.chinaunix.net/thread-1941456-1-1.html

3.3          启动tracker

启动：

fdfs_trackerd /etc/fdfs/tracker.conf start

查看相应进程：

netstat -ntlp |grep 22122

 

3.4          配置storage

对所有的storage服务器作如下配置：

cd /etc/fdfs/

cp storage.conf.sample storage.conf

vi storage.conf

修改配置文件storage.conf，

# 修改的内容如下:

disabled=false                     #启用配置文件

group_name=group1      # 本storage服务器对应的组名，需要根据实际情况配置

port=23000                          # storage服务端口

base_path=/software/FastDFS/storagefiles          # 数据和日志文件存储根目录

store_path0=/software/FastDFS/storagedata        # 第一个存储目录

tracker_server=192.168.56.101:22122  # tracker服务器IP和端口

http.server_port=8888               # http访问文件的端口

3.5          启动storage

启动：

fdfs_storaged /etc/fdfs/storage.conf start

查看相应进程：

netstat -ntlp |grep 23000


集成Nginx服务：

FastDFS通过Tracker服务器,将文件放在Storage服务器存储，但是同组之间的服务器需要复制文件，而且有延迟的问题.

假设Tracker服务器将文件上传到了192.168.1.80，文件ID已经返回客户端，这时后台会将这个文件复制到192.168.1.30，如果复制没有完成,客户端就用这个ID在192.168.1.30取文件,肯定会出现错误。

这个fastdfs-nginx-module可以重定向连接到源服务器取文件,避免客户端由于复制延迟的问题,出现错误。

注意：在每一个storge服务器上都需要安装fastdfs-nginx-module模块。

4.1.2    解压

解压软件包到自定义目录，这里，解压到/software目录。

tar -zxvf /home/packages/fastdfs-nginx-module_v1.16.tar.gz -C /software/

 

4.1.3    配置文件

复制nginx模块目录到/usr/local：

cp -r /software/fastdfs-nginx-module/ /usr/local/fastdfs-nginx-module

进入到这个目录：

cd /usr/local/fastdfs-nginx-module

 

修改配置文件mod_fastdfs.conf:

修改以下配置:
   

1

2

3

4

5

6

7

connect_timeout=10

     base_path=/tmp

     tracker_server=ip01:22122

     storage_server_port=23000

     group_name=group1

     url_have_group_name = true

     store_path0=/software/FastDFS/storagedata  #与storage

配置文件存储路径一致

将这个文件复制到/etc/fdfs 目录中：

cd /usr/local/fastdfs-nginx-module/src/

cp mod_fastdfs.conf /etc/fdfs/

 

修改config文件：

vi /usr/local/fastdfs-nginx-module/src/config

只需修改第4行，修改如下：

CORE_INCS="$CORE_INCS /usr/include/fastdfs  /usr/include/fastcommon"

 

修改config文件：

vi /usr/local/fastdfs-nginx-module/src/config

只需修改第4行，修改如下：

CORE_INCS="$CORE_INCS /usr/include/fastdfs  /usr/include/fastcommon"

 

4.1          安装Nginx

注意：需要在每个storage上都安装nginx模块，因为默认是没有暴露http协议的，所以在每个的storage上都需要安装nginx来支持其http协议的访问。

4.1.1    安装依赖

centos ：

yum install gcc gcc-c++ make automake autoconf libtool pcre* zlib openssl openssl-devel

 

 

4.1.2    安装

将软件包解压到/software/目录下，

tar -zxvf /home/packages/nginx-1.13.5.tar.gz-C /software/

编译安装：

cd /software/nginx-1.13.5

./configure --with-http_ssl_module --add-module=/usr/local/fastdfs-nginx-module/src

 

make

make install

 

4.1.3    拷贝配置文件http.conf和mime.types

cp /software/FastDFS/conf/http.conf /software/FastDFS/conf/mime.types /etc/fdfs/

4.1.1      建立软链接

在/fastdfs/storage文件存储目录下创建软连接,将其链接到实际存放数据的目录：

cd /software/FastDFS/storagedata

Ln -s /software/FastDFS/storagedata/data  /software/FastDFS/storagedata/data/M00

4.2          配置Nginx

/usr/local/nginx  修改config

user nobody;

worker_processes 1;

events {

    worker_connections 1024;

}

http {

    include mime.types;

    default_type application/octet-stream;

    sendfile on;

    keepalive_timeout 65;

    server {

        listen 8888;

        server_name localhost;

        location ~/group([0-9])/M00 {

            ngx_fastdfs_module;

        }

        error_page 500 502 503 504 /50x.html;

 

        location = /50x.html {

            root html;

        }

    }

}


4.3          启动nginx

/usr/local/nginx/sbin/nginx

 

4.4          上传测试

修改client.conf文件,修改如下：
    　　   base_path=/home/yuqing/fastdfs--> base_path= /software/FastDFS/storagedata  
    　　   tracker_server=192.168.209.121:22122 --> tracker_server= tracker_server=192.168.56.101:22122  
   　　    http.tracker_server_port=80 ->http.tracker_server_port=8888  
执行上传：
fdfs_test /software/FastDFS/conf/client.conf upload /software/FastDFS/client/2.jpg
 

防火墙开启

firewall-cmd--zone=public --add-port=8888/tcp –permanent

firewall-cmd--reload

附录：

常用的命令

1.启动tracker     fdfs_trackerd/etc/fdfs/tracker.conf start

sudo fdfs_trackerd/etc/fdfs/tracker.conf restart

2.启动storage    fdfs_storaged/etc/fdfs/storage.conf start

sudo fdfs_storaged/etc/fdfs/storage.conf restart

3.启动storage中的nginx    

/usr/local/nginx/sbin/nginx<br>(重启Nginx的命令为:/usr/local/nginx/sbin/nginx -s reload)

sudo /usr/local/nginx/sbin/nginx

4.上传文件    
修改client.conf文件,修改如下：
    　　   base_path=/home/yuqing/fastdfs--> base_path= /software/FastDFS/storagedata  
    　　   tracker_server=192.168.209.121:22122 --> tracker_server= tracker_server=192.168.56.101:22122  
   　　    http.tracker_server_port=80 ->http.tracker_server_port=8888  
执行上传：
fdfs_test /software/FastDFS/conf/client.conf upload /software/FastDFS/client/2.jpg
 

5.查看storage和tracker状态    sudo fdfs_monitor/etc/fdfs/storage.conf

6.查看监控端口   sudo netstat -unltp|grep fdfs

 

 

 

 

 

6.linux cd命令使用小技巧： 

cd     进入用户主目录；

cd  ~  进入用户主目录；

cd  -  返回进入此目录之前所在的目录；

cd  ..  返回上级目录（若当前目录为“/“，则执行完后还在“/"；".."为上级目录的意思）；注意用空格隔开

cd ../..  返回上两级目录；

cd  !$  把上个命令的参数作为cd参数使用。

以上是linux cd命令与DOS的cd命令的区别。

 

参考：

http://www.cnblogs.com/cnmenglang/p/6251696.html

完整安装包及安装说明+.net客户端

http://download.csdn.net/download/malongning/10121921


malongning
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
CentOS7安装FastDFS-单机版亲测
01-20
FastDFS是一款开源的轻量级分布式文件系统纯C实现，支持Linux、FreeBSD等UNIX系统类google FS，...安装介质：  fastdfs-master.zip  libfastcommon-master.zip  fastdfs-nginx-module-master.zip  下载地址：  
CentOS 安装 FastDFS
Linux猿
07-01 1541
CSDN博客专家🏆，华为云享专家🏆，Linux、C/C++、云计算、物联网、面试、刷题、算法尽管咨询我，关注我，有问题私聊！
Centos下安装FastDFS
松鼠教授的博客
09-05 373
1. Centos下安装FastDFS 1.1 上传 将所需资料中的文件上传到linux下的/home/leyou/fdfs目录: 1.2 安装依赖 FastDFS运行需要一些依赖，在课前资料提供的虚拟中已经安装好了这些依赖，如果大家想要从头学习，可以按下面方式安装： 1.2.1 安装GCC依赖 GCC用来对C语言代码进行编译运行，使用yum命令安装： yum -y install gcc ...
centos7下安装FastDFS分布式文件存储系统
最新发布
2301_78850344的博客
05-04 790
自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。深知大多数初中级Android工程师，想要提升技能，往往是自己摸索成长，自己不成体系的自学效果低效漫长且无助。因此收集整理了一份《2024年Web前端开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Android开发知识点！
centos 安装FastDfs
wudaoshihun的博客
12-12 1778
本来使用3个节点部署fastdfs,其中1个tracker,2个storage(2个group）如果使用6个节点，2个tracker,4个storage(2个group）其中group中2个节点互为主备。 目录 以下可以使用SCRT的同时操作 一、环境准备 1. 安装开发编译环境,直接安装组内所有软件 2. 并不需要这么多组件，浪费资源，可以分步安装 二. 安装fastdf......
FastDFS简介及安装部署（CentOS7）
yueyue763184的博客
11-12 1510
FastDFS是一个开源的轻量级分布式文件系统，为互联网应用量身定做，简单、灵活、高效，采用C语言开发，由阿里巴巴开发并开源。FastDFS对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载、文件删除）等，解决了大容量文件存储的问题，特别适合以文件为载体的在线服务，如相册网站、文档网站、图片网站、视频网站等等。FastDFS充分考虑了冗余备份、线性扩容等机制，并注重高可用、高性能等指标，使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。
搭建一个FastDFS 5.0.5的文件服务器
replat-xin
12-05 583
参照文章https://www.linuxidc.com/Linux/2016-09/135537.htm以及https://www.cnblogs.com/geeek/p/5028328.html 摘自：http://www.oschina.net/p/fastdfs  FastDFS是一个开源的分布式文件系统，她对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，...
centos7安装FastDFS_v5.08及配置
10-26
在Centos7的环境下完成FastDFS的环境搭建，提供完整的操作步骤手册及所需要的资源包，仅供大家学习参考
Centos7安装FastDFS整合nginx.docx
12-23
Centos7安装FastDFS整合nginx
centos系统上安装fastdfs
08-24
CentOS 系统上安装 FastDFS FastDFS 是一个开源的分布式文件系统，能够提供高性能、高可靠性和高扩展性的文件存储服务。下面是 CentOS 系统上安装 FastDFS 的详细步骤和相关知识点。 安装 libfastcommon ...
CentOS7离线安装fastdfs包
04-07
CentOS7离线安装fastdfs包，配合博客步骤使用
Linux Centos7.5 安装FastDFS所需软件
11-21
FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。
Centos7搭建FastDFS教程
Way_Of_Heart的博客
03-30 403
Centos7搭建FastDFS教程 1 介绍与准备 FastDFS特别适合以中小文件（建议范围：4KB < file_size <500MB）为载体的在线服务。FastDFS 系统有三个角色，跟踪服务器(Tracker Server)、存储服务器(Storage Server)和客户端(Client)。 Tracker Server:跟踪服务器，主要做调度工作，起到均衡的作用；负责管理所有的 storage server和 group，每个 storage 在启动后会连接 Tracke.
CentOS7安装 fastDFS 教程
weixin_62632929的博客
04-21 1198
在一台主机上部署 fastDFS 文件系统的 tracker 服务器和 storage 服务器，提供了搭建 fastDFS 系统的示例。
Centos7安装部署fastDFS，看完这一篇就够了
m0_63102464的博客
11-08 569
依次执行以下命令: 解压: tar -zxvf libfastcommonV1.0.7.tar.gz 进入 libfastcommon-1.0.7 执行: ./make.sh ./make.sh install libfastcommon安装好后会自动将库文件拷贝至/usr/lib64下，由于FastDFS程序引用usr/lib目录所以需要将/usr/lib64下的库文件libfastcommon.so拷贝至/usr/lib下。 要拷贝的文件如下： cp /usr/lib64/libfastcom
FastDFS，FastDHT安装使用详解 Centos环境
weixin_51689532的博客
05-15 1948
linux Centos 环境安装使用FastDFS，FastDHT详解，同时与spring boot 做整合
Linux（CentOS7）搭建FastDfs
北暖的博客
12-31 2192
标题Linux(CentOS7)搭建FastDfs 一、前言 1、FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。 FastDFS为互联网量身定制，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。 2、记录一次搭建过程。 二、搭建步
centos安装FastDFS，SpringBoot整合FastDFS
KevinJee_
02-14 482
本教程采用centos7 实测 安装fastdfs，每一步都存在截图，安装不成功你就@我最关键的是采用springboot 集成 fastdfs，上传保存文件信息。
centos7安装配置fastdfs
07-28
在CentOS 7上安装和配置FastDFS，你需要按照以下步骤进行操作： 1. 首先，你需要安装FastDFS的依赖包。可以使用以下命令安装： ``` yum install -y git gcc gcc-c++ make automake autoconf libtool pcre pcre-...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值