FastDFS安装并 spring 集成(包含 Nginx)

第一次写博客,不好之处请见谅

直入主题:
FastDFS 分布式文件系统的安装与使用(单节点)

---

服务器地址

跟踪服务器:120.77.41.37
存储服务器:120.77.41.37

服务器环境

环境:CentOS 7
用户: root
数据目录:/fastdfs (注:数据目录按你的数据盘挂载路径而定)

安装包

FastDFS v5.05
libfastcommon-master.zip(是从 FastDFS 和 FastDHT 中提取出来的公共 C 函数库)
fastdfs-nginx-module_v1.16.tar.gz
nginx-1.6.2.tar.gz
fastdfs_client_java._v1.25.tar.gz
源码地址:https://github.com/happyfish100/
下载地址:http://sourceforge.net/projects/fastdfs/files/
官方论坛:http://bbs.chinaunix.net/forum-240-1.html

所有跟踪服务器和存储服务器均执行如下操作:

####编译和安装所需的依赖包:

# yum install make cmake gcc gcc-c++

####安装 libfastcommon:

• 上传或下载 libfastcommon-master.zip 到/usr/local/src 目录
• 解压:

# cd /usr/local/src/
# unzip libfastcommon-master.zip
# cd libfastcommon-master

• 编译、安装:

# ./make.sh
# ./make.sh install
libfastcommon 默认安装到了
/usr/lib64/libfastcommon.so
/usr/lib64/libfdfsclient.so

• 因为 FastDFS 主程序设置的 lib 目录是/usr/local/lib，所以需要创建软链接:

# ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so
# ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so
# ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
# ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so
####安装 FastDFS

• 上传或下载 FastDFS 源码包(FastDFS_v5.05.tar.gz)到 /usr/local/src 目录
• 解压:

# cd /usr/local/src/
# tar -zxvf FastDFS_v5.05.tar.gz
# cd FastDFS

• 编译、安装(编译前要确保已经成功安装了 libfastcommon)

# ./make.sh
# ./make.sh install
采用默认安装的方式安装,安装后的相应文件与目录:
A、服务脚本在:
/etc/init.d/fdfs_storaged
/etc/init.d/fdfs_tracker
B、配置文件在(样例配置文件):
/etc/fdfs/client.conf.sample
/etc/fdfs/storage.conf.sample
/etc/fdfs/tracker.conf.sample
C、命令工具在/usr/bin/目录下的:
fdfs_appender_test
fdfs_appender_test1
fdfs_append_file
fdfs_crc32
…

• 因为 FastDFS 服务脚本设置的 bin 目录是/usr/local/bin，但实际命令安装在/usr/bin，可以进入 /user/bin 目录使用以下命令查看 fdfs 的相关命令:

# cd /usr/bin/
# ls | grep fdfs

• 因此需要修改 FastDFS 服务脚本中相应的命令路径，也就是把/etc/init.d/fdfs_storaged 和/etc/init.d/fdfs_tracker 两个脚本中的/usr/local/bin 修改成/usr/bin:

# vi fdfs_trackerd

• 使用查找替换命令进统一修改:%s+/usr/local/bin+/usr/bin

# vi fdfs_storaged

• 使用查找替换命令进统一修改:%s+/usr/local/bin+/usr/bin

---

配置 FastDFS 跟踪器

复制 FastDFS 跟踪器样例配置文件,并重命名:

# cd /etc/fdfs/
# cp tracker.conf.sample tracker.conf

编辑跟踪器配置文件:

# vi /etc/fdfs/tracker.conf

修改的内容如下:

disabled=false
port=22122
base_path=/fastdfs/tracker
(其它参数保留默认配置，具体配置解释请参考官方文档说明: http://bbs.chinaunix.net/thread-1941456-1-1.html )

创建基础数据目录(参考基础目录 base_path 配置):

# mkdir -p /fastdfs/tracker

防火墙中打开跟踪器端口(默认为 22122):

# vi /etc/sysconfig/iptables

添加如下端口行:

   -A INPUT -m state --state NEW -m tcp -p tcp --dport 22122 -j ACCEPT

重启防火墙:

# service iptables restart

启动 Tracker:

# /etc/init.d/fdfs_trackerd star

(初次成功启动，会在/fastdfs/tracker 目录下创建 data、logs 两个目录)

查看 FastDFS Tracker 是否已成功启动:

# ps -ef | grep fdfs

关闭 Tracker:

# /etc/init.d/fdfs_trackerd stop

设置 FastDFS 跟踪器开机启动:

# vi /etc/rc.d/rc.local

添加以下内容:

## FastDFS Tracker
/etc/init.d/fdfs_trackerd start

---

配置 FastDFS 存储

复制 FastDFS 存储器样例配置文件,并重命名:

# cd /etc/fdfs/
# cp storage.conf.sample storage.conf

编辑存储器样例配置文件:

# vi /etc/fdfs/storage.conf

修改的内容如下:

disabled=false
port=23000
base_path=/fastdfs/storage
store_path0=/fastdfs/storage
tracker_server=120.77.41.37:22122
http.server_port=8888
(其它参数保留默认配置，具体配置解释请参考官方文档说明: http://bbs.chinaunix.net/thread-1941456-1-1.html )

创建基础数据目录(参考基础目录 base_path 配置):

# mkdir -p /fastdfs/storage

防火墙中打开存储器端口(默认为 23000):

参考上面修改防火墙

启动 Storage:

# /etc/init.d/fdfs_storaged start

初次成功启动，会在/fastdfs/storage 目录下创建 data、logs 两个目录)

关闭 Storage:

# /etc/init.d/fdfs_storaged stop

设置 FastDFS 存储器开机启动:

# vi /etc/rc.d/rc.local

添加:

## FastDFS Storage
/etc/init.d/fdfs_storaged start

---

四、文件上传测试

修改 Tracker 服务器中的客户端配置文件:

# cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf
# vi /etc/fdfs/client.conf
修改内容如下:
base_path=/fastdfs/tracker
btracker_server=120.77.41.37:22122

执行如下文件上传命令:

# /usr/bin/fdfs_upload_file /etc/fdfs/client.conf /usr/local/src/FastDFS_v5.05.tar.gz

返回 ID 号:group1/M00/00/00/wKFHOASIOCO43242342XO.tar.gz

能返回以上文件 ID，说明文件上传成功)

---

在每个存储节点上安装 nginx

fastdfs-nginx-module 作用说明:

FastDFS 通过 Tracker 服务器,将文件放在 Storage 服务器存储，但是同组存储服务器之间需要进入文件复制，有同步延迟的问题。假设 Tracker 服务器将文件上传到了 120.77.41.37，上传成功后文件 ID 已经返回给客户端。此时 FastDFS 存储集群机制会将这个文件同步到同组存储 120.77.41.37，在文件还 没有复制完成的情况下，客户端如果用这个文件 ID 在 120.77.41.37 上取文件,就会出现文件无法访问的 错误。而 fastdfs-nginx-module 可以重定向文件连接到源服务器取文件,避免客户端由于复制延迟导致的 文件无法访问错误。(解压后的 fastdfs-nginx-module 在 nginx 安装时使用)

上传 fastdfs-nginx-module_v1.16.tar.gz 到/usr/local/src

解压

# cd /usr/local/src/
# tar -zxvf fastdfs-nginx-module_v1.16.tar.gz

修改 fastdfs-nginx-module 的 config 配置文件:

# cd fastdfs-nginx-module/src
# vi config
CORE_INCS=“ C O R E I N C