FastDFS（ubuntu）下的安装

最新推荐文章于 2019-07-11 22:15:00 发布

chenyiwen5489

最新推荐文章于 2019-07-11 22:15:00 发布

阅读量137

点赞数

文章标签：运维网络

原文链接：https://my.oschina.net/zhangzexing/blog/907077

版权

准备工作：

FastDFS_v5.07.tar
安装包:libfastcommon-master.zip(是从 FastDFS 和 FastDHT 中提取出来的公共 C 函数库)

下载路径：https://github.com/happyfish100/libfastcommon

安装包：fastdfs-nginx-module_v1.16.tar.gz

下载路径：https://github.com/happyfish100/fastdfs-nginx-module

     nginx-1.9.0.tar.gz
    fastdfs_client_java._v1.25.tar.gz
    源码地址:https://github.com/happyfish100/
    下载地址:http://sourceforge.net/projects/fastdfs/files/
    官方论坛:http://bbs.chinaunix.net/forum-240-1.html

一、所有跟踪服务器和存储服务器均执行如下操作

1、编译和安装所需的依赖包:

# ~~aptget install make cmake gcc gcc-c++~~ // 一般可以省略

2. 安装 libfastcommon:

(1)上传或下载

libfastcommon-master.zip 到/usr/local/src 目录

(2)解压

# cd /usr/local/src/
# unzip libfastcommon-master.zip
# cd libfastcommon-master

(3) 编译、安装

# ./make.sh
# ./make.sh install 
libfastcommon 默认安装到了 /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so

3、安装 FastDFS
(1)上传或下载 FastDFS 源码包(FastDFS_v5.07.tar)到 /usr/local/src 目录

(2)解压

# cd /usr/local/src/
# tar -xvf FastDFS_v5.07.tar
# cd FastDFS

(3)编译、安装(编译前要确保已经成功安装了 libfastcommon)

# ./make.sh
# ./make.sh install

采用默认安装的方式安装,安装后的相应文件与目录:

A、服务脚本在:
    /etc/init.d/fdfs_storaged
    /etc/init.d/fdfs_tracker
B、配置文件在(样例配置文件): 
    /etc/fdfs/client.conf.sample 
    /etc/fdfs/storage.conf.sample 
    /etc/fdfs/tracker.conf.sample
C、命令工具在/usr/bin/目录下的:
    fdfs_appender_test
    fdfs_appender_test1
    fdfs_append_file
    fdfs_crc32
    fdfs_delete_file
    fdfs_download_file
    fdfs_file_info
    fdfs_monitor
    fdfs_storaged
    fdfs_test
    fdfs_test1
    fdfs_trackerd
    fdfs_upload_appender
    fdfs_upload_file
    stop.sh
    restart.sh

二、配置 FastDFS 跟踪器

1、复制 FastDFS 跟踪器样例配置文件,并重命名:

# cd /etc/fdfs/
# cp tracker.conf.sample tracker.conf

2、编辑跟踪器配置文件:

# vi /etc/fdfs/tracker.conf 
修改的内容如下: 
disabled=false
port=22122
base_path=/opt/fdfs/tracker

3、创建基础数据目录(参考基础目录 base_path 配置):

# mkdir -p /opt/fdfs/tracker

4、防火墙中打开跟踪器端口(默认为 22122):

# vi /etc/sysconfig/iptables
添加如下端口行:
-A INPUT -m state --state NEW -m tcp -p tcp --dport 22122 -j ACCEPT 重启防火墙:
# service iptables restart

5、启动 Tracker:

# /etc/init.d/fdfs_trackerd start 
(初次成功启动,会在/fastdfs/tracker 目录下创建 data、logs 两个目录) 
查看 FastDFS Tracker 是否已成功启动:
# ps -ef | grep fdfs

6、关闭 Tracker:

# /etc/init.d/fdfs_trackerd stop

7、设置 FastDFS 跟踪器开机启动:

# vi /etc/rc.d/rc.local 添加以下内容:
## FastDFS Tracker 
/etc/init.d/fdfs_trackerd start

三、配置 FastDFS 存储(192.168.4.125)

1、复制 FastDFS 存储器样例配置文件,并重命名:

# cd /etc/fdfs/
# cp storage.conf.sample storage.conf

2、编辑存储器样例配置文件:

# vi /etc/fdfs/storage.conf
修改的内容如下:
    disabled=false
    port=23000
    base_path=/opt/fdfs/storage
    store_path0=/opt/fdfs/storage
    tracker_server=192.168.4.121:22122
    http.server_port=8888 
(其它参数保留默认配置,具体配置解释请参考官方文档说明: http://bbs.chinaunix.net/thread-1941456-1-1.html )

3、创建基础数据目录(参考基础目录 base_path 配置):

# mkdir -p /fastdfs/storage

4、防火墙中打开存储器端口(默认为 23000):

# vi /etc/sysconfig/iptables
添加如下端口行:
   -A INPUT -m state --state NEW -m tcp -p tcp --dport 23000 -j ACCEPT 重启防火墙:
   # service iptables restart

5、启动 Storage:

# /etc/init.d/fdfs_storaged start (初次成功启动,会在/fastdfs/storage 目录下创建 data、logs 两个目录) 
查看 FastDFS Storage 是否已成功启动
# ps -ef | grep fdfs

6、关闭 Storage:

# /etc/init.d/fdfs_storaged stop

7、设置 FastDFS 存储器开机启动:

# vi /etc/rc.d/rc.local
添加:
    ## FastDFS Storage 
    /etc/init.d/fdfs_storaged start

四、文件上传测试(192.168.4.121)

1、修改 Tracker 服务器中的客户端配置文件:

# cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf 
# vi /etc/fdfs/client.conf
base_path=/opt/fdfs/tracker
tracker_server=172.18.20.170:22122

2、执行如下文件上传命令:

# /usr/bin/fdfs_upload_file /etc/fdfs/client.conf /usr/local/src/FastDFS_v5.05.tar.gz 
返回 ID 号:group1/M00/00/00/wKgEfVUYNYeAb7XFAAVFOL7FJU4.tar.gz
(能返回以上文件 ID,说明文件上传成功)

六、在每个存储节点上安装 nginx

1、fastdfs-nginx-module 作用说明

FastDFS 通过 Tracker 服务器,将文件放在 Storage 服务器存储,但是同组存储服务器之间需要进入文件复制,有同步延迟的问题。假设 Tracker 服务器将文件上传到了 192.168.4.125,上传成功后文件ID 已经返回给客户端。此时 FastDFS 存储集群机制会将这个文件同步到同组存储 192.168.4.126,在文件还没有复制完成的情况下,客户端如果用这个文件 ID 在 192.168.4.126 上取文件,就会出现文件无法访问的错误。而 fastdfs-nginx-module 可以重定向文件连接到源服务器取文件,避免客户端由于复制延迟导致的文件无法访问错误。
(解压后的 fastdfs-nginx-module 在 nginx 安装时使用)

2、上传 fastdfs-nginx-module_v1.16.tar.gz 到/usr/local/src
3、解压

# cd /usr/local/src/
# tar -zxvf fastdfs-nginx-module-master.tar.gz

4、修改 fastdfs-nginx-module 的 config 配置文件

# cd fastdfs-nginx-module/src
# vi config
确保
CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon/"

(注意:这个路径很重要的,不然在 nginx 编译的时候会报错的)

5、上传当前的稳定版本 Nginx(nginx-1.6.2.tar.gz)到/usr/local/src 目录

6、安装编译 Nginx 所需的依赖包

# apt-get install openssl libssl-dev libperl-dev

7、编译安装 Nginx(添加 fastdfs-nginx-module 模块) # cd /usr/local/src/

# tar -zxvf nginx-1.6.2.tar.gz
# cd nginx-1.6.2
# ./configure --prefix=/usr/local/nginx --add-module=/usr/local/src/f/fastdfs-nginx-module/src
apt-get install pcre
#./configure --prefix=/usr/local/nginx --add-module=/usr/local/src/f/fastdfs-nginx-module-master/src --with-pcre=/usr/local/src/f/pcre-8.38

// ./configure --prefix=/usr/local/nginx --add-module=/usr/local/src/f/fastdfs-nginx-module-master/src --with-pcre=/usr/local/src/f/pcre-8.38 --with-http_ssl_module --with-openssl=/usr/local/src/f/openssl-1.1.0-pre1

# make && make install

(另：源码安装pcre

7.1、PCRE库的安装：

    官网：http://www.pcre.org/
    下载页面：ftp://ftp.csx.cam.ac.uk/pub/software/programming/pcre/
    选择最新版本下载：ftp://ftp.csx.cam.ac.uk/pub/software/programming/pcre/pcre-8.10.tar.gz

7.1.1、解压：

tar –zxvf pcre-8.10.tar.gz
解压目录为：pcre-8.10
然后进入到 cd pcre-8.10，进行配置、编译、安装

7.1.2、配置

./configure  --prefix=/usr/local/pcre

7.1.3、编译pcre

make
make pcre时会出错
libtool: compile: unrecognized option `-DHAVE_CONFIG_H'
libtool: compile: Try `libtool --help' for more information.
make[1]: *** [pcrecpp.lo] Error 1
make[1]: Leaving directory `/home/mfcai/pcre-8.10'
make: *** [all] Error 2
安装build-essential
apt-get install build-essential

7.1.4、安装pcre

make install

8、复制 fastdfs-nginx-module 源码中的配置文件到/etc/fdfs 目录,并修改

# cp /usr/local/src/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/ 
# vi /etc/fdfs/mod_fastdfs.conf
修改以下配置:
connect_timeout=10
base_path=/tmp
tracker_server=192.168.4.121:22122
storage_server_port=23000
group_name=group1
url_have_group_name = true
store_path0=/opt/fdfs/storage

9、复制 FastDFS 的部分配置文件到/etc/fdfs 目录

# cd /usr/local/src/FastDFS/conf
# cp http.conf mime.types /etc/fdfs/

10、在/fastdfs/storage 文件存储目录下创建软连接,将其链接到实际存放数据的目录

# ln -s /opt/fdfs/storage/data/ /opt/fdfs/storage/data/M00

11、配置 Nginx

简洁版 nginx 配置样例:
user root; 
worker_processes 1; 
events {
    worker_connections 1024;
}
http {
    include mime.types;
    default_type application/octet-stream;
    sendfile on;
    keepalive_timeout 65;
    server {
        listen 8888;
        server_name localhost;
        location ~/group([0-9])/M00 {
            #alias /opt/fdfs/storage/data;
            ngx_fastdfs_module;
        }
        error_page 500 502 503 504 /50x.html;
        location = /50x.html {
            root html; 
        }
    } 
}

说明：
A、8888 端口值是要与/etc/fdfs/storage.conf 中的 http.server_port=8888 相对应,
    因为 http.server_port 默认为 8888,如果想改成 80,则要对应修改过来。
B、Storage 对应有多个 group 的情况下,访问路径带 group 名,如/group1/M00/00/00/xxx,
对应的 Nginx 配置为:
location ~/group([0-9])/M00 {
    ngx_fastdfs_module;
}
C、如查下载时如发现老报 404,将 nginx.conf
    第一行 user nobody 修改为
    user root 后重新启动
D、由于Fdfs安装时，libfdfsclient.so 位于/usr/lib64目录下，需做软连接处理。
    #ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so

转载于:https://my.oschina.net/zhangzexing/blog/907077