Linux下安装配置FastDFS

原创 2016年05月31日 14:37:54

前言
在项目开发过程中难免会碰到上传的图片管理的问题,一般传统的方式是使用本地的文件管理,但是一旦图片的量大起来,就会遇到扩展及管理困难等问题,并且图片的访问会占用较多的服务器带宽,如果和应用放在一起会拖慢整个网站的速度,因此在图片较多的应用上,比如商城,引入一个专业的图片管理服务是必要的。
笔者在一个项目中遇到,使用者需要在APP端上传大量图片的情况,因此引入了FastDFS。
FastDFS是一个开源的分布式文件管理系统,主要提供文件的存储、同步、访问等功能,解决大容量存储及负载均衡问题。

下面介绍在Linux下安装及配置FastDFS的操作步骤:

安装环境:
OS:CentOS release 6.6 (Final)
JDK:jdk-7u79-linux-x64.tar.gz
FastDFS:FastDFS_v5.08.tar.gz
访问代理:nginx-1.8.1.tar.gz

1、基础环境的安装
JDK
由于FastDFS是在Java平台上开发的,因此需要服务器上安装Java,具体的操作步骤,可以参照笔者的另一篇博客Linux
下配置Java和Tomcat

,此处不做重点介绍。

安装zlib
依次执行如下命令

tar -zxvf zlib-1.2.8.tar.gz
cd zlib-1.2.8 
./configure 
make && make install

安装pcre
依次执行如下命令

tar -zxvf pcre-8.38.tar.gz 
cd pcre-8.38
./configure 
make && make install

安装libfastcommon
依次执行如下命令

unzip libfastcommon-master.zip 
cd libfastcommon-master
./make.sh
./make.sh install

需要注意的是,执行完上述安装后,库文件被安装在/usr/lib64目录下,但是FastDFS的默认查找地址为/usr/local/lib,因此需要建立文件的软连接,否则在安装时会找不到对应的文件。
执行如下命令:

ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so

2、安装FastDFS
依次执行如下命令

tar -zxvf FastDFS_v5.08.tar.gz 
cd FastDFS
./make.sh 
./make.sh install

如果第一步中的基础文件安装成功,这一次安装会很顺利的。

3、配置FastDFS
为FastDFS建立对应的文件存储目录

/fdfs/tracker
/fdfs/storage
/fdfs/client

安装好后会在/etc/fdfs/目录下找到对应的实例配置文件

-rw-r--r--. 1 root root 1461 5月  31 13:40 client.conf.sample
-rw-r--r--. 1 root root 7927 5月  31 13:40 storage.conf.sample
-rw-r--r--. 1 root root 7200 5月  31 13:40 tracker.conf.sample

依次配置对应的文件
配置Tracker服务器

cp tracker.conf.sample tracker.conf

修改配置内容
base_path=/fdfs/tracker

启动服务

fdfs_trackerd /etc/fdfs/tracker.conf

配置storage

cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf

修改配置
base_path=/fdfs/storage
store_path0=/fdfs/storage
tracker_server=192.168.255.143:22122

启动服务器

fdfs_storaged /etc/fdfs/storage.conf

配置Client

cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf

修改配置
base_path=/fdfs/client
tracker_server=192.168.255.143:22122

测试配置

fdfs_upload_file /etc/fdfs/client.conf install.log

如果返回

group1/M00/00/00/wKj_j1dNK22AIvsRAAAlWhKQqA4805.log

证明配置成功

4、配置FastDFS的nginx代理
解压fastdfs-nginx-module
FastDFS通过Tracker服务器,将文件放在Storage服务器存储,
但是同组之间的服务器需要复制文件,有延迟的问题.
假设Tracker服务器将文件上传到了192.168.1.80,文件ID已经返回客户端,
这时,后台会将这个文件复制到192.168.1.30,如果复制没有完成,客户端就用这个ID在192.168.1.30取文件,肯定会出现错误
这个fastdfs-nginx-module可以重定向连接到源服务器取文件,避免客户端由于复制延迟的问题,出现错误。

tar -zxvf fastdfs-nginx-module_v1.16.tar.gz 

修改配置文件
源代码:CORE_INCS="$CORE_INCS /usr/local/include/fastdfs /usr/local/include/fastcommon/"
改为:CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon/"

安装nginx

tar -zxvf nginx-1.8.1.tar.gz 
cd nginx-1.8.1
./configure \
--prefix=/usr/local/nginx \
--with-http_ssl_module \
--add-module=/root/tools/fastdfs-nginx-module/src
make && make install

配置fastdfs-nginx-module

cp /root/tools/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/

修改配置文件
base_path=/fdfs/client
tracker_server=192.168.255.143:22122
store_path0=/fdfs/storage

增加mime和http配置文件,如果少了这一步nginx可能会不能启动的,因为找不到对应的mime类型。

cd /root/tools/FastDFS/conf/
cp mime.types /etc/fdfs/
cp http.conf /etc/fdfs/

配置nginx

cd /usr/local/nginx/conf/

vim nginx.conf

添加如下配置
location / {
    root   html;
    index  index.html index.htm;
}

location /M00{
        root /fdfs/storage/data/M00;
        ngx_fastdfs_module;
}

配置nginx启动脚本

#!/bin/sh
#
# nginx - this script starts and stops the nginx daemin
#
# chkconfig:   - 85 15
# description:  Nginx is an HTTP(S) server, HTTP(S) reverse \
#               proxy and IMAP/POP3 proxy server
# processname: nginx
# config:      /usr/local/nginx/conf/nginx.conf
# pidfile:     /usr/local/nginx/logs/nginx.pid

# Source function library.
. /etc/rc.d/init.d/functions

# Source networking configuration.
. /etc/sysconfig/network

# Check that networking is up.
[ "$NETWORKING" = "no" ] && exit 0

nginx="/usr/local/nginx/sbin/nginx"
prog=$(basename $nginx)

NGINX_CONF_FILE="/usr/local/nginx/conf/nginx.conf"

lockfile=/var/lock/subsys/nginx

start() {
    [ -x $nginx ] || exit 5
    [ -f $NGINX_CONF_FILE ] || exit 6
    echo -n $"Starting $prog: "
    daemon $nginx -c $NGINX_CONF_FILE
    retval=$?
    echo
    [ $retval -eq 0 ] && touch $lockfile
    return $retval
}

stop() {
    echo -n $"Stopping $prog: "
    killproc $prog -QUIT
    retval=$?
    echo
    [ $retval -eq 0 ] && rm -f $lockfile
    return $retval
}

restart() {
    configtest || return $?
    stop
    start
}

reload() {
    configtest || return $?
    echo -n $"Reloading $prog: "
    killproc $nginx -HUP
    RETVAL=$?
    echo
}

force_reload() {
    restart
}

configtest() {
  $nginx -t -c $NGINX_CONF_FILE
}

rh_status() {
    status $prog
}

rh_status_q() {
    rh_status >/dev/null 2>&1
}

case "$1" in
    start)
        rh_status_q && exit 0
        $1
        ;;
    stop)
        rh_status_q || exit 0
        $1
        ;;
    restart|configtest)
        $1
        ;;
    reload)
        rh_status_q || exit 7
        $1
        ;;
    force-reload)
        force_reload
        ;;
    status)
        rh_status
        ;;
    condrestart|try-restart)
        rh_status_q || exit 0
            ;;
    *)
        echo $"Usage: $0 {start|stop|status|restart|condrestart|try-restart|reload|force-reload|configtest}"
        exit 2
esac

配置完成以后在启动nginx服务

service nginx start

在浏览器中访问http://192.168.255.143:8888/M00/00/00/wKj_j1dNK22AIvsRAAAlWhKQqA4805.log
如果能够下载刚刚上传的文件则配置成功。

版权声明:本文为博主原创文章,未经博主允许不得转载。

相关文章推荐

分布式文件系统 FastDFS 5.0.5 & Linux CentOS 7 安装配置

FastDFS 分布式文件系统集群与应用
  • whs99
  • whs99
  • 2016-10-26 23:08
  • 186

分布式文件系统 FastDFS 5.0.5 & Linux CentOS 7 安装配置

关于分布式文件系统FastDFS在Linux CentOS 7下的安装部署与测试~

Ubuntu Linux下FastDFS分布式文件系统的安装、配置与初步使用

一、何为分布式文件系统 “分布式文件系统,顾名思义,就是分布式+文件系统。它包含这两个方面的内涵,从文件系统的客户使用的角度来看,它就是一个标准的文件系统,提供了一系列API,由此进行文件或目录的创...

POSTGRES LINUX下安装配置

linux下ogg安装配置实战

  • 2015-08-03 15:24
  • 107KB
  • 下载

FastDFS+Nginx安装配置笔记

1.系统环境   最小化安装的 CentOS 6.2 tracker1:   192.168.68.113 tracker1:   192.168.68.116 storag...

Linux下JDK+Tomcat安装配置

  • 2014-02-28 14:09
  • 19KB
  • 下载
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:深度学习:神经网络中的前向传播和反向传播算法推导
举报原因:
原因补充:

(最多只允许输入30个字)