FastDFS搭建

打造命令工具

3.1.1
sys.argv为一个list，list内的 所有数据为字符串

简介：分布式文件服务器。

目的：用来管理算法所需的小文件

部署过程：

跟踪服务器1：192.168.201.70 dfs-tracker
存储服务器1：192.168.201.69 dfs-storage-group1-1
存储服务器2：192.168.201.84 dfs-storage-group1-2

所需安装包：

1、fastdfs-master-V5.05.zip：FastDFS源码
2、libfastcommon-master.zip：（从 FastDFS 和 FastDHT 中提取出来的公共 C 函数库）
3、fastdfs-nginx-module-master.zip：storage节点http服务nginx模块
4、nginx-1.10.0.tar.gz：Nginx安装包
5、ngx_cache_purge-2.3.tar.gz：Nginx图片缓存清除模块

对于安装包中的1， 2 是所有服务器都需要的，3,4,5为存储服务器69,84所需

这里将安装包都下载在/mnt/data/fastdfs/soft_dep/目录

下载安装包 1,2

1）下载安装 libfastcommon
1.1)git clone https://github.com/happyfish100/libfastcommon.git
1.2)sudo ./make.sh && sudo ./make.sh install

2)下载安装FastDFS
2.1)git clone https://github.com/happyfish100/fastdfs.git
2.2)sudo ./make.sh && sudo ./make.sh install

安装完后可以看到下述文件：

在/etc/init.d 看到服务脚本
/etc/init.d/fdfs_storaged /etc/init.d/fdfs_trackerd

/etc/fdfs/ 看到实例配置文
client.conf.sample storage_ids.conf.sample
storage.conf.sample tracker.conf.sample

/use/bin 看到可执行程序
/usr/bin/fdfs_appender_test /usr/bin/fdfs_monitor
/usr/bin/fdfs_appender_test1 /usr/bin/fdfs_storaged
/usr/bin/fdfs_append_file /usr/bin/fdfs_test
/usr/bin/fdfs_crc32 /usr/bin/fdfs_test1
/usr/bin/fdfs_delete_file /usr/bin/fdfs_trackerd
/usr/bin/fdfs_download_file /usr/bin/fdfs_upload_appender
/usr/bin/fdfs_file_info /usr/bin/fdfs_upload_file

配置tracker服务器
1)修改tracker.conf文件
cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf
修改：/etc/fdfs/tracker.conf
只修改base_path=/mnt/data/fastdfs/tracker （/mnt/data/fastdfs/tracker是自己建的path，确保存在）

2）启动tracker服务
/etc/init.d/fdfs_trackerd start （通过sudo netstat -autlnp | grep ‘fdfs’ 查看命令正常启动）

3）配置开机启动
vim /etc/rc.d/rc.load
加入配置：
/etc/init.d/fdfs_trackerd start

配置storage服务器
1）修改storage.conf
cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf
修改/etc/fdfs/storage.conf
修改：base_path ，store_path0，tracker_server（其中base_path和store_path0路径可以一样，同样，该path需要自己新建）

2）启动storage服务
/etc/init.d/fdfs_storaged start
3)设置 Storage 开机启动
vim /etc/rc.d/rc.local
加入配置：
/etc/init.d/fdfs_storaged start

文件上传

1）登入tracker服务器，修改客户端文件
cd /etc/fdfs
cp client.conf.sample client.conf
vim client.conf
修改： base_path ,tracker_server内容 （同样需要建立base_path）

base_path=/mnt/data/fastdfs/tracker

tracker_server=192.168.201.70:22122

2)上传测试：
/usr/bin/fdfs_upload_file /etc/fdfs/client.conf img.jpeg
将会返回文件id号：类似：group1/M00/00/00/wKgz6lnduTeAMdrcAAEoRmXZPp870.jpeg

文件下载

在storage服务器上配置nginx和fastdfs-nginx-module

fastdfs-nginx-module配置：

1)wget https://github.com/happyfish100/fastdfs-nginx-module/archive/5e5f3566bbfa57418b5506aaefbe107a42c9fcb1.zip
unzip 5e5f3566bbfa57418b5506aaefbe107a42c9fcb1.zip
mv fastdfs-nginx-module-5e5f3566bbfa57418b5506aaefbe107a42c9fcb1 fastdfs-nginx-module-master

2)修改mod_fastdfs.conf

cd fastdfs-nginx-module-master/src
cp mod_fastdfs.conf /etc/fdfs/

修改mod_fastdfs.conf
connect_timeout=10
tracker_server=192.168.201.70:22122
url_have_group_name = true
store_path0=/mnt/data/fastdfs/storage

配置：nginx
1)wget -c https://nginx.org/download/nginx-1.10.1.tar.gz
cd nginx-1.10.1/
./configure –add-module=../fastdfs-nginx-module-master/src
sudo make && sudo make install

2)将fastdfs的配置文件 http.conf mime.types copy到 /etc/fdfs/目录

cd /mnt/data/fastdfs/soft_dep/fastdfs/conf

cp http.conf mime.types /etc/fdfs/

3)修改/usr/local/nginx/conf/nginx.conf文件
修改端口，为storage.conf文件中http的端口，

listen 8888;

找到：

location / {
root html;
index index.html index.htm;
}

在这个下面增加内容

location /group1/M00{
root /mnt/data/fastdfs/storage/;
ngx_fastdfs_module;

}

下载文件：

wget 192.168.201.69:8888/group1/M00/00/00/wKjJRVtMASaAPh9IAAO0hErrtRE700.jpg

或者

wget 192.168.201.84:8888/group1/M00/00/00/wKjJRVtMASaAPh9IAAO0hErrtRE700.jpg

参考：

https://www.cnblogs.com/chiangchou/p/fastdfs.html
https://blog.csdn.net/shangmingtao/article/details/78522893 （FastDFS : 开启钻牛角尖模式搞FastDFS集群）
https://www.cnblogs.com/leechenxiang/p/5530436.html （nginx + fastDFS 设置开机自动启动）
https://blog.csdn.net/xyang81/article/details/52928230 （FastDFS分布式文件系统集群安装与配置）
http://www.cnblogs.com/mafly/p/fastdfs_nginx.html （分布式文件系统 - FastDFS 配置 Nginx 模块及上传测试）
http://www.cnblogs.com/cnmenglang/p/6731209.html （FastDFS集群部署）
https://www.cnblogs.com/chiangchou/p/fastdfs.html （用FastDFS一步步搭建文件管理系统）
https://www.jianshu.com/p/4134a44a09c2 （Nginx 源码安装和简单的配置）