打造命令工具
3.1.1
sys.argv为一个list,list内的 所有数据为字符串
简介:分布式文件服务器。
目的:用来管理算法所需的小文件
部署过程:
跟踪服务器1:192.168.201.70 dfs-tracker
存储服务器1:192.168.201.69 dfs-storage-group1-1
存储服务器2:192.168.201.84 dfs-storage-group1-2
所需安装包:
1、fastdfs-master-V5.05.zip:FastDFS源码
2、libfastcommon-master.zip:(从 FastDFS 和 FastDHT 中提取出来的公共 C 函数库)
3、fastdfs-nginx-module-master.zip:storage节点http服务nginx模块
4、nginx-1.10.0.tar.gz:Nginx安装包
5、ngx_cache_purge-2.3.tar.gz:Nginx图片缓存清除模块
对于安装包中的1, 2 是所有服务器都需要的,3,4,5为存储服务器69,84所需
这里将安装包都下载在/mnt/data/fastdfs/soft_dep/目录
下载安装包 1,2
1)下载安装 libfastcommon
1.1)git clone https://github.com/happyfish100/libfastcommon.git
1.2)sudo ./make.sh && sudo ./make.sh install
2)下载安装FastDFS
2.1)git clone https://github.com/happyfish100/fastdfs.git
2.2)sudo ./make.sh && sudo ./make.sh install
安装完后可以看到下述文件:
在/etc/init.d 看到服务脚本
/etc/init.d/fdfs_storaged /etc/init.d/fdfs_trackerd
/etc/fdfs/ 看到实例配置文
client.conf.sample storage_ids.conf.sample
storage.conf.sample tracker.conf.sample
/use/bin 看到可执行程序
/usr/bin/fdfs_appender_test /usr/bin/fdfs_monitor
/usr/bin/fdfs_appender_test1 /usr/bin/fdfs_storaged
/usr/bin/fdfs_append_file /usr/bin/fdfs_test
/usr/bin/fdfs_crc32 /usr/bin/fdfs_test1
/usr/bin/fdfs_delete_file /usr/bin/fdfs_trackerd
/usr/bin/fdfs_download_file /usr/bin/fdfs_upload_appender
/usr/bin/fdfs_file_info /usr/bin/fdfs_upload_file
配置tracker服务器
1)修改tracker.conf文件
cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf
修改:/etc/fdfs/tracker.conf
只修改base_path=/mnt/data/fastdfs/tracker (/mnt/data/fastdfs/tracker是自己建的path,确保存在)
2)启动tracker服务
/etc/init.d/fdfs_trackerd start (通过sudo netstat -autlnp | grep ‘fdfs’ 查看命令正常启动)
3)配置开机启动
vim /etc/rc.d/rc.load
加入配置:
/etc/init.d/fdfs_trackerd start
配置storage服务器
1)修改storage.conf
cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf
修改/etc/fdfs/storage.conf
修改:base_path ,store_path0,tracker_server(其中base_path和store_path0路径可以一样,同样,该path需要自己新建)
2)启动storage服务
/etc/init.d/fdfs_storaged start
3)设置 Storage 开机启动
vim /etc/rc.d/rc.local
加入配置:
/etc/init.d/fdfs_storaged start
文件上传
1)登入tracker服务器,修改客户端文件
cd /etc/fdfs
cp client.conf.sample client.conf
vim client.conf
修改: base_path ,tracker_server内容 (同样需要建立base_path)
base_path=/mnt/data/fastdfs/tracker
tracker_server=192.168.201.70:22122
2)上传测试:
/usr/bin/fdfs_upload_file /etc/fdfs/client.conf img.jpeg
将会返回文件id号:类似:group1/M00/00/00/wKgz6lnduTeAMdrcAAEoRmXZPp870.jpeg
文件下载
在storage服务器上配置nginx和fastdfs-nginx-module
fastdfs-nginx-module配置:
1)wget https://github.com/happyfish100/fastdfs-nginx-module/archive/5e5f3566bbfa57418b5506aaefbe107a42c9fcb1.zip
unzip 5e5f3566bbfa57418b5506aaefbe107a42c9fcb1.zip
mv fastdfs-nginx-module-5e5f3566bbfa57418b5506aaefbe107a42c9fcb1 fastdfs-nginx-module-master
2)修改mod_fastdfs.conf
cd fastdfs-nginx-module-master/src
cp mod_fastdfs.conf /etc/fdfs/
修改mod_fastdfs.conf
connect_timeout=10
tracker_server=192.168.201.70:22122
url_have_group_name = true
store_path0=/mnt/data/fastdfs/storage
配置:nginx
1)wget -c https://nginx.org/download/nginx-1.10.1.tar.gz
cd nginx-1.10.1/
./configure –add-module=../fastdfs-nginx-module-master/src
sudo make && sudo make install
2)将fastdfs的配置文件 http.conf mime.types copy到 /etc/fdfs/目录
cd /mnt/data/fastdfs/soft_dep/fastdfs/conf
cp http.conf mime.types /etc/fdfs/
3)修改/usr/local/nginx/conf/nginx.conf文件
修改端口,为storage.conf文件中http的端口,
listen 8888;
找到:
location / {
root html;
index index.html index.htm;
}
在这个下面增加内容
location /group1/M00{
root /mnt/data/fastdfs/storage/;
ngx_fastdfs_module;
}
下载文件:
wget 192.168.201.69:8888/group1/M00/00/00/wKjJRVtMASaAPh9IAAO0hErrtRE700.jpg
或者
wget 192.168.201.84:8888/group1/M00/00/00/wKjJRVtMASaAPh9IAAO0hErrtRE700.jpg
参考:
https://www.cnblogs.com/chiangchou/p/fastdfs.html
https://blog.csdn.net/shangmingtao/article/details/78522893 (FastDFS : 开启钻牛角尖模式搞FastDFS集群)
https://www.cnblogs.com/leechenxiang/p/5530436.html (nginx + fastDFS 设置开机自动启动)
https://blog.csdn.net/xyang81/article/details/52928230 (FastDFS分布式文件系统集群安装与配置)
http://www.cnblogs.com/mafly/p/fastdfs_nginx.html (分布式文件系统 - FastDFS 配置 Nginx 模块及上传测试)
http://www.cnblogs.com/cnmenglang/p/6731209.html (FastDFS集群部署)
https://www.cnblogs.com/chiangchou/p/fastdfs.html (用FastDFS一步步搭建文件管理系统)
https://www.jianshu.com/p/4134a44a09c2 (Nginx 源码安装和简单的配置)