Ubuntu下部署FastDFS 5.05

转载 2016年08月30日 16:00:53

 很早前得知这样一个开源分布式的文件存储方案,一直没有正式的使用过,正好这次相册升级可以试试了,起初以为fastdfs也是通过block来优化小文件存储的,实际上也是文件形式管理,可以预见大量的小文件还是会有问题,可能更好的解决方案是淘宝TFS。不过fastdfs已远远满足我的需求了。而且及其轻量,这货在google code上早已停止更新,最新的版本可以在这里获取,目前下载的最新版本是5.05,更新于2014-12-02。在这里可以找到更多的说明。

  下载好后,server端分为两个部分,一个是tracker,一个是storage。顾名思义,前者调度管理,负载均衡,后者则是实际的存储节点。两个都能做成集群,以防止单点故障。以前的4.x版本依赖libevent,现在不需要了,只需要libfastcommon。安装方法如下:

1. 下载安装libfastcommon

git clone https://github.com/happyfish100/libfastcommon.git
cd libfastcommon/
./make.sh
./make.sh install

确认make没有错误后,执行安装,64位系统默认会复制到/usr/lib64下。

这时候需要设置环境变量或者创建软链接

export LD_LIBRARY_PATH=/usr/lib64/
ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so

2. 下载安装fastdfs

tar xzf FastDFS.tar.gz
cd FastDFS/
./make.sh
./make.sh install

确认make没有错误后,执行安装,默认会安装到/usr/bin中,并在/etc/fdfs中添加三个配置文件。

3. 修改配置文件
首先将三个文件的名字去掉sample,暂时只修改以下几点,先让fastdfs跑起来,其余参数调优的时候再考虑。
tracker.conf 中修改

base_path=/usr/fastdfs #用于存放日志。

storage.conf 中修改

base_path=/usr/fastdfs-storaged #用于存放日志。
store_path0=/usr/fastdfs0 #存放数据,若不设置默认为前面那个。
tracker_server=192.168.29.132:22122 #指定tracker服务器地址。

client.conf 中同样要修改

base_path=/usr/fastdfs #用于存放日志。
tracker_server=192.168.29.132:22122 #指定tracker服务器地址。

4. 启动tracker和storage

/usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf
/usr/bin/fdfs_storaged /etc/fdfs/storage.conf

5. 检查进程

root@ubuntu:~# ps -ef |grep fdfs
root       7819      1  0 15:24 ?        00:00:00 /usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf
root       8046      1  0 15:36 ?        00:00:01 fdfs_storaged /etc/fdfs/storage.conf start

表示启动ok了,若有错误,可以在/usr/fastdfs目录下检查日志。

6. 上传/删除测试
使用自带的fdfs_test来测试,使用格式如下:

root@ubuntu:~# fdfs_test /etc/fdfs/client.conf upload /home/steven/01.jpg
...
group_name=group1, ip_addr=192.168.29.132, port=23000
storage_upload_by_filename
group_name=group1, remote_filename=M00/00/00/wKgdhFTV0ZmAP3AZAPk-Io7D4w8580.jpg
...
example file url: http://192.168.29.132/group1/M00/00/00/wKgdhFTV0ZmAP3AZAPk-Io7D4w8580.jpg
storage_upload_slave_by_filename
group_name=group1, remote_filename=M00/00/00/wKgdhFTV0ZmAP3AZAPk-Io7D4w8580_big.jpg
...
example file url: http://192.168.29.132/group1/M00/00/00/wKgdhFTV0ZmAP3AZAPk-Io7D4w8580_big.jpg

使用fdfs_delete_file来删除文件,格式如下:

fdfs_delete_file /etc/fdfs/client.conf group1/M00/00/00/wKgdhFTV11uAXgKWAPk-Io7D4w8667.jpg

可以看到,上传ok了,这里会生成两个文件,这是fastdfs的主/从文件特性,以后再介绍。example file url是不能在浏览器中直接打开的,除非配合nginx使用,这里我不需要了。删除文件需要完整的group_name和remote_filename。


http://dorole.com/tag/fastdfs/

在 CentOS6.8 下配置安装部署FastDFS5.05+Nginx模块上传测试

本人这两天刚涉足分布式文件系统,在网上找了很多FastDFS相关文章都存在不少的坑,花了两天时间,总算还是弄出来了,针对刚涉足FastDFS分布式文件系统的童鞋,写了这篇文章,希望你们菜更少的坑,话不...

FastDFS5.05 linux 集群部署详细安装教程

1、准备 1、一台安装好CentOS-6.5-x86_64-bin-DVD1.iso的计算机(安装过程请详见《CentOS6.5系统安装及初始配置.doc》) 2、计算机接入分布式文件系统局域网中...

fastdfs在ubuntu上的部署配置

  • 2016年03月04日 11:56
  • 18KB
  • 下载

ubuntu下FastDFS+Nginx部署

  • 2015年06月25日 09:48
  • 464KB
  • 下载

浅谈淘宝分布式存储FastDFS_v5.05的环境搭建和nginx集

鉴于网上有不少文章是关于FastDFS是如何使用的,博主也顺着花了一些时间搭建了关于FastDFS的安装和上传用例,并成功在虚拟机VMware上搭了两台,使之可以成功互相在浏览器上相互访问文件。先谈一...

FastDFS_v5.05安装记录

1、软件包   FastDFS_v5.05.tar.gz   libfastcommon-master.zip   fastdfs-nginx-module_v1.16.tar.gz   zlib...

Ubuntu 14.04下部署FastDFS 5.08+Nginx 1.13.0

环境 Ubuntu 14.04 用户 admin 数据目录: /fastdfs 安装包:FastDFS v5.05 libfastcommon-master.zip fastdfs-nginx-mo...

FastDFS5.05以及所需配套环境

  • 2017年12月07日 02:23
  • 793KB
  • 下载

FastDFS_v5.05.tar.gz

  • 2017年12月04日 21:11
  • 410KB
  • 下载

Ubuntu16.04 install CUDA8.0, CuDNN5.05,Pycuda

CUDA8.0 cuDNN
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:Ubuntu下部署FastDFS 5.05
举报原因:
原因补充:

(最多只允许输入30个字)