FastDFS的配置、部署与API使用解读(6)FastDFS配置详解之Storage配置

转载 2015年11月18日 17:13:30



《Poechant的FastDFS的配置、部署与API使用教程》

FastDFS的配置、部署与API使用解读——(1)入门使用教程

FastDFS的配置、部署与API使用解读——(2)Java API:根据InputStream、文件名、文件长度上传文件

FastDFS的配置、部署与API使用解读——(3)Java API:根据InputStream、文件名、文件长度,采用IO流直接转换的方式上传文件

FastDFS的配置、部署与API使用解读——(4)设置FastDFS配置参数的两种方式

FastDFS的配置、部署与API使用解读——(5)FastDFS配置详解之Tracker配置

FastDFS的配置、部署与API使用解读——(6)FastDFS配置详解之Storage配置

FastDFS的配置、部署与API使用解读——(7)关于FastDFS的Nginx的一些Q&A汇总

FastDFS的配置、部署与API使用解读——(8)FastDFS配置详解之Clinet配置及其两种初始化方式


FastDFS的配置、部署与API使用解读(6)FastDFS配置详解之Storage配置

  • 作者:柳大·Poechant(钟超)
  • 邮箱:zhongchao.ustc#gmail.com(# -> @)
  • 博客:Blog.CSDN.net/Poechant
  • 日期:Nov 21th, 2011

1 基本配置

disabled

#func:该配置文件是否生效
#valu:
## true:无效
## false:生效
disabled=false

group_name

#func;本storage server所属组名
group_name=group1

bind_addr

#func:绑定本storage server的IP
bind_addr=

client_bind

#func:bind_addr是针对server的,当指定bind_addr时,本参数才有效。
#valu:
## true:绑定bind_addr所指定的IP
## false:绑定本机的任意IP
client_bind=true

port

#func:storage server端口
port=23000

connect_timeout

#func:连接超时
connect_timeout=30

network_timeout

#func:网络超时
network_timeout=60

heart_beat_interval

#func:本storage向tracker发送心跳时间间隔
heart_beat_interval=30

stat_report_interval

#func:硬盘存储空间使用情况检测时间间隔
stat_report_interval=60

base_path

#func:base_path
base_path=/home/michael/fdfs/base4storage

max_connections

#func:本storage server支持的最大并发连接数
max_connections=256

buff_size

#func:buff size to recv/send data
buff_size=256KB

work_thread

#func:work thread count, should <= max_connections
#valu:默认为4
#sinc:v2.0
work_thread=4

store_path_count / store_path

#func:storage path的个数
#valu:默认为1
store_path_count=1

#func:根据store_path_count的值,如果是N个,就要有store_path0, store_path1 ... store_path(N-1)
#valu:
store_path0=/home/michael/fdfs/storage0

subdir_count_per_path

#func:FastDFS存储文件时,默认采用了两级目录。这里配置存放文件的目录个数
subdir_count_per_path=32

tracker_server

#func:tracker_server 的列表 要写端口号
tracker_server=192.168.6.188:22122
tracker_server=192.168.6.189:22122
tracker_server=192.168.6.190:22122

log_level

#func:
log_level=info

run_by_group

#func:
run_by_group

run_by_user

#func
run_by_user

allow_hosts

#func:允许连接的客户端IP列表
allow_hosts=*

file_distribute_path_mode

#func:文件分布到data path的方式
#valu:
## 0:轮询
## 1:随机,根据哈希code
file_distribute_path_mode=0

file_distribute_rotate_count

#func:当file_distribute_path_mode设置为0(轮询)时,该值才有效。功能是,当写文件计数打到该值时,转至下一个path。
file_distribute_rotate_count=100

thread_stack_size

#func:线程栈大小
#valu:要求至少512KB
thread_stack_size=512KB

upload_priority

#func:上传优先级。只有tracker.conf中store_server=2时,才有效。
#valu:值约小,优先级越高。默认为10.
upload_priority=10

if_alias_prefix

#func:
#valu:
if_alias_prefix=

check_file_duplicate

#func:是否检查file重复。但为1时,使用FastDHT存储文件索引
#valu:默认为0
## 1, yes, true or on:check
## 0, no, false or off:不check
check_file_duplicate=0

key_namespace

#func:当上个参数设定为1或yes时(true/on也是可以的),在FastDHT中的命名空间
key_namespace=FastDFS

keep_alive

#func:与FastDHT的连接方式
#valu:默认为0,短连接
## 0:短连接(short connection)
## 1:长连接(persistent connection)
keep_alive=0

2 IO

disk_rw_separated

#func:是否I/O分离
#valu:默认为true
## true:分离
## false:不分离
disk_rw_separated=true

disk_rw_direct

#func:是否直接写,不使用cache
#value:
## true:直接写
## false:不直接写
disk_rw_direct=false

disk_reader_threads

#func:每个storage base path的读线程数。对于disk_rw_separated=true的方式该值为0.
#valu:默认为1
disk_reader_threads=1

disk_writer_threads

#func:每个storage base path的写线程数。对于disk_rw_separated=true的方式该值为0.
#valu:默认为1
disk_writer_threads=1

3 同步

#func:同步文件时,如果从binlog中没有读到要同步的文件,休眠N毫秒后重新读取。
#valu:单位为毫秒。0表示不休眠,立即再次尝试读取。
sync_wait_msec=50

sync_interval

#func:同步一个文件后,在下次进行同步前的休息时间
#valu:单位为毫秒
sync_interval=0

sync_start_time

#func:每天存储同步的开始时间。
#valu:HH:mm
sync_start_time=00:00

sync_end_time

#func:每天存储同步的结束时间。
#valu:HH:mm
sync_end_time=23:59

write_mark_file_freq

#func:把storage的mark文件定期同步到磁盘的时间间隔
#valu:单位为秒
write_mark_file_freq=500

fsync_after_written_bytes

#func:当写大文件时,每写入N个字节,调用一次系统函数fsync将内容强行同步到硬盘。
#valu:0表示从不调用fsync
fsync_after_written_bytes=0

sync_log_buff_interval

#func:同步或刷新日志信息到硬盘的时间间隔
#valu:单位为秒
sync_log_buff_interval=10

sync_binlog_buff_interval

#func:同步binlog(更新操作日志)到硬盘的时间间隔
#valu:单位为秒
sync_binlog_buff_interval=60

sync_stat_file_interval

#func:把storage的stat文件同步到磁盘的时间间隔
#valu:单位为秒
sync_stat_file_interval=300

4 HTTP 相关

是否启用 HTTP

#func:是否开启HTTP
http.disabled

domain

#func:如果将该项留空,则使用IP,否则可以通过tracker来redirect。
http.domain_name=

server port

#func:HTTP端口号
http.server_port

trunk size

#func:trunk file size
http.trunk_size=256KB

否需要从文件扩展名确定文件内容

#func:是否需要从文件扩展名确定文件内容
http.need_find_content_type=true

-

转载请注明来自柳大的CSDN博客:Blog.CSDN.net/Poechant

-

《Poechant的FastDFS的配置、部署与API使用教程》

FastDFS的配置、部署与API使用解读——(1)入门使用教程

FastDFS的配置、部署与API使用解读——(2)Java API:根据InputStream、文件名、文件长度上传文件

FastDFS的配置、部署与API使用解读——(3)Java API:根据InputStream、文件名、文件长度,采用IO流直接转换的方式上传文件

FastDFS的配置、部署与API使用解读——(4)设置FastDFS配置参数的两种方式

FastDFS的配置、部署与API使用解读——(5)FastDFS配置详解之Tracker配置

FastDFS的配置、部署与API使用解读——(6)FastDFS配置详解之Storage配置

FastDFS的配置、部署与API使用解读——(7)关于FastDFS的Nginx的一些Q&A汇总

FastDFS的配置、部署与API使用解读——(8)FastDFS配置详解之Clinet配置及其两种初始化方式


FastDFS的配置、部署与API使用解读(6)FastDFS配置详解之Storage配置

  • 作者:柳大·Poechant(钟超)
  • 邮箱:zhongchao.ustc#gmail.com(# -> @)
  • 博客:Blog.CSDN.net/Poechant
  • 日期:Nov 21th, 2011

1 基本配置

disabled

#func:该配置文件是否生效
#valu:
## true:无效
## false:生效
disabled=false

group_name

#func;本storage server所属组名
group_name=group1

bind_addr

#func:绑定本storage server的IP
bind_addr=

client_bind

#func:bind_addr是针对server的,当指定bind_addr时,本参数才有效。
#valu:
## true:绑定bind_addr所指定的IP
## false:绑定本机的任意IP
client_bind=true

port

#func:storage server端口
port=23000

connect_timeout

#func:连接超时
connect_timeout=30

network_timeout

#func:网络超时
network_timeout=60

heart_beat_interval

#func:本storage向tracker发送心跳时间间隔
heart_beat_interval=30

stat_report_interval

#func:硬盘存储空间使用情况检测时间间隔
stat_report_interval=60

base_path

#func:base_path
base_path=/home/michael/fdfs/base4storage

max_connections

#func:本storage server支持的最大并发连接数
max_connections=256

buff_size

#func:buff size to recv/send data
buff_size=256KB

work_thread

#func:work thread count, should <= max_connections
#valu:默认为4
#sinc:v2.0
work_thread=4

store_path_count / store_path

#func:storage path的个数
#valu:默认为1
store_path_count=1

#func:根据store_path_count的值,如果是N个,就要有store_path0, store_path1 ... store_path(N-1)
#valu:
store_path0=/home/michael/fdfs/storage0

subdir_count_per_path

#func:FastDFS存储文件时,默认采用了两级目录。这里配置存放文件的目录个数
subdir_count_per_path=32

tracker_server

#func:tracker_server 的列表 要写端口号
tracker_server=192.168.6.188:22122
tracker_server=192.168.6.189:22122
tracker_server=192.168.6.190:22122

log_level

#func:
log_level=info

run_by_group

#func:
run_by_group

run_by_user

#func
run_by_user

allow_hosts

#func:允许连接的客户端IP列表
allow_hosts=*

file_distribute_path_mode

#func:文件分布到data path的方式
#valu:
## 0:轮询
## 1:随机,根据哈希code
file_distribute_path_mode=0

file_distribute_rotate_count

#func:当file_distribute_path_mode设置为0(轮询)时,该值才有效。功能是,当写文件计数打到该值时,转至下一个path。
file_distribute_rotate_count=100

thread_stack_size

#func:线程栈大小
#valu:要求至少512KB
thread_stack_size=512KB

upload_priority

#func:上传优先级。只有tracker.conf中store_server=2时,才有效。
#valu:值约小,优先级越高。默认为10.
upload_priority=10

if_alias_prefix

#func:
#valu:
if_alias_prefix=

check_file_duplicate

#func:是否检查file重复。但为1时,使用FastDHT存储文件索引
#valu:默认为0
## 1, yes, true or on:check
## 0, no, false or off:不check
check_file_duplicate=0

key_namespace

#func:当上个参数设定为1或yes时(true/on也是可以的),在FastDHT中的命名空间
key_namespace=FastDFS

keep_alive

#func:与FastDHT的连接方式
#valu:默认为0,短连接
## 0:短连接(short connection)
## 1:长连接(persistent connection)
keep_alive=0

2 IO

disk_rw_separated

#func:是否I/O分离
#valu:默认为true
## true:分离
## false:不分离
disk_rw_separated=true

disk_rw_direct

#func:是否直接写,不使用cache
#value:
## true:直接写
## false:不直接写
disk_rw_direct=false

disk_reader_threads

#func:每个storage base path的读线程数。对于disk_rw_separated=true的方式该值为0.
#valu:默认为1
disk_reader_threads=1

disk_writer_threads

#func:每个storage base path的写线程数。对于disk_rw_separated=true的方式该值为0.
#valu:默认为1
disk_writer_threads=1

3 同步

#func:同步文件时,如果从binlog中没有读到要同步的文件,休眠N毫秒后重新读取。
#valu:单位为毫秒。0表示不休眠,立即再次尝试读取。
sync_wait_msec=50

sync_interval

#func:同步一个文件后,在下次进行同步前的休息时间
#valu:单位为毫秒
sync_interval=0

sync_start_time

#func:每天存储同步的开始时间。
#valu:HH:mm
sync_start_time=00:00

sync_end_time

#func:每天存储同步的结束时间。
#valu:HH:mm
sync_end_time=23:59

write_mark_file_freq

#func:把storage的mark文件定期同步到磁盘的时间间隔
#valu:单位为秒
write_mark_file_freq=500

fsync_after_written_bytes

#func:当写大文件时,每写入N个字节,调用一次系统函数fsync将内容强行同步到硬盘。
#valu:0表示从不调用fsync
fsync_after_written_bytes=0

sync_log_buff_interval

#func:同步或刷新日志信息到硬盘的时间间隔
#valu:单位为秒
sync_log_buff_interval=10

sync_binlog_buff_interval

#func:同步binlog(更新操作日志)到硬盘的时间间隔
#valu:单位为秒
sync_binlog_buff_interval=60

sync_stat_file_interval

#func:把storage的stat文件同步到磁盘的时间间隔
#valu:单位为秒
sync_stat_file_interval=300

4 HTTP 相关

是否启用 HTTP

#func:是否开启HTTP
http.disabled

domain

#func:如果将该项留空,则使用IP,否则可以通过tracker来redirect。
http.domain_name=

server port

#func:HTTP端口号
http.server_port

trunk size

#func:trunk file size
http.trunk_size=256KB

否需要从文件扩展名确定文件内容

#func:是否需要从文件扩展名确定文件内容
http.need_find_content_type=true

-

转载请注明来自柳大的CSDN博客:Blog.CSDN.net/Poechant

-

FastDFS Storage配置详解

1 基本配置 disabled #func:该配置文件是否生效 #valu: ## true:无效 ## false:生效 disabled=false group_name #fu...
  • u014723529
  • u014723529
  • 2015年05月21日 20:25
  • 2046

FastDFS的配置、部署与API使用解读(6)FastDFS配置详解之Storage配置

《Poechant的FastDFS的配置、部署与API使用教程》 FastDFS的配置、部署与API使用解读——(1)入门使用教程 FastDFS的配置、部署与API使用解读——(2)...
  • whb123andy
  • whb123andy
  • 2015年07月06日 14:49
  • 396

转载:FastDFS的配置、部署与API使用解读(6)FastDFS配置详解之Storage配置

本文转载自:诗商·柳惊鸿CSDN博客,链接为:http://blog.csdn.net/poechant/article/details/7213536 转载目的仅仅为方便博主自己学习。 1 ...
  • leonidasFlames
  • leonidasFlames
  • 2012年12月07日 10:06
  • 408

Centos7下FastDFS 集群配置及添加storage节点+nginx

配置最终目标 以4台服务做集群,其中2台作为tracker服务器又作为storage节点,tracker以先启动为leader,后启动为client,这个可以互换,另外两台作为纯storage节点,并...
  • xiaoweiqb
  • xiaoweiqb
  • 2017年03月29日 15:32
  • 1507

FastDFS安装、配置、部署(三)-Storage配置详解

1、基本配置# is this config file disabled # false for enabled # true for disabled disabled=false# the nam...
  • xifeijian
  • xifeijian
  • 2014年08月16日 13:29
  • 13655

FastDFS的Tracker及Storage节点添加及删除

1、增加Storage节点(通过配置,自动加入) 1)安装Storage并配置mod_fastdfs.conf及storage.conf,设置fdfs_storaged及nginx自启动 2)启动新...
  • Zhou_Andy
  • Zhou_Andy
  • 2017年02月08日 09:22
  • 4145

配置fastDFS 一个tracker管理多个Storage Group

以下是小弟总结的,一个tracker管理多个storage,经过测试好使,如果有不对或者理解有误的地方,忘大家不吝赐教。一起学习,共同进步。 1:参考下面的连接搭建完成文件服务器 centos 搭建f...
  • liang_love_java
  • liang_love_java
  • 2013年12月26日 18:10
  • 4115

FastDFS的Storage Server-storage.conf配置说明

1 基本配置 disabled #func:该配置文件是否生效 #valu: ## true:无效 ## false:生效 disabled=false group_name #func;本sto...
  • Cheney16888
  • Cheney16888
  • 2016年07月12日 13:40
  • 1385

FastDFS-Nginx扩展模块源码分析 -- mod_fastdfs原理解析

1. 背景 在大多数业务场景中,往往需要为FastDFS存储的文件提供http下载服务,而尽管FastDFS在其storage及tracker都内置了http服务, 但性能表现却不尽如人意; 作者...
  • CleverCode
  • CleverCode
  • 2016年08月22日 13:48
  • 3314

FastDFS 5.01配置文件storage.conf

# 该配置文件是否生效 # is this config file disabled # false for enabled # true for disabled disabled=false #...
  • ystyaoshengting
  • ystyaoshengting
  • 2015年09月11日 14:18
  • 1131
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:FastDFS的配置、部署与API使用解读(6)FastDFS配置详解之Storage配置
举报原因:
原因补充:

(最多只允许输入30个字)