GlusterFS性能调优基本思路

转载 2015年11月20日 21:56:01

http://os.51cto.com/art/201402/430133.htm

http://os.51cto.com/art/201303/384252.htm  《Linux系统性能调优那些事儿》


GlusterFS主要应用在集群系统中,具有很好的可扩展性。其整体性能表现与特定应用特征、硬件和软件配置等息息相关。系统部署时,如果性能与估算或经验值相差较大,则需要根据实际情况进行性能调优


基于GlusterFS构建的集群NAS系统是一个复杂的系统工程,其整体性能表现与特定应用特征、硬件和软件配置等息息相关。系统部署时,如果性能与估算或经验值相差较大,则需要根据实际情况进行性能调优。根据Gluster系统组成,性能调优主要从硬件、OS系统和GlusterFS文件系统三大部分着手,通过测试和实验分析得出影响性能的关键点,然后有针对性的实施调优方法。导致性能问题的典型情景有如下几种:

(1)不正确的磁盘配置;

(2)不正确的网络配置;

(3)硬件本身存在故障;

(4)服务器数量不足;

(5)不正确的文件访问协议;

1、硬件调优

从一定程度上讲,GlusterFS的性能依赖于硬件基础设施,主要涉及服务器、CPU、内存、磁盘、网络等部件,硬件性能直接决定着系统理论上的最大性能。当性能不能满足应用需求时,我们应当首先分析是否硬件配置是否足够。如果硬件配置存在明显问题,可以直接通过升级硬件配置来直接提升性能,比如更多更高性能的CPU,更多的内存,更多或更快的磁盘,更多的网络接口或更快的网络。

2、OS系统调优

通常情况下,系统缺省的参数设置是为了适应更多的应用负载,但性能往往不是最优的,比如I/O调度算法、Cache参数、进程调度亲和度、磁盘文件系统参数、mount参数、网络通信参数等。可以针对具体的应用特征,基于理论分析和实验测试,对这些参数进行个性化配置,以获得更高的性能提升。

3、GlusterFS文件系统调优

Gluster的底层核心是GlusterFS分布式文件系统,为了满足不同的应用负载需求,它提供了许多可调节的系统参数,其中与性能调优相关的主要参数包括:

(1)全局Cache-Size,缺省值32MB

(2)每文件Write-Cache-Size,缺省值1MB

(3)I/O并发数量,缺省值16

(4)Read-ahead开关,缺省值On

(5)条带大小,缺省值128KB

以上这些系统参数设置没有普遍适用的经验值,需要根据实际情况进行理论分析和实验测试,从而确定最佳的系统参数。如果硬件配置足够,应该适当提升这些系统参数设置,以获得更高的整体性能。


GlusterFS性能调优基本思路

基于GlusterFS构建的集群NAS系统是一个复杂的系统工程,其整体性能表现与特定应用特征、硬件和软件配置等息息相关。系统部署时,如果性能与估算或经验值相差较大,则需要根据实际情况进行性能调优。根据...
  • liuben
  • liuben
  • 2014年01月08日 23:15
  • 10060

glusterfs性能优化

glusterfs 3.x.x版本后,客户端不再有配置文件
  • qiuhan0314
  • qiuhan0314
  • 2014年09月29日 17:22
  • 4341

java性能调优的基本思路

java性能调优的基本知识  http://wenku.baidu.com/view/0b5e5b08581b6bd97f19eab3.html Web应用影响性能的集中体现在:网络、CPU、内...
  • ajian005
  • ajian005
  • 2011年11月03日 19:22
  • 657

glusterfs分布式存储部署

glusterfs简介  GlusterFS是一个高层次的分布式文件系统解决方案。通过增加一个逻辑层,对上层使用者掩盖了下面的实现,使用者不用了解也不需知道,文件的存储形式、分布。  内部...
  • goser329
  • goser329
  • 2017年11月18日 15:56
  • 162

GlusterFS的安装与使用

http://www.bubuko.com/infodetail-666312.html ####################################### #####  ...
  • youngstonep
  • youngstonep
  • 2015年11月07日 19:49
  • 1673

Hbase+GlusterFS可行性

通过测试时证明:在分布式模式下GlusterFs可以代替hadoop的HDFS,作为Hbase的底层数据存储。            配置过程如下:                       首...
  • lin_FS
  • lin_FS
  • 2012年04月18日 15:32
  • 3268

glusterfs 不能自动挂载

To resolve the issue I changed /etc/init/mounting-glusterfs.conf, changing: exec start wait-for-sta...
  • juiyy
  • juiyy
  • 2016年07月29日 18:06
  • 818

glusterfs分布式文件系统详细原理

1.Glusterfs简介    GlusterFS是Scale-Out存储解决方案Gluster的核心,它是一个开源的分布式文件系统,具有强大的横向扩展能力,通过扩展能够支持数PB存储容量...
  • yujin2010good
  • yujin2010good
  • 2017年07月17日 22:20
  • 1561

GlusterFS源码解析 —— GlusterFS 结构体系分析

简述 经过这几天对Glusterfs的分析, 对其体系结构已经有了初步的理解。 值得庆贺的一点就是  Glusterfs 的整个体系结构非常清晰, 高度模块化的设计使得我们对他的理解和扩展变得比较容易...
  • wangyuling1234567890
  • wangyuling1234567890
  • 2014年04月27日 21:44
  • 3297

分布式文件系统glusterfs安装步骤

下载   glusterfs-3.2.0.tar.gz  源码包。 随便解压到一个目录。glusterfs 需要 fuse 的支持, 在安装开始之前请先安装 fuse。fuse可以到http://fu...
  • langeldep
  • langeldep
  • 2011年07月06日 17:34
  • 7981
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:GlusterFS性能调优基本思路
举报原因:
原因补充:

(最多只允许输入30个字)