同样数据规模的请求压力作用于挂载单ns的目录、挂载多ns的目录,如下图:左单ns 右双ns。
为什么会出现多ns的目录rpc处理时间大于单ns的rpc处理时间?
猜测,router转发请求会对该挂载点下的所有相关的namenode都发送请求。
这样,假设客户端访问请求量为n,对于挂载单ns的目录只有一个namenode,请求量为n;对于挂载两个ns的目录有两个namenode,请求量为2n
所以看着图中的挂载两个ns的目录比挂载一个ns的目录rpc处理时间要大。
从此角度看,多ns挂载方式在利用多个集群的空间时,还会导致一定的rpc增高,并不会rpc分流。
总结:在联邦多ns架构不是很成熟的背景下,还是推荐采用挂载单ns方式去使用联邦集群。
联邦(rbf)挂载单ns和多ns目录rpc对比测试
于 2022-08-22 15:26:26 首次发布