四大开源分布式存储_Kubernetes持久化存储方案测试

在2018年的Garnter技术成熟度曲线中，容器存储出现在了技术触发期，已经开始进入大众的视野。我相信，在未来的两年内，容器存储会随着Kubernetes的进一步成熟和商业化，其地位会越来越重要。如何在五花八门的存储产品中，选择适合自己的一款，将会是IT大佬们必须要面对的问题。本次分享将会从使用场景角度分析，如何评估容器存储方案。

五花八门的存储概念

从用户角度看，存储就是一块盘或者一个目录，用户不关心盘或者目录如何实现，用户要求非常“简单”，就是稳定，性能好。为了能够提供稳定可靠的存储产品，各个厂家推出了各种各样的存储技术和概念。为了能够让大家有一个整体认识，本文先介绍存储中的这些概念。

从存储介质角度，存储介质分为机械硬盘和固态硬盘(SSD)。机械硬盘泛指采用磁头寻址的磁盘设备，包括SATA硬盘和SAS硬盘。由于采用磁头寻址，机械硬盘性能一般，随机IOPS一般在200左右，顺序带宽在150MB/s左右。固态硬盘是指采用Flash/DRAM芯片+控制器组成的设备，根据协议的不同，又分为SATA SSD，SAS SSD，PCIe SSD和NVMe SSD。

从产品定义角度，存储分为本地存储(DAS)，网络存储(NAS)，存储局域网(SAN)和软件定义存储(SDS)四大类。

• DAS就是本地盘，直接插到服务器上
• NAS是指提供NFS协议的NAS设备，通常采用磁盘阵列+协议网关的方式
• SAN跟NAS类似，提供SCSI/iSCSI协议，后端是磁盘阵列
• SDS是一种泛指，包括分布式NAS(并行文件系统)，ServerSAN等

从应用场景角度，存储分为文件存储(Posix/MPI)，块存储(iSCSI/Qemu)和对象存储(S3/Swift)三大类。

Kubernetes是如何给存储定义和分类呢？Kubernetes中跟存储相关的概念有PersistentVolume (PV)和PersistentVolumeClaim(PVC)，PV又分为静态PV和动态PV。静态PV方式如下：

动态PV需要引入StorageClass的概念，使用方式如下：

社区列举出PersistentVolume的in-tree Plugin，如下图所示。从图中可以看到，Kubernetes通过访问模式给存储分为三大类，RWO/ROX/RWX。这种分类将原有的存储概念混淆，其中包含存储协议，存储开源产品，存储商业产品，公有云存储产品等等。

如何将Kubernetes中的分类和熟知的存储概念对应起来呢？本文选择将其和应用场景进行类比。

1. 块存储通常只支持RWO，比如AWSElasticBlockStore，AzureDisk，有些产品能做到支持ROX，比如GCEPersistentDisk，RBD，ScaleIO等
2. 文件存储(分布式文件系统)支持RWO/ROX/RWX三种模式，比如CephFS，GlusterFS和AzureFile
3. 对象存储不需要PV/PVC来做资