------------------------------------重要说明------------------------------------

以下部分内容来网络,部分自华为存储官方教材

具体教材内容请移步华为存储官网进行教材下载

    网络引用内容无法找到原创,如有侵权请通知

------------------------------------重要说明------------------------------------

① 产品定位

OceanStor 9000是针对大数据的特点,使用通用x86架构硬件以Scale-out NAS系统为基

础,推出的大数据存储平台。 OceanStor 9000采用全对称架构,提供3~288节点的弹性

无缝扩展

自研分布式文件系统OceanStor DFS支持海量非结构化数据存储,实现全局统一命名空间。

提供对象存储服务,兼容Amazon S3接口、兼容OpenStack Swift接口,支持媒体云向云计算架构迁移,支持接入主流云计算生态链。

支持对接由开源Hadoop组件封装而来的FusionInsight Hadoop/Cloudera Hadoop,让用户轻松构建企业级大数据分析平台。

② 系统架构

图片.png 

OceanStor 9000大数据存储系统包含文件存储子系统WushanFS, 结构化分析子系统

WushanSQL和非结构化分析子系统FusionInsight Hadoop, 管理子系统, 对外提供针对

大数据优化的存储、 分析支撑能力。 硬件层使用通用化硬件根据各子系统需求配置的专用硬件节点, 通过以太网的ALL IP互联:

分布式文件系统 OceanStor DFS:为了解决传统存储体系结构存在的难题( 容量不易扩展、 性能不易扩展) , WushanFS分布式文件系统应运而生。 WushanFS分布式文件系统将三个传统的存储体系结构层( 文件系统、 卷管理器和 RAID) 组合为一个统一的软件层, 从而创建一个跨越存储系统中所有节点的单一智能文件系统。

 图片.png

③ 硬件体系

图片.png
 图片.png

a.  存储节点-P12

图片.png
 图片.png

 图片.png

图片.png

 图片.png

b.  存储节点-P25

图片.png 

 图片.png

图片.png
 图片.png

图片.png

c.  存储节点-P36

图片.png 

 图片.png

 图片.png

图片.png
 图片.png

图片.png 

d.  存储节点-C36

图片.png 

 图片.png

图片.png
 图片.png

 图片.png

图片.png

e.  存储节点-C72

图片.png
 图片.png

 图片.png

图片.png

图片.png

图片.png
 图片.png

④ 软件结构


图片.png

DFS适配层

HDFS Plugin 负责将HDFS协议的文件访问请求转换为NFS协议请求。

PVS( Protocoland Value-added Service)负责响应NFS/CIFS/FTP等外部应用的连接请求,同时提供快照、分级存储、远程复制等多种增值特性。

CA( Client Agent)负责NFS/CIFS/FTP等应用协议的语义解析,并发送给底层模块处理。

MDS( MetaData Service)管理文件系统的元数据,可理解为文件系统元数据的读写缓存。 MDS集群将文件系统元数据划分为树状数据结构,不同节点仅存储切割后的一部分子树。

对象存储服务适配层

提供对象存储服务,兼容Amazon S3接口、兼容OpenStack Swift接口。

分布式对象存储层

OBS( Object-Based Store)为文件系统/对象存储元数据和数据提供可靠的对象存储功能,支持多种数据保护级别,具备数据均衡分布和快速数据恢复能力。

Disk K-V Store提供硬盘级Key-Value对象存储功能。