Hadoop 中zoo_智汇华云 | 安超分布式存储在非线编系统中的应用

随着数字化技术在各行业的广泛应用，非线性编辑技术也出现在我们身边，并高速发展。非线性编辑其实就是对视频素材不按照原来的顺序和长短，随意进行编排、剪辑的方式，制作完成以后的节目可以任意改变其中某个段落长度或者插入删除其他段落。应用的领域主要在动画制作行业、广电新闻行业、中小型多媒体工作室等专业视频制作领域。

本期智汇华云，特别邀请到华云数据产品营销经理张开亮为大家带来“安超分布式存储在非线编系统中的应用”。

如今，随着影视制作水平的提高，对后端存储也不断提出更高的要求。比如，现有非编网中的工作站数量持续增多，视频素材的分辨率、码流、数量都不断增大，使得原有存储系统的性能及容量都不能满足需求。在配置存储过程中需要考虑以下两个问题：

性能需求

存储系统性能应满足目前网内多台非编工作站同时流畅操作的性能要求，对于存储系统而言，总的聚合I/O带宽需求至少为10GB/s，主要表现为读性能要求。同时，视频制作受到帧率的约束，对延迟有最低要求,因而存储系统的访问延迟应能满足大并发的情况下制作软件能流畅工作，无明显掉帧的要求。

跨平台数据共享

用户编辑网内同时存在Windows和Linux编辑工作站，工作站之间要求可数据是是共享。同时，还应能对接其它办公和业务系统，例如：媒资、审片，日常办公数据存储等。因而对存储系统而言，不但要支持多种主流操作系统，而且要支持通用的网络文件访问协议，如：NFS、CIFS、FTP等。各种基于上述接口的传统应用均可无缝的迁移至本存储系统，实现跨接口、跨节点的数据共享。

系统架构

通过对上述需求的分析和研究，我们设计了基于安超分布式存储系统的非编网整体解决方案。该系统由多台存储节点组成，并整合了现有存储系统的两台存储节点，下图为升级后存储系统的整体方案架构。

从系统结构图中可见，安超分布工存储系统由新的四个存储节点以及两台旧设备共同组件，通过万兆交换机与多台Windows工作站，Mac工作站以及办公网络相连接。所有工作站与办公网络均可访问存储系统。

在本方案中，编辑工作站等对访问性能有要求的节点均安装了安超分布式存储系统的客户端(Windows/MacOS)。办公网络中的PC机可按照自身情况选择使用通用的NAS协议或者客户端来访问安超分布式存储系统。

产品亮点

丰富访问接口

安超分布式存储支持用户以NFS/CIFS/FTP的方式访问文件数据。此外，安超分布式存储还支持REST风格的Web Service接口(兼容Amazon S3)、HDFS接口(可在Hadoop环境中替换HDFS)

优化性能

安超分布式存储的性能优势表现在两个方面。首先，对于单个客户端而言，安超分布式存储充分利用数据分布存储的特性，通过并发访问提升单个客户端访问速度，同时使用缓存、预取、延迟写等I/O优化技术，提供出众的单客户端IO性能。再者，对于整个系统的聚合性能而言，安超分布式存储具有良好的可扩展性，系统的聚合带宽和IOPS均可随节点数目的增长而线性增长。可以获得传统存储难以获得的系统聚合性能，例如：聚合I/O带宽达几十GB/s，聚合IOPS可到百万级。

声明：本站转载此文目的在于传递更多信息，并不代表赞同其观点和对其真实性负责。如涉及作品内容、版权和其它问题，请在30日内与本网联系，我们将在第一时间删除内容,本网站对此声明具有最终解释权。