
存储
文章平均质量分 83
介绍存储技术,包括常用存储协议、存储资源调优技术、存储数据保护技术、容灾备份技术等
静下心来敲木鱼
机会是留给有准备的人的
展开
-
计算/存储虚拟化高级特性
如果开启HA的话,当服务器A故障后,会在集群中找到空闲的资源重新启动新的虚拟机,新的虚拟机直接使用故障服务器上虚拟机使用的存储资源,使得服务器A的虚拟机能够正常运行(主机之间使用共享存储,当存储出问题了,就没办法实现HA了)开启HA功能后,系统会周期检测虚拟机状态,当物理服务器宕机等引起虚拟机故障时,系统可以将虚拟机迁移到其他物理服务器重新启动,保证虚拟机快速恢复(目前系统能够检测到的引起虚拟机故障的原因包括硬件故障和系统软件故障)因此虚拟机快照是通过多种快照技术实现的(包括内存快照、存储快照等)原创 2023-11-07 17:45:18 · 964 阅读 · 0 评论 -
存储虚拟化讲解
什么是虚拟化存储虚拟化本质上是对存储硬件资源进行抽象化,通过在物理存储系统和服务器之间加入了一个虚拟层,将物理资源的逻辑映射与物理存储分开,通过该虚拟层可以管理和控制所有的逻辑映射资源,从而管理和控制所有的物理存储资源并对服务器提供存储,不需要关注底层物理存储设备的细节对于管理员来说通过存储虚拟化实现将多种、多个存储设备的集中化管理,并根据具体的需求把存储资源动态的分配给各个服务器或应用对于用户来说。原创 2023-11-07 17:38:54 · 1653 阅读 · 0 评论 -
容灾备份——容灾系统介绍
保证关键应用在允许的时间范围内恢复,使得系统提供的服务是完整连续的,减少灾难带来的损失。当灾难发生,生产站点受到破坏时,冗余站点可以接管用户正常的业务,达到业务不间断的目的。全业务的备份,除了必要的IT相关技术,还要求具备全部的基础设施(如电话、办公地点等)存储网关将在不同存储设备上的两个卷之间建立镜像关系,将写入主卷的数据同时写到备份卷中。当主阵列故障时,可以将业务快速切换到备用阵列,从而最大可能的保障业务的连续性。在数据级容灾的基础上,在备份站点同样构建一套相同的应用系统。原创 2023-10-19 23:51:43 · 996 阅读 · 0 评论 -
存储数据保护技术——HyperClone克隆与HyperMirror卷镜像技术介绍
同步完成后,用户可以在某一时刻分裂Pair,此时从LUN便成为了主LUN的一份可用副本,该副本封存了分裂时刻主LUN的所有数据。分裂后,从LUN可以提供给主机读写,使主机可以读写和分裂时刻主LUN相同的数据,且主机对从LUN读写不会影响主LUN性能。一种冗余技术,可以为一个LUN创建多个镜像物理副本,对LUN提供持续的冗余备份保护,从而提高单个LUN的可靠性和可用性。一个主LUN最多可以选择8个从LUN,创建8个克隆LUN。分裂后可将从LUN和主LUN再次同步或者反向同步。在不中断主机业务的情况下,原创 2023-10-19 21:49:30 · 794 阅读 · 0 评论 -
存储网络传输协议——iSCSI、FCoE、IB、RDMA、NVME等协议基本讲解
NVMe标准是面向PCIE-SSD的,通过使用原生PCIE通道与CPU直连,可以免去SATA与SAS接口的外置控制器(PCH)与CPU通信所带来的延时。iSCSI就是基于IP网络的SCSI,iSCSI只是帮助SCSI能够在以太网络中进行传输,将SCSI命令和块状数据封装在TCP中的IP网络中进行传输。SSD的速率已经很快了,但是整个硬盘的整体性能,不单单取决于自己本身的性能,它还取决于中间数据传输所使用的传输速率。FC-0在FC中定义承载介质类型,FC-1定义帧编解码方式,是用于FC SAN网络传输的。原创 2023-07-05 12:54:00 · 8904 阅读 · 0 评论 -
存储接口协议——SCSI、FC、SAS、PCIE等协议基本讲解
通过光纤通道集线器的方法能将众多设备连接到一起,形成一个逻辑上的环路,这种环路可以避免环路节点上的故障不会影响整个换路上的通信-多用于小型SAN环境中,现在已不再使用)SCSI协议采用C/S架构;我们知道SCSI总线上可挂载的SCSI设备(指的存储设备)数量是有限的,一般为8个或者16个,可以用target ID(SCSI ID)来描述这些设备;包含发起方和目标方通信的服务和协议;Initialor是通过主机适配器提供的接口控制SCSI总线上的设备,实现数据在设备之间的传输和管理,是进行数据传送的控制器。原创 2023-07-05 12:53:25 · 19994 阅读 · 0 评论 -
机械硬盘(HDD)与固态硬盘(SSD)
一般来说,FTL将逻辑地址处理后,建立的映射关系包含了Flash的Block编号、Page编号等,数据读取时便根据这些信息在Flash对应的位置上找到数据,传输至Host。主轴是与盘片紧紧焊接在一起的,主轴之下有一个马达,马达转动带动主轴转动,主轴转动带动盘片转动;数据的读写由磁头来完成,这个磁头在盘片之上,正常工作时磁头与盘片之间有微小的距离,防止磁头划伤盘片;只有同一柱面所有的磁头全部读写完成后磁头才转移到写一个柱面,因为选取磁头只需通过电子切换即可,而选取柱面侧必须通过机械切换,即寻道。原创 2023-05-03 15:45:00 · 4875 阅读 · 1 评论 -
存储网络架构——DAS、NAS、SAN、分布式存储组网架构
分布式存储是通过在服务器(称之为存储服务器)上安装相应软件(例如FusionStorage),将各个服务器上的HDD、SSD等存储介质资源虚拟成一个大的存储资源池,将分散的存储资源整合到一起,在保证可靠性的同时提供多种存储服务。传统的网络存储系统采用集中的存储服务器存放所有数据,存储服务器成为系统性能的瓶颈,也是可靠性和安全性的焦点,不能满足大规模存储应用的需要。SAN向主机提供块存储,主机访问块存储(LUN),然后在其中创建文件,文件存储由主机端维护,主机与主机之间的文件系统没有同步。原创 2023-05-03 09:00:00 · 14335 阅读 · 0 评论 -
存储资源调优技术——异构虚拟化技术讲解
在本端存储系统的存储池中,本端存储系统会按虚拟化数据组织形式将映射的外部LUN创建为裸存储设备(裸存储设备就称为eDecLUN)通过设置eDevLUN的伪装属性,应用服务器会将eDevLUN识别为异构存储系统上的LUN,可以实现在线接管。元数据用于对eDevLUN的数据存储位置进行管理(其所需的存储空间由本端提供,约占130MB的空间)数据卷是外部LUN的逻辑抽象(其所需的存储空间由异构存储系统提供,不占用本端)将异构存储系统中的LUN映射给本端存储系统,供本端存储系统使用并管理的过程。原创 2023-05-02 10:30:00 · 2156 阅读 · 0 评论 -
存储资源调优技术——智能数据迁移、智能缓存分区、智能数据缓存技术讲解
目标LUN将封存Pair解除时刻源LUN的所有数据(目标LUN ID指向的数据卷ID为源数据卷0)。创建SmartMigration,源LUN和目标LUN之间建立Pair关系,然后进行数据同步。变更同步:同步过程中,当主机出现业务数据变更时,进行变更同步(不需要中断主机业务)LUN信息交换是业务信息同步后目标LUN能够顺利代替源LUN来承载业务的前提。初始同步:源LUN直接将初始业务数据完整拷贝到目标LUN。在不中断主机业务的情况下,实现源LUN上的业务完整。智能数据迁移技术是业务迁移的关键技术。原创 2023-05-02 09:45:00 · 1990 阅读 · 0 评论 -
存储资源调优技术——智能分级技术、智能服务质量控制技术讲解
自动将不同活跃的数据和不同特点的存储介质动态匹配,提高性能。NL-SAS:采用SAS的磁盘接口和SATA的盘体的综合体。SmartTier智能分级技术 基本概述 工作原理 实现SmartThier数据迁移的三个阶段 应用场景SmartQoS智能服务质量控制 基本概念 两种关键技术 应用场景原创 2023-04-30 16:01:23 · 2231 阅读 · 0 评论 -
存储资源调优技术——智能精简配置技术
Thin Lun属于存储资源的虚拟化,因此需要基于RAID 2.0+存储虚拟资源池创建Thin LUN(Thin LUN和传统的Thick LUN共存于同一个存储资源池中)由于采用Capacity-on-write技术,数据的实际存储区域和逻辑存储区域的关系按照写时分配的原则随机映射确定(不再固定)将大于物理存储空间的容量形态呈现给用户,提高存储资源利用率(不过性能相比于Thick LUN时较低的)所以在对Thin LUN进行读写时需要重定向实际存储区域和逻辑存储区域的映射关系。Thin LUN空间回收。原创 2023-05-01 08:30:00 · 3305 阅读 · 0 评论 -
容灾备份——备份技术系统架构与备份网络方案
3.备份介质----------------将数据存储到相应的备份介质中(对备份管理软件有要求)数据流和控制流都走的前端LAN网络,备份系统和应用系统分开,备份时不占用生产服务器的资源。2.备份客户端(CA)------告诉生产服务器将相关业务进行备份,传输到备份介质上。--恢复点数据------指损失的数据量(发生故障后丢失的数据)--恢复时间目标----指发生故障后多长时间进行业务切换。每周进行一次完全备份,其余每天备份和上一次备份的差异备份。4.介质服务器-------------管理备份介质。原创 2022-04-05 15:15:15 · 9659 阅读 · 0 评论 -
存储数据保护技术——HyperReplication远程复制技术讲解
基本概念:HyperReplication 远程复制远程复制是容灾备份的核心技术,可以实现远程数据备份和灾难恢复远程复制作用:远程容灾的两个标准:RTO(Recovery Time Objective)---恢复时间目标----指发生故障后多长时间进行业务切换RPO(Recovery Point Objective)---恢复点数据------指损失的数据量(主发生故障后丢失的数据)远程复制工作原理:远程复制分为主设备和从设备,主设备向从设备进行数据同步。(主→从...原创 2022-04-12 16:23:05 · 4612 阅读 · 0 评论 -
存储数据保护技术——HyperSnap快照与HyperCDP高密快照技术讲解
一种高密快速技术,为用户提供持续的数据保护功能(达到RPO≈3的效果)HyperSnap快照 快照基本概念 快照COW工作原理 快照ROW工作原理 ROW和COW的区别HyperCDP高密快照技术 高密快照基本概念 高密快照主要特点 高密快照读写原理 高密快照回滚数据过程 高密快照存储池容量阈值原创 2022-04-06 14:43:08 · 4165 阅读 · 0 评论 -
存储数据保护技术——HyperMetro双活技术讲解
哪个阵列先找到仲裁设备,哪个就为主---------是一个软件,一般安装在Linux系统中。通常部署在同城或着相近城市的来两个数据中心(300km以内)正常情况下,双活特性中的两个数据中心互为备份,且都处于运行状态。当其中一个数据中心发生故障时,可以自动切换到另一个数据中心。写入时不会写入到此空间,会写入到其它的空间中(当脑裂或者其中一个数据中心出现故障时,可以通过。空间锁定会进行动态调整,分布在两个阵列上)),会将其写入数据的空间进行锁定。通常部署在同园区的不同机房中。进行写入时(会双写到阵列。原创 2022-04-12 15:55:43 · 8838 阅读 · 0 评论 -
存储资源调优技术——重删压缩技术
减少数据占用的物理存储容量,节省存储空间(会降低性能)Fast 默认压缩算法,快速压缩,节省的空间少。是一种数据缩减技术,通过删除存储系统中的冗余数据块。数据先写入磁盘,磁盘空闲时再读取进行重复数据删除。VDI(桌面虚拟化)应用是重删常见的应用场景。在不丢失信息的前提下,通过对数据进行重新组织。数据先写入磁盘,磁盘空闲时再读取进行数据压缩。只有Thin LUN才支持数据重删压缩技术。数据库、文件服务、工程数据、地震地质数据。数据写入磁盘前进行重复数据删除。数据写入磁盘前进行数据压缩。原创 2022-04-05 18:21:48 · 2896 阅读 · 0 评论 -
存储RAID——RAID2.0+技术(块虚拟化与LUN虚拟化)
由Extent组成的LUN不支持精简置备-----精简置备(即用多少给多少,类似VM分给虚拟机的内存一样);将Extent切为密度更小的Grain组成LUN,此由Grain组成的LUN更为精简LUN,支持精简置备(SmartThin)当RAID组中有坏盘,这个时候热备盘就可以去顶替RAID组中所坏掉的那块盘,加入到RAID组中,并进行数据重构。逻辑块组(RAID组,确认RAID级别),由CK组成(每个CK都来自不同的硬盘)将硬盘划分为若干个相同大小的CK,其中一CK做热备块,其余的CK做数据块。原创 2022-03-27 22:48:35 · 6641 阅读 · 0 评论 -
存储RAID——存储基本概念与RAID级别讲解
RAID0RAID1RAID3RAID5RAID6 P+QRAID6 DPRAID10RAID50冗余技术无冗余能力镜像冗余奇偶校验分布式奇偶校验2种校验方式P+Q校验方式2种校验方式横向和斜向校验方式先RAID1,再RAID0先RAID5,再RAID0磁盘利用率100%50%(n-1)/n(n-1)/n(n-2)/n(n-2)/n50%(n-2)/n最小盘数1块2块n≥3块n≥3块n≥4块n≥4块n≥4块n≥6块允许损坏的最大盘数。原创 2022-03-27 21:35:12 · 4399 阅读 · 2 评论