storage存储
长烟慢慢
oracle ebs dba
展开
-
大话存储系列2——计算机内部的IO世界
1.、总线:IO是通过共享一条总线的方式来实现的,总线也就是一条或者多条物理上的导线,每个部件都接到这些导线上,导线上的电位每个时刻都是相等的(这个地方需要注意下,之前没有考虑这个问题),这样总线上的所有部件都会受到相同的信号。也就是说,这条总线是共享的,同一个时刻只能有一个部件在接收或者发送,是全单工的工作模式。所有的部件按照另一条总线,也就是仲裁总线或者中断总线上给出的原创 2013-03-05 11:27:00 · 3978 阅读 · 2 评论 -
NFS 与RPC
转自鸟哥的网站:http://vbird.dic.ksu.edu.tw/linux_server/0330nfs_1.php第十三章、文件服务器之一:NFS 服务器13.1 NFS 的由来与其功能 13.1.1 什么是 NFS ( Network FileSystem ) 13.1.2 什么是 RPC ( Remote Procedure Call )原创 2012-06-10 19:42:54 · 4059 阅读 · 0 评论 -
大话存储系列14——集群文件系统
文件系统是操作系统的一个重要组成部分,通过对操作系统所管理的存储空间的抽象,向用户提供统一的、对象化的访问接口,屏蔽对物理设备的直接操作和资源管理。根据计算环境和所提供功能的不同,文件系统可划分为四个层次,从低到高依次是:单处理器单用户的本地文件系统,如DOS的文件系统;多处理器单用户的本地文件系统,如OS/2的文件系统;多处理器多用户的本地文件系统,如Unix的本地文件系统;多处理器多用户的原创 2013-03-19 22:01:10 · 5656 阅读 · 0 评论 -
NIS服务器
转自鸟哥的linux私房菜:http://vbird.dic.ksu.edu.tw/linux_server/0330nfs_1.php14.1 NIS 的由来与功能 14.1.1 NIS 的主要功能:管理帐户信息 14.1.2 NIS 的运作流程:透过 RPC 服务14.2 NIS server 端的设定 14.2.1 所需要的软件 14.2.2原创 2012-06-10 19:30:52 · 2885 阅读 · 0 评论 -
NFS服务器详解
本文整理自VMware 官方网站:Storage Thin ProvisioningvSphere Storage Thin Provisioning 通过实现动态分配及物理存储容量的智能调配,可大幅提高虚拟机的存储利用率。概览通过消除存储浪费并且无需专用的存储容量,因此可以控制您的存储成本。 vSphere Storage Thin Provisio原创 2012-12-23 21:39:11 · 3160 阅读 · 0 评论 -
光纤交换机 和 SAN交换机 概念
随着企业网络数据的不断增加和网络应用的频繁,许多企业开始意识到需要专门构建自己的存储系统网络来满足日益提升的数据存储性能要求。当前,最为热门的数据存储网络就是SAN(Storage Area Network,存储区域网络),就是把整个存储当做一个单独的网络与服务器所在企业局域网连接。 它的特点就是采用传输速率较高的光纤通道与服务器网络,或者SAN网络内部组件的连接,这样,整个存储原创 2012-12-24 15:43:41 · 14702 阅读 · 1 评论 -
大话存储系列15——NFS 和 CIFS 文件系统
1、NFS 文件系统本文整理自:http://www.ibm.com/developerworks/cn/linux/l-cn-nfs/index.html?ca=drs-Sun公司估计现在大约有超过310万个系统在运行NFS,大到大型计算机、小至PC机,其中至少有80%的系统是非Sun平台。NFS是由SUN公司发展, 并於1984年推出, NFS是一个RPC service ,它使我们能原创 2013-03-20 19:18:58 · 6903 阅读 · 0 评论 -
分层存储结构
1、什么是NFS服务器 1.1Network File System的简写。 NFS 是由Sun公司发展, 并於1984年推出, NFS是一个RPC service ,它使我们能够达到文件的共享, 它的设计是为了在不同的系统间使用, 所以它的通讯协定设计与主机及作业系统无关.当使用者想用远端文件时只要用"mount"就可把remote文件系统挂接在自己的文件系统之下,原创 2012-06-09 16:01:56 · 5441 阅读 · 1 评论 -
大话存储系列0——LUN 与 LVM 名词解释
1、原创 2012-12-26 15:08:20 · 6544 阅读 · 0 评论 -
添加新硬盘并创建文件系统(Vmware 虚拟机)
背景: 由于原来的虚拟机磁盘空间异常,决定重新安装虚拟机,为了让我之前装的软件和我配置的用户环境变量等信息都保存下来。遂决定首先将以安装的软件目录用tar命令打包,然后原创 2013-09-23 17:08:35 · 4928 阅读 · 0 评论 -
LAN-Free 等备份机制介绍
LAN-Free备份主要指快速随机存储设备(磁盘阵列或服务器硬盘)向备份存储设备(磁带库或磁带机)复制数据, SAN技术中的LAN-Free功能用在数据备份上就是所谓的LAN-Free备份。原创 2014-04-14 13:44:39 · 6711 阅读 · 0 评论 -
大话存储系列4——固态硬盘(SSD)及其前景
本文整理自网络:1、简介固态硬盘(Solid State Disk、IDE FLASH DISK、Serial ATA Flash Disk)是由控制单元和存储单元(FLASH芯片)组成,简单的说就是用固态电子存储芯片阵列而制成的硬盘(目前最大容量为416GB)。固态硬盘的接口规范和定义、功能及使用方法上与普通硬盘的完全相同,.在产品外形和尺寸上也完全与普通硬盘一致,包括3.5",2.5",原创 2013-03-08 14:09:40 · 4452 阅读 · 0 评论 -
IDE、SATA、SCSI、SAS、iSCSI
IDE是并口硬盘,(5400-7200转);SATA是串口硬盘,(7200转);SCSI是服务器硬盘,(60、80针,10000转)。硬盘的传输速率:作为电脑中最重要的数据存储设备和数据交换媒介,硬盘传输速率的快慢直接影响了系统的运行速度。不同类型的硬盘,其传输速率往往差别很大。现在主流硬盘主要有三种:按照不同的接口可以分为并口ATA硬盘(即IDE硬盘)、SCSI硬盘和Serial ATA硬原创 2012-12-24 17:05:49 · 5875 阅读 · 0 评论 -
大话存储系列11——NAS、DAS、SAN三国争霸
原文转自:http://www.liusuping.com/storage/das-nas-san-cunchu-jishu-bijiao.html1、什么是NAS找了一篇非常非常好的文章,把NAS的解释的淋漓尽致,看下面的东西之前,一定要看这篇文章:转自:http://www.storageonline.com.cn/storage/nas/what-is原创 2013-03-16 19:05:54 · 3837 阅读 · 0 评论 -
大话存储系列5——RAID原理
整理自网络和大话存储2:1、预备知识:条带化当多个进程同时访问一个磁盘时,可能会出现磁盘冲突。大多数磁盘系统都对访问次数(每秒的 I/O 操作,IOPS)和数据传输率(每秒传输的数据量,TPS)有限制。当达到这些限制时,后面需要访问磁盘的进程就需要等待,这时就是所谓的磁盘冲突。 避免磁盘冲突是优化 I/O 性能的一个重要目标,而 I/O 性能的优化与其他资源(如CPU和内原创 2013-03-08 14:17:06 · 4511 阅读 · 0 评论 -
大话存储系列6——RAID实现
1、RAID卡结构:实现了raid功能的板卡(SCSI卡或者IDE扩展卡)就叫做RAID卡。同样,在主板南桥芯片上也可实现RAID功能,由于南桥中的芯片不能靠CPU来完成他们的功能,所以这些芯片完全靠电路逻辑来自己运算,尽管速度很快,但是功能相对插卡式的RAID卡要弱。从某些主板的宣传广告中就可以看到,所谓板载raid芯片就是指南桥中有实现raid功能的芯片。这样操作系统不需要作任何改动,原创 2013-03-10 15:18:46 · 5772 阅读 · 0 评论 -
基于逻辑卷管理的磁盘空间调整
z目标:将VolGroup-lv_home缩小到20G,并将剩余的空间添加给VolGroup-lv_root 1.首先查看磁盘使用情况[root@localhost ~]# df -h文件系统 容量 已用 可用 已用% 挂载点Filesystem Size Used Avail Use% Mounted on/dev/mapper/VolGroup-lv_root 154G 7.9G 139G 6原创 2014-10-12 22:47:23 · 1564 阅读 · 0 评论 -
Openfiler 安装+iSCSI配置
Openfiler是一款非常好的存储管理操作系统,开源免费,通过web界面对存储磁盘的管理,支持现在流行的网络存储技术IP-SAN和NAS,支持iSCSI、NFS、SMB/CIFS及FTP等协议。Openfiler能把标准x86/64架构的系统变成一个强大的NAS、SAN存储和IP存储网关,为管理员提供一个强大的管理平台,并能能应付未来的存储需求。依赖如VMware,Virtual Iron和原创 2013-09-07 15:03:18 · 13991 阅读 · 0 评论 -
大话存储系列23——存储系统内部IO 下
5、层与层之间的调度员:IO ManagerIO Manager 或称IO Scheduer。每个操作系统都会有这样一个角色,它专门负责上层程序的IO请求,然后将IO请求下发到对应的模块和设备驱动中执行,然后将结果通知给上层程序,当某个程序师徒访问某个文件的时候,它其实并没有和文件系统打交道,而只是在与IO Manager打交道,而只是在与IO Manager 打交道。1、某时原创 2013-04-09 19:50:20 · 2386 阅读 · 0 评论 -
光纤通道协议网络拓扑结构简介
光纤通道网络中有三种不同的拓扑结构:点对点拓扑结构,仲裁环路拓扑结构,交换式光纤网络拓扑结构:http://download.csdn.net/detail/changyanmanman/5305062问: 大多数磁盘阵列都是通过两个控制器后端的端口,组成1/2/4条FC-AL环,来连接所有磁盘。 FC-AL仲裁环的协议规定,同一时刻只有两个设备能传送数据,也就是说原创 2013-04-26 19:59:49 · 3812 阅读 · 0 评论 -
大话存储系列1——对存储的初步认识
这篇文章转载自大牛Hellodba,连接如下:http://www.hellodb.net/2009/08/storage.html那这篇文章开始我的存储之旅,我将会在近期整理出关于存储的更多细节。IOPSIOPS (Input/Output Operations Per Second),即每秒进行读写(I/O)操作的次数,多用于数据库等场合,衡量随机访问的性能。存储端的IOPS性能和主机端的原创 2013-03-02 19:48:44 · 3717 阅读 · 0 评论 -
大话存储系列3——磁盘原理
1、磁头扫描方式FCFS(First Come First Serve):先来先服务SSTF(Shortest Seek Time First):控制器会先让磁头跳到离当前磁头位置最近的一个IO磁道去读写,然后最近的下一个。SCAN(回旋扫描模式):电梯模型,从一端到另一端。2、磁盘的缓存磁盘缓存分为读缓存和写缓存。读缓存是指,操作系统为已读取的文件数据,在内存原创 2013-03-05 16:09:50 · 3101 阅读 · 0 评论 -
大话存储系列7——文件系统和IO处理流程
1、文件系统在早期的计算机系统中,每个程序都必须自己管理磁盘,在磁盘中放自己的数据,程序需要直接和磁盘控制器打交道。有多少个程序要利用磁盘,就有多少个磁盘交互启动接口。在没有文件系统的计算机上,如果一个程序要向磁盘上存储一些自己的数据,那么这个程序只能自己调用磁盘控制器启动(无VM的情况下),或者调用VM提供的接口,对磁盘写数据。而写完数据后,很有可能被其他程序的数据覆盖掉。引入文件系统后原创 2013-03-12 21:36:52 · 3194 阅读 · 0 评论 -
大话存储系列8——磁盘阵列
JBOD(just a Bound Of Disk)只是一串磁盘:这就是盘柜,里面没有带RAID 控制器。 而我们说的盘阵(磁盘阵列)是指的自带RAID控制器的盘柜。磁盘阵列将内部的磁盘经过外部SCSI接口连接到主机上段的SCSI接口。此时,整个磁盘对于主机来说,就是主机SCSI总线上的一个或者多个设备,具有一个或者多个SCSI ID。所有的逻辑磁盘都以LUN的形势呈现给主机。hp EVA原创 2013-03-13 16:04:23 · 2063 阅读 · 0 评论 -
大话存储系列9——FC协议
1、Fibre Channel Fibre 是网状, Fiber是光纤,这两个词现在基本上弄的很混乱,我们要讲的FC是网状通道的意思。我们所说的FC协议时一套完全独立的网络协议,比以太网要复杂的多,它除了用光纤作为传输介质,也可以用铜线,甚至是双绞线,有些时候甚至是无线、微波、红外线等都可以来实现FC协议的物理层。所以人们所说的FC协议时光纤通道协议本身就不准确。同样我们可以想到,以太原创 2013-03-13 19:43:50 · 4556 阅读 · 0 评论 -
大话存储系列10——FC 与 iSCSI 尖峰对决
综述:2003 年,互联网工程任务组(IETF)批准iSCSI(互联网SCSI)协议后,很多人开始将以太网作为分块存储网络使用(成为“基于IP 的存储”)。一直以来,人们采用iFCP和FCIP 等现有协议发送基于IP 的SCSI 命令行,主要允许FC 存储区域网络(SAN)通过IP 交换数据。凭借iSCSI,SCSI 命令行可以“端对端”地传送到世界各地的以太网中。ISCSI SAN技术正原创 2013-03-15 20:32:34 · 4435 阅读 · 0 评论 -
大话存储系列12——集群的本质
1、引子随着网络视频行业不断走向成熟,越来越多的企业都参与到视频网站建设中来,竞争愈加激烈,而带宽、服务器、存储、编解码等各项技术直接关系到竞争优势。存储系统作为视频数据的载体,其IO性能和可扩展性、可靠性对整套系统架构起着至关重要的作用。集中存储在面对海量数据存储时,以往用户会采用传统的使用方法:集中存储,将所有的数据存放于一个单一大容量盘阵或者存储服务器中,并采用较高等级的原创 2013-03-17 22:57:33 · 2338 阅读 · 0 评论 -
大话存储系列16——VFS 文件系统
文章整理自网络:本文阐述 Linux 中的文件系统部分,源代码来自基于 IA32 的 2.4.20 内核。总体上说 Linux 下的文件系统主要可分为三大块:一是上层的文件系统的系统调用,二是虚拟文件系统 VFS(Virtual Filesystem Switch),三是挂载到 VFS 中的各实际文件系统,例如 ext2,jffs 等。本文侧重于通过具体的代码分析来解释 Linux 内核中原创 2013-03-21 13:07:18 · 2792 阅读 · 0 评论 -
大话存储系列13——对象存储
1、对象存储系统(Object-Based Storage System)是综合了NAS和SAN的优点,同时具有SAN的高速直接访问和NAS的数据共享等优势,提供了高可靠性、跨平台性以及安全的数据共享的存储体系结构。传统块存储与对象存储结构对比示意图:对象存储系统组成对象(Object)包含了文件数据以及相关的属性信息,可以进行自我管理原创 2013-03-19 06:21:58 · 2243 阅读 · 0 评论 -
大话存储系列20——数据存储与数据管理综述
存储系统又两大部分内容:数据存储 和 数据管理。数据存储包括:存储控制器硬件、磁盘、适配器、网络传输通道、RAID管理、LUN管理等,这部分主要功能就是提供基本的裸数据存储服务;数据管理包括:Tier、Snapshot、Clone等数据处理模块。存储系统实时监控物理空间使用情况,一旦所有用户整体空间消耗达到临界值,则需要马上扩大物理容量。然而,对于空间使用率的监控方面,如果存储原创 2013-04-08 14:49:39 · 1983 阅读 · 0 评论 -
大话存储系列17——GFS 文件系统
GFS(Global File System)是Minnesota大学开发的基于SAN的共享存储的集群文件系统,后来Sistina公司将GFS产品化。GFS在很长一段时间都是以源代码开放软件的形式出现的,后来由于Sistina希望通过向用户提供支持和服务的计划未能取得成功,为了要促进自己的财务收入,Sistina在2001年将GFS变成了一种“专有软件”。Red Hat公司收购Sistina之后,原创 2013-03-24 16:14:00 · 3466 阅读 · 0 评论 -
大话存储系列19——数据容灾
数据备份系统只能保证数据被安全地复制了一份,但是一旦生产系统发生故障,比如服务器磁盘损坏致使数据无法读写、主板损坏造成直接无法开机或者机房火灾等意外事件,我们必须将备份的数据尽快地恢复到生产系统中继续生产,这个动作就叫做容灾。容灾可以分为四个级别:数据级容灾:也就是只考虑将生产站点的数据如何同步 到远程站点即可。与应用结合的数据级容灾:也就是可以保证对应应用程序数据一致性的数据同步,以原创 2013-04-05 07:50:24 · 2971 阅读 · 0 评论 -
暂无
1、原创 2013-04-04 20:31:22 · 1405 阅读 · 0 评论 -
大话存储系列18——数据备份与恢复
备份一般会有文件级的备份,还有块级的备份两种,我们接下来先简要了解一下这两种备份的区别。文件级备份:备份软件只能感知到文件这一层,将磁盘上的所有文件,通过调用文件系统的接口备份到另一个介质上,所以文件级备份软件,要么依靠操作系统提供的API来备份,要么本身具有文件系统的功能,可以识别文件系统元数据。其机制就是将数据以文件的形势独处,然后在将独处的文件存储在另外一个介质上。这些文件在原来的介质上原创 2013-03-28 21:16:34 · 12840 阅读 · 0 评论 -
大话存储系列19——数据备份与恢复 下
4、卷克隆(Clone)克隆是指源数据集某时间点的一份或者几份实实在在的实体复制,利用快照做克隆:首先对某个源数据集(源卷或者源文件系统)创建一份快照,之后将这份快照执行的所有数据块阯出来到一个额外的存储空间,这样,被复制出来的所有数据就组成了源数据集在那个时刻的一个克隆实体。历史是不能回过头去改变的,但是快照却是可写的(以前我一直以为快照时只读的),其实可写的Snapshot也只不过是对原创 2013-03-31 22:15:05 · 2327 阅读 · 0 评论 -
大话存储系列21——存储系统内部IO 上
1、IT系统的IO结构图2、应用程序层IO应用层程序是计算机系统内主动发起IO请求的大户,但是要知道,计算机内不止有应用程序可以向底层存储设备主动发起IO请求,其他的,比如文件系统自身、卷管理层自身、适配器驱动层自身等,都可以主动发起IO。当然,只有应用程序发起的IO才可以修改用户实体数据内容,而其他角色发起的IO一般只是对数据进行移动、重分布、校验、压缩、加密等动原创 2013-04-09 05:04:17 · 2427 阅读 · 0 评论 -
大话存储系列22——存储系统内部IO 中
4、卷管理层IO卷管理层在某种程度上来讲是为了弥补底层存储系统的一些不足之处的,比如LUN空间的动态管理等。卷管理层最大的任务是做Block级的映射。对于IO的处理,卷层只做了一个将映射翻译之后的IO向下转发的动作以及反向过程。另外,应用程序可以直接对某个卷进行IO操作而不经过文件系统。我们所说的不经过文件系统,并不是说Bypass系统内核缓存的Direct IO,而是完全不需要FS处理任何块原创 2013-04-09 19:48:30 · 2175 阅读 · 0 评论 -
ASM 4——Multipath实现LUN设备名称的持久化
转载: http://rootking.blog.51cto.com/2619611/476212 LINUX下多路径(multi-path)介绍及使用2011-01-11 00:52:22标签:网络存储 linux ipsan 多路径 休闲原创作品,允许转载,转载时请务必以超链接形式标明文章 原始出处 、作者信息和本声明。否则将追究法律责任。http://rootking原创 2014-01-07 11:14:35 · 1903 阅读 · 0 评论