云计算(三):对象存储概述

背景

当今,随着数字化信息的快速增长,对象存储技术也越来越受到人们的关注。对象存储(Object Storage Service)是一种存储方式,将数据以对象的形式进行存储,并在服务器上进行管理。它是一款海量、安全、低成本、高可靠的云存储服务,可提供99.9999999999%的数据持久性,99.995%的数据可用性,具备多种存储类型供选择,全面优化存储成本。与传统的文件系统不同,对象存储不会以文件或文件夹的形式进行存储,而是将数据按照唯一的标识符进行管理和访问。这种存储方式具有高效、可靠、弹性、低成本等优点,因此被广泛应用于云计算、大数据、物联网等领域。

在实际应用中,对象存储服务器一般采用分布式架构,通过多台服务器组成一个集群,从而实现数据的高可靠性、高扩展性和高效性。同时,为了保证数据的安全性,对象存储服务器也会采用多种安全机制,如加密、访问控制等。

对象存储的定义

对象存储是用于存储非结构化数据的数据存储架构,它将数据划分为单元(对象),并存储在结构扁平的数据环境中。每个对象都包含数据以及应用可用于轻松访问和检索对象的元数据和唯一标识符。

对象存储的特点

1.高可靠性:对象存储将数据存储在多个设备中,并在设备故障时自动恢复,从而确保数据的持久性和可靠性。

2.可扩展性:对象存储可以扩展到无限数量的设备上,从而满足不断增长的存储需求。

3.高效性:对象存储服务器采用了分布式的方式进行数据存储和读取,可以实现高效的数据访问和传输。

4.灵活性:对象存储不需要像传统文件系统那样进行复杂的文件目录管理,因此更加灵活和易于管理。

5.安全性:对象存储服务器可以对数据进行加密和访问控制,从而保障数据的安全性。

对象存储的应用

1.云存储:对象存储是云存储的核心技术,可以为用户提供高可靠性、高扩展性和高效性的数据存储服务。

2.大数据:对象存储可以存储海量的数据,并能够快速地进行数据读取和分析,因此在大数据领域得到广泛应用。

3.物联网:对象存储可以为物联网设备提供高可靠性和高效性的数据存储服务,从而满足不断增长的物联网数据存储需求。

4.多媒体:对象存储可以存储大量的多媒体文件,如音频、视频、图片等,同时能够实现高效的文件读取和传输。

5.备份与归档:在降低备份和归档成本的同时,保障即时访问所有数据的能力。

比较文件存、块存储和对象存储

文件存储

文件存储将数据存储和整理到文件夹中,类似于您保存在办公室的纸质文件系统中的物理文件。如果您需要某个文件中的信息,则需要知道哪个房间、文件柜、抽屉和文件夹包含该特定文件。文件存储使用相同的分层存储结构,文件被命名,以元数据标记,然后放入文件夹中。

要找到某个数据,您需要知道查找该数据的正确路径。随着时间的推移,文件变得越来越多,搜索和检索数据文件可能会变得非常耗时。虽然可伸缩性较为有限,但通过这种方法可以很容易地存储几乎任何类型的少量数据,并且可供多个用户同时访问。

块存储

块存储在文件存储的基础上提升了性能,它将文件拆分为多个单独的块并单独存储。块存储系统会为每个原始数据块分配一个唯一标识符,当您需要访问完整的文件时,系统将使用唯一标识符将数据块重组为完整的文件。块存储不需要单一的数据路径,因此您可以将其存储在最方便的位置,并且在需要时仍然能够快速检索。

块存储非常适合需要处理大量事务型数据或使用任务关键型应用的组织,可提供低延迟和一致的性能。但是,块存储费用高昂,不提供元数据功能,并且需要操作系统才能访问块。

对象存储

如前所述,对象存储将文件存储为扁平数据环境(即存储池)中的独立对象,对象包含全部数据、唯一标识符和详细元数据(元数据包含关于数据、权限、政策和其他应急情况的信息)。对象存储最适合非结构化数据的静态存储,您只写入一次数据,但可能需要多次读取。

虽然对象存储不需要目录、文件夹和其他复杂的分层结构,但却不适合用来存储不断变化的动态数据,因为修改对象需要重写整个对象。根据您的速度和性能要求,在某些情况下文件存储和块存储可能仍然适合您的需求。

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
大数据处理 大数据概述 1 参考资料 2 提纲 大数据的定义与特征 大数据的产生和应用 大数据云计算 大数据与物联网 大数据处理平台的架构 大数据处理流程 大数据处理面临的挑战 大数据关键技术 大数据处理的关键问题 3 大数据 "大数据"是时下最火热的IT行业词汇 早在1980年,著名未来学家阿尔文· 托夫勒便在《第次 浪潮》一书中,明确提出"数据就是财富",将大数据称 为"第次浪潮的华彩乐章"。 第一次浪潮:农业阶段,约1万年前开始 第二次浪潮:工业阶段,17世纪末开始 第次浪潮:信息化阶段,20世纪50年代后期开始 "如果说IBM的主机拉开了信息化革命的大幕,那么大数据才是 第次浪潮的华彩乐章。" 大约从2009年开始,"大数据"才成为互联网信息技术行业 的流行词汇。 4 什么是大数据 数据量超过一定大小,导致常规软件无法在一个可接受的 时间范围内完成对其进行抓取、管理和处理的工作的数据 ,例如: 互联网上的网页数据 社交网站上的用户交互数据 物联网中产生的活动数据 电信网络中的话单数据 5 大数据无处不在 科学研究 基因组 LHC 加速器 地球与空间探测 企业应用 Email、文档、文件 应用日志 交易记录 Web 1.0数据 文本 图像 视频 Web 2.0数据 查询日志/点击流 Twitter/ Blog / SNS Wiki 6 进入大数据时代 2011年,中国互联网行业持有数据总量达到1.9EB(1EB字 节相当于10亿GB) 2011年,全球被创建和复制的数据总量为1.8ZB(1.8万亿 GB) 2013年,我们生成这样规模的信息量只需10分钟 2015年,全球被创建和复制的数据总量将增长到8.2EB以上 2020年,全球电子设备存储的数据将暴增30倍,达到35ZB 7 数据的度量 8 大数据的特征 9 大数据的特征-大容量Volume 根据IDC作出的估测,数据一直都在以每年50%的速度增 长,也就是说每两年就增长一倍(大数据摩尔定律)。这 意味着人类在最近两年产生的数据量相当于之前产生的全 部数据量,预计到2020年,全球将总共拥有35ZB的数据 量,相较于2010年,数据量将增长近30倍。 10 大数据的特征-时效性Velocity 从数据的生成到消耗,时间窗口非常小,可用于生成决策 的时间非常少 1秒定律:这一点也是和传统的数据挖掘技术有着本质的 不同。 11 大数据的特征-多样化Variety 结构化数据(Structured) VS. 非结构化数据( Unstructured) 结构化数据是可以用二维表结构来表示,并可存储在 数据库中的数据。 银行交易数据、民航航班信息 非结构化数据则是指那些无法通过预先定义的数据模 型表述或无法存入关系型数据库表中的数据。 无格式文本(网页、邮件等)、图像、音频、视频 12 大数据的特征-多样化Variety 非结构化数据 企业数据中,目前已有超过80%的数据是以非结构化的形式存在 的。 互联网领域,非结构化数据已占到整个数据量比例的75%以上 非结构化数据年增长速度约为63%,远超过结构化数据增长速度 32%。 13 大数据的特征-价值化Value 价值密度低,商业价值高。以视频为例,连续不间断监控 过程中,可能有用的数据仅仅有一两秒,但是具有很高的 价值 科学研究 企业应用 社会网络 14 舍恩伯格提出的大数据大特征 舍恩伯格的《大数据时代》受到了广泛的赞誉,他本人也 因此书被视为大数据领域中的领军人物。 思维变革 商业变革 管理变革 在舍恩伯格看来,大数据一共具有个特征: 全样而非抽样; 效率而非精确; 相关而非因果。 15 大数据的产生 人类社会的数据产生方式大致经历了3 个阶段,而正是数 据产生方式的巨大变化才最终导致大数据的产生。 运营式系统阶段 数据库的出现使得数据管理的复杂度大大降低 ,数据往往伴 随着一定的运营活动而产生并记录在数据库中的 ,这种数据 的产生方式是被动的 用户原创内容阶段 数据爆发产生于Web 2.0 时代,而Web 2.0 的最重要标志就是 用户原创内容 以博客、微博为代表的新型社交网络的出现和快速发展 以智能手机、平板电脑为代表的新型移动设备的出现 这个阶段数据的产生方式是主动的 感知式系统阶段 感知式系统的广泛使用 这个阶段数据的产生方式是自动的 人类社会数据量第次大的飞跃最终导致了大数据的产生 16 大数据的应用 17 大数据与大规模数据的区别 从对象角度看,大数据是大小超出典型数据库软件采集、储存、管理 和分析等能力的数据集合。大数据并非大量数据的简单无意义的堆积 ,数据量大并不意味着一定具有可观的利用前景。数据间是否具有结 构性和关联性,是 "大数据"与"大规模数据"的重要差别。 从技术角度看,大数据

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

AI Player

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值