面向海量数据存储的对象存储技术研究

最新推荐文章于 2020-12-30 05:07:33 发布
最新推荐文章于 2020-12-30 05:07:33 发布
阅读量367 收藏
点赞数
文章标签： 数据结构
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/longgangbai/article/details/83361180
版权
<<第14届全国信息存储技术学术会议>>2006年
作者: 方汐, 杨文婧,

会议 会议记录ID : 6286842
在这个信息大爆炸的时代,伴随着各行业中数据量的不断激增,以至海量数据的大量出现,存储技术正在发生革命性的变化.专门针对海量数据存储环境,对现有存储结构进行了分析,研究了面向对象存储技术:主要包括对象存储模型、对象存储系统、以及对象存储特性.由于对象存储结构具有良好的可伸缩性、高性能、跨平台、安全数据共享等能力,使其成为海量数据存储的一个理想选择.
关键词: 海量存储, 对象存储技术, | 全部关键词
longgangbai
关注
杉岩海量对象存储系统完美替代Documentum
sandstone2019的博客
12-19 365
自2006年至今十余年来，金融行业内容管理系统通常采用Documentum+DB+NAS的整体解决方案，如下图1所示，Documentum结合DB的索引能力和NAS的存储能力，向上为影像平台等业务提供文档数据的存储和检索读取服务。 近年来随着非结构化数据的爆发性增长，由于Documentum系统架构问题，此套解决方案出现了明显性能瓶颈，杉岩海量对象存储系统（SandStone MOS）采用全分布...
StarOS 对象存储支持海量数据
zhututonggui
10-30 408
星实对象存储 大数据时代的来临，数据爆炸式增长，数据的使用模式也在发生转变，传统架构的存储系统（DAS/NAS/SAN）在实际应用中逐渐遇到了性能、数据共享、扩展能力等方面的诸多问题，已经不能满足用户需求。上海星实信息技术有限公司针对这些问题，研发了构建于通用硬件之上的高性能、高可靠、高可扩展的新型分布式存储管理软件—— 星实对象存储系统（以下，简称StarOS）。应用StarOS，用户可以采用通用服务器、普通的SATA/SAS硬盘以及主流以太网络来构建媲美传统企业级存储产品的海量存储系统。 对象存储.
面向工业大数据的对象存储技术实践 | 会员专栏
THU数据派
06-18 520
什么是对象存储对象存储一般是指以“对象”（object）为数据组织形式的存储服务。引用Wikipedia上给出的定义如下：Object storage (also kno...
基于hadoop构建对象存储系统_对象存储，一文讲透
weixin_29291185的博客
12-30 570
背景：当网盘、跑游戏、做备份、存视频……云数智趋势下，对象存储过得风生水起，从BAT的公有云到企业私有云都有出镜。IDC中国SDS市场数据显示，2018年对象存储增长率超过150%，2019Q1对象存储在中国SDS市场占据19.6%的份额，实现了“very fast”的增长。对象存储（Object Storage Service，OSS），也叫基于对象的存储，是一种解决和处理离散单元的方法，可提供...
互联网海量视频数据的存储
VioletHan7的博客
03-06 8247
原文链接：http://www.docin.com/p-86312184.html?docfrom=rrela一、背景    互联网内容提供方式转变：用户创造内容。视频应用、网络游戏、搜索引擎等互联网衍生业务迅速发展，使得海量数据存储、管理和处理成为当今互联网公司面临的严峻问题。这些信息保存在存储设备上，便是高膨胀的海量数据，表1是不同互联网应用的规模。    互联网应用海量数据的共性：    1...
面向海量数据的云存储系统实现与应用研究
12-04
### 面向海量数据的云存储系统实现与应用研究 #### 摘要与背景 随着互联网技术的快速发展，尤其是移动互联网与物联网的应用普及，数据的产生速度呈现出爆炸性的增长趋势。面对如此庞大的数据量，传统的单机存储...
面向海量数据处理的数据密集型计算发展研究.pdf
08-15
例如，研究将机器学习和人工智能技术融入数据密集型计算，以实现更智能的数据处理和分析。此外，云计算平台的普及将推动数据密集型计算向更灵活、按需服务的方向发展。 参考文献的引用展示了作者在研究过程中参考了...
面向RFID海量数据的若干数据挖掘技术研究.pdf
最新发布
09-01
"面向RFID海量数据的若干数据挖掘技术研究" 本文主要研究RFID海量数据的数据挖掘技术，旨在解决RFID技术管理供应链中的海量数据问题。RFID技术可以跟踪供应链中的单个物品的移动，RFID数据中最重要的部分就是物品的...
面向海量天文数据的分布式MySQL锥形检索研究.pdf
08-08
在当今的天文科学领域，随着大型天文观测装置的性能不断...未来，随着数据量的不断增长和新的存储技术的发展，分布式MySQL锥形检索等研究领域将会继续深化，更好地服务于天文科学以及其它需要处理海量数据的科研领域。
基于Hadoop 的海量数据的分布式存储关键技术研究
09-05
结合Haddop 在大数据处理中的应用优势，从其基本原理出发，分析分布式存储的核心HDFS 和MapＲeduce，就其分 布式存储的关键技术进行了深入研究，并在此基础上设计了一种分布式存储系统，推进海量数据的高效挖掘及处理，为相关应 用研究提供了一定的参考。 This paper， it combines with the advastages of the Haddop in large data processing application， starts from the basic principle， anyzesthe mapＲeduce distributed computing， and disscuses the key technology of the distributed storage．Then based on this，design a distributed storage system，promote the mining and processing of massive data， and provides certain reference for relevant application study．
大数据框架之HBase详解
xingchensuiyue的博客
10-16 541
目录1 简介1.1 HBase是什么？1.2 HBase特点1.2.1 海量存储1.2.2 列式存储1.2.3 极易扩展1.2.4 高并发1.2.5 稀疏存储1.3 架构2 HBase 数据结构 1 简介 1.1 HBase是什么？ HBase 的原型是 Google 的 BigTable 论文，受到了该论文思想的启发，目前作为 Hadoop的子项目来开发维护，用于支持结构化的数据存储。 HBase 是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用 HBASE 技术可在廉价 PC Server
对象存储（Object-based Storage）概述
热门推荐
宇宙无敌大帅锅
08-13 6万+
对象存储概述 什么是对象存储（OSD）？ 存储局域网（SAN）和网络附加存储（NAS）是目前两种主流网络存储架构，而对象存储（Object-based Storage)是一种新的网络存储架构，基于对象存储技术的设备就是对象存储设备（Object-based Storage Device）简称OSD。1999年成立的全球网络存储工业协会（SNIA）的对象存储设备工作组发布了ANSI的X3T10标...
海量存储:小身材容下大数据 上海相关研究通过验收
cigang4063的博客
08-13 98
　　8月13日消息：“数据大爆炸”正对大容量存储技术提出越来越迫切的需求，而在该领域，上海已取得重要进展。昨天，市科委重大项目“PB级海量存储关键技术研究与应用示范”正式通过专家验收，相关成果有望为“ 大数据 时代”提供核心基础设施。 　　研究显示，未来10年，人类新产生的...
基于hadoop构建对象存储系统_对象存储添加Hadoop、OpenStack插件
weixin_39588252的博客
12-18 179
【IT168 资讯】对象存储初创公司Scality将其存储添加到Hadoop，使用户可避免通过Hadoop自己的文件系统加载数据。他们还推出了一款针对Cinder——在OpenStack项目里面的块存储层的插件。RING是基于一组X86服务器节点的对象存储基础架构，存储对象而不是文件或块，而且可以并行操作。Scality提供的一个被称为“生产级Hadoop存储实施”使用了CDMI——由SNIA开发...
对象存储的优势有哪些？
sandstone2019的博客
03-26 4522
当网盘、跑游戏、做备份、存视频，云数智趋势下，对象存储过得风生水起，从BAT的公有云到企业私有云都有出镜。IDC中国SDS市场数据显示，2018年对象存储增长率超过150%，2019Q1对象存储在中国SDS市场占据19.6%的份额，实现了“very fast”的增长。 对象存储（Object Storage Service，OSS），也叫基于对象的存储，是一种解决和处理离散单元的方法，可提供基于分...
基于HBase的工业大数据存储实战
06-26 1324
随着工业4.0时代的到来，工业互联网和企业的智能化、信息化都将不断推进，传统的工业实时数据库和关系数据库已经难以完全胜任工业大数据的存储，以HBase为代表的NoSQL数据库正在蓬勃发展，其完全分布式特征、高性能、多副本和灵活的动态扩展等特点，使得HBase在工业大数据的存储上拥有强大的优势，打破了流程工业生产中的"数据壁垒"效应的瓶颈,可以促进工业生产水平和生产管理水平的提高。本期格物汇，就来给...
遥感影像数据的管理（一）
dianzhengtian7136的博客
04-13 962
针对遥感影像数据（Remote Sensing Image Data）的高效存储、组织、管理与发布的问题，国内外已经做了大量的相关研究工作，并取得了卓越的成果。今天我想谈一谈其中一类重要的方法是：依托传统关系型数据库构建的海量遥感影像数据存储管理系统。这类方法在实现上主要包括两条技术路线： 1、对关系型数据库管理系统（Relational DataBase Managem...
Hadoop分布式文件系统和OpenStack对象存储有何不同？
fan23v的专栏
12-25 891
摘要：“HDFS （Hadoop分布式文件系统）和OpenStack对象存储（OpenStack Object Storage）似乎都有着相似的目的：实现冗余、快速、联网的存储。什么样的技术特性让这两种系统因而不一样？这两种存储系统最终趋于融合是否大有意义？” 最近在Quora上有人提到一个问题，有关Hadoop分布式文件系统和OpenStack对象存储的不同。 问题原
云计算环境下的海量数据存储模型
"这篇文档是针对云计算中海量存储模型的介绍，主要面向初学者，讨论了传统存储方式的局限性，以及云计算如何提供解决方案。文章提到了DAS、NAS和SAN三种传统存储方式的不足，并引入了Google提出的‘云’概念，强调...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值