【2020初春】【分布式】大规模分布式存储系统

分布式存储系统是大量普通PC服务器通过互联网连接,对外作为一个整体提供存储服务

特性:可扩展,成本低,高性能,易用

分布式系统需要考虑的问题:
1.数据分布的合理性,均匀性
2.不同PC上数据一致性
3.检测到错误时如何处理数据
4.负载均衡
5.并发控制
6.方便使用
7.数据整合来节省存储空间

存储数据结构:
1.非结构化数据:文档,图片,音视频
2.结构化数据:一般存储在关系数据库中,二维关系表结构(就是数据库中可通过规律查询到,表的形式)
3.半结构化数据:结构和内容混搭在一起,如HTML文件

分布式存储系统课分为四类:
1.分布式文件系统
非结构化数据,称为Blob数据(文档,音视频,对象之间无关联)
分布式文件系统 以块的形式存储Blob,定长块,大文件,每个数据块大小相同
2.分布式键值系统
存储关系简单的半结构化数据,与哈希表结构类似,不同点是键值系统支持分布式存放,一般用作缓存
3.分布式表格系统
存储复杂的半结构化数据(也不能太复杂,主要是对单个表格,复杂的可以用分布式数据库)
主要用于数据库技术,支持范围查找(根据主键查找一行,键值系统只查找一个)
4.分布式数据库
存储结构化数据,常见的MySQL

为了解决关系数据库的不可扩展性,不方便同时布置到多个节点上,提出了非关系数据库(NoSQL)

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
大规模分布式存储系统:原理解析与架构实战》是分布式系统领域的经典著作,由阿里巴巴高级技术专家“阿里日照”(OceanBase核心开发人员)撰写,阳振坤、章文嵩、杨卫华、汪源、余锋(褚霸)、赖春波等来自阿里、新浪、网易和百度的资深技术专家联袂推荐。理论方面,不仅讲解了大规模分布式存储系统的核心技术和基本原理,而且对谷歌、亚马逊、微软和阿里巴巴等国际型大互联网公司的大规模分布式存储系统进行了分析;实战方面,首先通过对阿里巴巴的分布式数据库OceanBase的实现细节的深入剖析完整地展示了大规模分布式存储系统的架构与设计过程,然后讲解了大规模分布式存储技术在云计算和大数据领域的实践与应用。, 《大规模分布式存储系统:原理解析与架构实战》内容分为四个部分:基础篇——分布式存储系统的基础知识,包含单机存储系统的知识,如数据模型、事务与并发控制、故障恢复、存储引擎、压缩/解压缩等;分布式系统的数据分布、复制、一致性、容错、可扩展性等。范型篇——介绍谷歌、亚马逊、微软、阿里巴巴等著名互联网公司的大规模分布式存储系统架构,涉及分布式文件系统分布式键值系统分布式表格系统以及分布式数据库技术等。实践篇——以阿里巴巴的分布式数据库OceanBase为例,详细介绍分布式数据库内部实现,以及实践过程中的经验。专题篇——介绍分布式系统的主要应用:云存储和大数据,这些是近年来的热门领域,本书介绍了云存储平台、技术与安全,以及大数据的概念、流式计算、实时分析等。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值