分布式对象存储

本文主要介绍了分布式对象存储,从S3起源开始,探讨了网关、元数据代理、数据代理、元数据服务和数据节点等核心组件的功能,以及数据在不同区域、分区、节点和分片间的存储布局。
摘要由CSDN通过智能技术生成


前言

在实习期间记录一下在公司期间学习到的东西

一、对象存储S3

对象存储(Object Storage)的始作俑者是亚马逊2006年推出的S3(Simple Storage Service),此后新老厂商一窝蜂地推出各种产品,形态各异,但都号称对象存储。亚马逊没有给出一个定义,也没有看到有业界普通接受的说法。
在这里插入图片描述

二、gateway

网关的作用就是对url请求的过滤和分析,面向用户所看到的bucket和objectKey转换为内部存储所见的table和id。具体的实现通过一个取号器从metaproxy中得到。

三、metaproxy

元数据代理的功能是存储bucket,object到table,id的映射关系。通过mysql实现。

四、dataproxy

数据代理的功能就是将逻辑id转化为实际存储的shard_id,同时对于put操作,考虑文件的存储模式(ec便模式,replica模式)。

五、metaserver

元数据服务的功能就是完成对该节点的元数据,节点信息,存储盘增删改查&#

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值