![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
存储
文章平均质量分 75
summer_west_fish
本科毕业深圳大学,拥有Java开发10年的经验。 拥有Devops、敏捷和项目管理多年的经验,并且获得PMP、ACP和DOP等相关证书。
展开
-
计算机的存储体系
其中CPU缓存的延时在1到10纳秒之间,不同级别的缓存访问延时不同,级别一的缓存访问延时大概是1纳秒,而级别二缓存的访问延时大概是4纳秒。当然,相对于内存,内存的容量要比缓存大的多,速度也慢的多。虽然内存的访问要比硬盘等外围设备快的多,但相对缓存来说,内存的访问延时一般要100纳秒左右。如果将缓存的速度类比火箭的速度,那么内存的速度也就跟普通客机差不多,连战斗机的速度都达不到。我们知道现在的CPU通常由L1(Level 1的缩写),L2和L3三级缓存,其中这些缓存大多是采用SRAM实现的。原创 2024-05-27 15:48:08 · 735 阅读 · 0 评论 -
Elastic Search Cluster
协调节点不存储数据,也不执行数据处理任务,但它负责将搜索请求分发到包含相关数据的节点,并将这些节点返回的结果合并后返回给客户端。具体来说,当客户端发出查询某个索引的数据的请求时,协调节点会接收这个请求,并将其分发给保存相关数据的数据节点(Data Node)。同时,由于协调节点不参与数据的存储和处理,它需要有足够的CPU和内存资源来处理大量的并发请求。此外,值得注意的是,在Elastic Search中,每个节点默认都起到了协调节点的职责,即每个节点都能接收和处理来自客户端的请求。原创 2024-04-29 11:33:59 · 96 阅读 · 0 评论 -
ElasticSearch
Gossip协议是一种分布式系统中常用的通信协议,主要用于节点之间传播信息。它的设计目标是高效、可靠地将消息传递给所有节点,并保证最终一致性。Gossip协议的核心思想是通过节点之间的随机通信,将信息在整个网络中传播开来,从而达到全局共识的目的。具体来说,每个节点持有一个消息队列,用于存储待传播的消息。被选中的节点在收到消息后,会继续将消息传播给其他节点,以此类推。这种方式使得信息能够以一种去中心化的方式在网络中扩散,每个节点都有能力接收并转发消息。原创 2024-03-11 12:05:34 · 951 阅读 · 0 评论 -
加速数据中心向Diskless架构演进
冯丹教授表示:“从技术趋势来看,高性能异构算力、高速网络、大存力新型盘框、算子卸载等技术的发展,带来了数据中心架构的变革,加速了以CPU为中心的耦合架构走向彻底存算分离、资源池化共享的以数据为中心的Diskless架构,这种架构进一步简化了数据中心基础设施构建,能够实现存力和算力资源的集约高效发展,已经成为大规模数据中心发展的重要技术趋势。通过计算语义的卸载,存储直出语义接口,主机侧软件栈打薄,减少80%的IO交互次数,实现对整系统的CPU和网络带宽节省。转载 2023-12-11 15:13:45 · 54 阅读 · 0 评论 -
什么是块存储、文件存储、对象存储?
块存储使用时,文件系统在客户端,例如Windows系统,我们可以在Windows桌面查看我们存储的内容,但是对于硬盘里的内容和格式,我们是一无所知的,只有借助客户端的文件系统才能查看。好比上面图中,数据像瓜子一样在一起组成了向日葵,再对应到不同的向日葵杆,要找到某个向日葵籽,先找到这个对应的向日葵杆,再找到这个向日葵,然后根据在这个向日葵上对应的位置找到这个瓜子。而块存储、文件存储和对象存储也可以简单地理解是不同类型的存储设备,它们是根据使用介质存储数据的手段或方法不同来划分的。作为不会做选择题的成年人,原创 2023-11-02 12:03:45 · 237 阅读 · 0 评论 -
分布式存储
分布式存储是一个大的概念,其包含的种类繁多,除了传统意义上的。原创 2023-11-02 11:43:20 · 135 阅读 · 0 评论 -
什么是 SAN,它与 NAS 有何不同之处?
与其购买一个用于 SAN 存储和一个用于 NAS 存储的盒子,你可以购买一个支持所有四种协议的盒子——它可以是光纤通道、iSCSI、SMB、NFS,任何你想要的东西。共享存储的好处正在与企业产生共鸣,尤其是在许多现代应用程序依赖文件和对象存储的情况下,并且非结构化数据的增长继续超过结构化数据的增长。影响传统 SAN 存储发展的另一个趋势是向基于消费的 IT 的转变。SAN 是由两层组成,第一层——存储管道层——提供网络中节点之间的连接,并传输面向设备的命令和状态,至少一个存储节点必须连接到该网络。原创 2023-10-23 11:15:13 · 185 阅读 · 0 评论 -
Ceph分布式存储系统
Ceph 的开放源代码和灵活的架构使其成为许多组织和企业在构建高性能、可扩展的存储基础设施时的首选。Ceph 的数据存储在多个节点上,具有高度的分布式性能和容错性。Ceph 提供统一的存储接口,包括对象存储、块存储和文件存储,使得应用程序可以使用相同的 API 访问不同类型的存储。它被设计用于管理大规模的数据,可以轻松地扩展到数千台服务器和多个存储节点,适用于私有云、公有云、虚拟化环境等多种场景。Ceph 允许用户创建不同类型的存储池,用于存储不同类别的数据,并为每个存储池配置不同的属性。原创 2023-08-13 22:18:51 · 1477 阅读 · 0 评论 -
Elasticsearch基本概念和索引原理
索引中的每一个文档都有一个类型,每种类型都有它自己的映射,一个映射定义了文档结构内每个字段的数据类型。使用。原创 2023-02-10 16:50:41 · 754 阅读 · 0 评论 -
DAS和NAS
而NAS注重于分享和连接,更适用于家庭、工作室、中小型企业的私有云数据库的建立,不仅可以满足存储的要求,还可以多人共享,家庭共建、跨地跨设备随时访问。在这个万物互联的时代,分享和随时访问已经成了不仅仅是企业的需求,一个家庭的所有电子设备地数据加起来已经远远超出了用一块移动硬盘就能解决的界限,加上社交的需求,NAS已经渐渐进入寻常百姓家的视线。通过设置不同的RAID组合,可以达到有效的数据保护和备份功能,同时直连单台服务器,不受外部网速影响,可以达到较快的读取速度。原创 2023-01-31 10:00:49 · 184 阅读 · 0 评论