ElasticSearch（4）—— 深入理解ElasticSearch分片

已于 2025-01-10 11:41:08 修改
阅读量471 收藏
点赞数 1
分类专栏： Java总结 文章标签： elasticsearch 大数据 搜索引擎
于 2023-11-10 11:32:30 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/shangjg03/article/details/134329225
版权
Java总结 专栏收录该内容
70 篇文章 0 订阅 ¥19.90 ¥99.00
订阅专栏

1. 路由计算

当索引一个文档的时候，文档会被存储到一个主分片中。 Elasticsearch 如何知道一个文档应该存放到哪个分片中呢？当我们创建文档时，它如何决定这个文档应当被存储在分片 1 还是分片 2 中呢？首先这肯定不会是随机的，否则将来要获取文档的时候我们就不知道从何处寻找了。实际上，这个过程是根据下面这个公式决定的：

routing 是一个

了解本专栏 订阅专栏 解锁全文
ElasticSearch（2）—— ElasticSearch的集群、节点、索引、分片和副本
shangjg3的博客
11-08 2066
默认情况下，Elasticsearch中的每个索引被分片1个主分片和1个复制，这意味着，如果你的集群中至少有两个节点，你的索引将会有1个主分片和另外1个复制分片（1个完全拷贝），这样的话每个索引总共就有2个分片，我们需要根据索引需要确定分片个数。默认情况下，Elasticsearch中的每个索引被分片1个主分片和1个复制，这意味着，如果你的集群中至少有两个节点，你的索引将会有1个主分片和另外1个复制分片（1个完全拷贝），这样的话每个索引总共就有2个分片，我们需要根据索引需要确定分片个数。
ElasticSearch部署全攻略——手动迁移特定索引分片
bbsxb520的博客
07-03 474
手动迁移特定索引分片到指定节点的方法
【Elasticsearch】Elasticsearch的分片和副本机制
热门推荐
屿小夏.的知识博客
07-15 7万+
Elasticsearch是一种分布式搜索和分析引擎，它具有高扩展性和高可用性。为了实现这些特性，Elasticsearch引入了分片（Shard）和副本（Replica）的概念。本文将详细介绍Elasticsearch中的分片和副本机制，帮助读者理解它们的重要性及其实现方法。分片是Elasticsearch中存储数据的基本单位。一个索引可以由多个分片组成，每个分片都是一个独立的Lucene索引。通过分片，Elasticsearch可以将数据分布到多个节点上，从而实现数据的分布式存储和并行处理。
Elasticseach之文档所在分片
Yong Ledo的博客
06-12 209
elasticseach的分片有很多时，如果我想查询下某个文档当前所在分片，该如何查询？ GET /saas_product_batch_stock_test/_search_shards?routing=ZHL10184670,ZHL10174592,ZHL10180859 注意routing支持多个，使用英文逗号分割。该参数就是你设置的路由，如果没有改变路由值，默认就是_id。其结果如下： { "nodes" : { "Ea27RhxZSwe-i1d1_e4byQ" : { /
聊一聊Elasticsearch的索引的分片分配机制
最新发布
cab5的博客
11-02 1058
对什么是分配分配、分片分配的过程、以及分片分配的感知和分片分配的过滤进行介绍
Elasticsearch 对文档操作时的分片交互过程分析
zx711166的博客
08-24 1151
路由文档到分片 当我们要在ES中存储数据的时候，数据应该存储在主分片和复制分片中的哪一个中去；当我们在ES中检索数据的时候，又是怎么判断要查询的数据是属于哪一个分片。 进程不能是随机的，因为我们将来要检索文档。事实上，它根据一个简单的算法决定： shard = hash(routing) % number_of_primary_shards Routing值是一个任意字符串，它默认是 _i...
ElasticSearch分片
fengshi95的博客
10-23 1958
本文内容参考了田雪松老师编著的《ElasticSearch作为一个搜索引擎，会存储海量的数据。而存储海量的数据，就要解决如何存储的问题，并且保证数据不会丢失，同时还需要保证数据检索的效率，尽可能不会因为数据的增加而影响检索速度。
ElasticSearch中的分片是什么
越努力越幸运。
02-21 1005
在Elasticsearch中，分片（shard）是将索引内部的数据分割成多个部分的机制，用于分布、存储和管理索引的数据。分片是Elasticsearch的核心概念，它们允许索引被拆分为多个物理或逻辑部分，以实现分布式存储和处理数据的能力。每个索引都可以配置分片数目，通常包括两种主要类型的分片：主分片（Primary Shard）和副本分片（Replica Shard）。总之，分片是Elasticsearch的关键组成部分，支持其在分布式环境中高效存储、检索和处理大量数据。
es分片多少合理_【ES】ElasticSearch 深入分片
weixin_33678821的博客
01-17 3334
@[toc]一、分片介绍分片是 Elasticsearch 在集群中分发数据的关键。把分片想象成数据的容器。文档存储在分片中，然后分片分配到集群中的节点上。当集群扩容或缩小，Elasticsearch 将会自动在节点间迁移分片，以使集群保持平衡。一个分片(shard)是一个最小级别“工作单元(worker unit)”，它只是保存了索引中所有数据的一部分。这类似于 MySql 的分库分表，只不过...
ElasticSearch教程——分片、扩容以及容错机制
东天里的冬天
09-20 8306
ElasticSearch汇总请查看：ElasticSearch教程——汇总篇 primary shard 和 replica shard机制 (1):index包含多个shard； (2):每个shard都是一个最小的工作单元，承载部分的数据，Lucene实例，完整的简历索引和处理请求的能力； (3):增减节点时，shard会自动在nodes中负载均衡； (4):primary sha...
深入理解Elasticsearch分片
qq_35939417的博客
12-29 4306
了解分片的基本原理，对Elasticsearch性能调优有帮助。
Elasticsearch分片原理
踟蹰千年的博客
02-16 1万+
ES集群的基本概念 Cluster 代表一个集群，集群中有多个节点，其中有一个为主节点，这个主节点是可以通过选举产生的，主从节点是对于集群内部来说的。es的一个概念就是去中心化，字面上理解就是无中心节点，这是对于集群外部来说的，因为从外部来看es集群，在逻辑上是个整体，你与任何一个节点的通信和与整个es集群通信是等价的 Shards主分片 代表索引分片，es可以把一个完整的索引分成多个分片...
ElasticSearch学习笔记-第四章 ES分片原理以及读写流程详解
weixin_42584100的博客
07-24 3879
ES集群、ES分片原理、ES读流程详解、ES写流程详解
3分钟快速了解es中分片的概念
u011197085的博客
04-30 3797
同时，副本分片可以提高系统的容错能力，因为在某个分片出现故障时，副本分片可以顶替主分片继续提供服务。在单节点集群中，您可以将副本分片的数量设置为 1 或更高，但实际上这些副本分片不会被分配，因为 Elasticsearch 不会在同一个节点上分配主分片和副本分片。当您将单节点集群扩展为多节点集群时，Elasticsearch 会自动将副本分片分配到其他可用节点，从而提高数据的可用性和容错能力。在这个示例中，我们创建了一个名为 “books” 的索引，并指定了 3 个主分片和 1 个副本分片。
Elasticsearch 的索引和分片管理
互联网知识分享
07-27 941
同时也可以设置索引的分片个数和副本个数，以及优化分片的分布。中，索引可以被分成多个分片，并均匀分布在集群中的多个节点上。说明：修改分片个数只能在创建索引之前进行，一旦索引创建后，分片个数就不能再修改。中，索引是存储和组织数据的逻辑结构。number_of_replicas定义了每个分片的副本数（默认为1）。，可以使得索引上的所有副本分片都被分配给不同的节点，实现分片的最佳分布。说明：副本个数可以在索引创建之后进行修改。通过索引和分片的管理，我们可以在。发送获取索引分片信息的请求。
Elasticsearch基础篇(七)：分片大小修改和路由分配规则
后端开发
01-12 4309
这样设计可以提高系统的可用性和容错性，因为数据的多个副本分布在不同的节点上，即使某个节点发生故障，系统仍然可以继续工作。副本分片是主分片的完整复制，位于不同的节点上。主分片的数量是索引创建时固定的，因为这个值与数据的分布和索引结构有关。每个索引都被划分成若干个主分片，每个主分片都是一个独立的索引。往索引中增加100条数据，文档分布如下：三个主分片的文档数量正好为100，随着文档数量的增加，三个主分片的数量会越来越均衡。在完成重新索引后，将应用中的写操作切换到新的索引，确保新数据写入新的索引。
ES 搜索引擎的分片数、副本数分配算法
刘一二
07-20 8093
本文将 ES 搜索引擎的分片数、副本数配置总结成固定的算法，跟据集群的服务器个数，总CPU核心个数，总内存大小很快可以确定要分配的参数值
Elasticsearch深入学习 (二) 索引创建及分片优化经验
qq_37203082的博客
03-26 2650
Elasticsearch深入学习 (二) 索引创建及分片优化经验
ES集群和分片以及脑裂
weixin_38597669的博客
03-19 1303
本文主要包含Es集群的若干概念和脑裂现象。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

shangjg3

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值