elasticsearch的底层模块深入解析

最新推荐文章于 2023-03-21 00:00:07 发布

置顶少林码僧

最新推荐文章于 2023-03-21 00:00:07 发布

阅读量687

点赞数

分类专栏：百亿级elasticsearch实践指南文章标签： elasticsearch

本文链接：https://blog.csdn.net/yonggeit/article/details/102553358

版权

百亿级elasticsearch实践指南专栏收录该内容

53 篇文章 40 订阅 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

本文详细探讨了Elasticsearch的shard分配策略，包括集群级别的分配设置、磁盘基分配、机架感知、过滤和下线时的延迟分配。此外，还讲解了gateway模块、HTTP、网络和传输模块以及线程池的配置，强调了节点类型（如master-eligible、data和ingest节点）以及相关配置的重要性。通过对这些概念的深入理解，可以帮助优化Elasticsearch集群的性能和可靠性。

摘要由CSDN通过智能技术生成

shard分配相关的配置及原理

1、shard allocation的介绍

两种node：master node，data node

master node的一个很重要的功能，比如说，你现在创建了一个索引，然后这个索引是不是有很多的shard，可能你自己指定了几个primary shard，每个primary shard还有一些replica shard。master node，其实就是决定哪些shard分配给哪些node，以及什么时候在node之间移动shard，来让集群达到rebalance。对于shard allocation而言，有很多设置，都可以控制这个过程：

（1）cluster level shard allocation，可以在集群层面来控制shard allocation和rebalance的过程
（2）disk-based shard allocation，es会在shard分配的时候，考虑可用的磁盘空间
（3）shard allocation awareness，控制shard如何在不同的机架上进行分布
（4）shard allocation filter