网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。
一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！
集群层面上的基础概念
集群
由多个es实例组成的叫做集群
节点
单个ES的服务实例叫做节点。每个实例都有自己的名字，就是在配置文件中配置的‘node.name’中的内容。为了标识每个节点，每个节点启动后都会分配一个UID，存储在data目录。每个节点受到集群的管理，我们可以通过增加或减少节点来达到扩容和减容的目的
集群中的节点是有分类的：
- 主节点：主节点在整个集群中是唯一的，主节点主要负责管理集群变更，元数据的更改
- 数据节点：负责保存数据，要扩产存储时需要扩展这类节点。数据节点负责执行数据相关的操作，如：搜索、聚合、crud。其对节点机器的CPU、内存、I/O要求都比较高
- 协调节点：负责接口客户端的请求，将请求路由到对应节点进行处理，把最终结果汇总到一起返回给客户端，因为需要处理结果集和对其进行排序，需要较高的CPU和内存资源
- 预处理节点：预处理操作允许在写入文档前通过定义的一些processors处理器和管道对数据进行转换。默认情况下节点启动后就是预处理节点
- 部落节点：未来会淘汰
- Hot&Warm Node: 不同硬件配置的节点，用来实现Hot&Warm架构的节点，有利于降低集群部署成本。例如，在硬件资源好的机器中部署Hot类型的数据节点，而在硬件资源一般的机器上部署Warm节点
在新版的ES中，是这样配置的
如上示例，node.roles的值是一个数组，说明一个节点可以有多个角色。node.roles的可选项如下：
机智的你会发现，上述类型中并没有协调节点的类型选项，那怎么设置一个节点为协调节点那？ 其实每个节点本身就是一个协调节点，如果你一定要指定一个节点为协调节点的话，可以这样设置：
分片
分片的概念其实很好理解，试想一下如果家里的书多到一个箱子放不下，是不是要找另外一个箱子来装，这些书好比就是海量的数据，一个机器放不下，就放到多个机器上来存储
一般来说，面对海量数据的时候，分布式系统可以通过增加机器数量来进行水平拓展。所以，系统需要将数据分成几个小块数据，并且尽量均匀的分配到各个机器上，然后通过某种策略找到对应数据所在的位置。分片是ES底层最基本的读写单元，分片是为了分割巨大的索引数据，让读写可以有多台机器来完成，从而提高系统的吞吐量
副本
为了保证数据可靠性，一般分布式系统都会对数据进行冗余备份，这个备份就是副本。**ES将数据副本分为主从2个类型：主分片+副分片。**在写入的过程中，先写入主分片，成功后再并发写副分片，在数据恢复时以主分片为主。多个副本除了可以保证数据可靠性，还有一个好处就是可以承担系统的读负载
可以在创建索引的时候，指定分片数量和副本数量：
数据层面上的基础概念
索引（相当于数据库表）
索引是一类相似文档的集合。ES将数据存储在一个或多个Index中，例如将用户数据存储到User Index中，而将订单数据存储到Order Index中。一个索引有一个或者多个分片，索引的数据会以某种方式分散到各个分片上去存储
如上图，索引有3个分片，主分片分别是P1、P2、P3，队友的副本分别是R1、R2、R3，仔细看主分片和其他副本分片不会同时分配在同一个节点上。这样是保证当一个节点的主分配下线时，其他节点上的从副本可以升级为主分配，保证数据的可靠性
Mapping （相当于建表语句）
Mapping定义了索引里面的文档到底有哪些字段 以及字段的类型，类似于数据库中表结构的定义。Mapping有2种作用：
- 定义索引中各个字段的名称和对应的类型
- 定义各个字段、倒排索引的相关设置，如使用什么分词器
需要注意的是，Mapping一旦定义完成后，已经定义的字段的类型是不能更改的
文档（相当于表记录）
网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。
一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！
b)**
一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！
1万+
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
