本文详细探讨了Elasticsearch（ES）的写数据、删除/更新数据的底层原理，包括数据如何从内存buffer写入segment file，以及translog在数据安全中的作用。在读取数据时，ES采用随机轮询算法从primary或replica shard获取。通过对Lucene的使用，建立了倒排索引，实现快速搜索。此外，文章还提到了ES的准实时性，以及如何通过refresh和flush操作确保数据的可见性。
复制代码
你根据 java 关键词来搜索，将包含 java 的 document 给搜索出来。es 就会给你返回：java 真好玩儿啊，java 好难学啊。
-
客户端发送请求到一个
coordinate node。 -
协调节点将搜索请求转发到所有的 shard 对应的
primary shard或replica shard，都可以。 -
query phase：每个 shard 将自己的搜索结果（其实就是一些
doc id）返回给协调节点，由协调节点进行数据的合并、排序、分页等操作，产出最终结果。 -
fetch phase：接着由协调节点根据
doc id去各个节点上拉取实际的document数据，最终返回给客户端。
写请求是写入 primary shard，然后同步给所有的 replica shard；读请求可以从 primary shard 或 replica shard 读取，采用的是随机轮询算法。
写数据底层原理
先写入内存 buffer，在 buffer 里的时候数据是搜索不到的；同时将数据写入 translog 日志文件。
如果 buffer 快满了，或者到一定时间，就会将内存 buffer 数据 refresh 到一个新的 segment file 中，但是此时数据不是直接进入 segment file 磁盘文件，而是先进入 os cache 。这个过程就是 refresh 。
每隔 1 秒钟，es 将 buffer 中的数据写入一个新的 segment file ，每秒钟会产生一个新的磁盘文件 segment file ，这个 segment file 中就存储最近 1 秒内 buffer 中写入的数据。
但是如果 buffer 里面此时没有数据，那当然不会执行 refresh 操作，如果 buffer 里面有数据，默认 1 秒钟执行一次 refresh 操作，刷入一个新的 segment file 中。
操作系统里面，磁盘文件其实都有一个东西，叫做 os cache ，即操作系统缓存，就是说数据写入磁盘文
最低0.47元/天 解锁文章
1996
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
