ElasticSearch分布式架构原理

最新推荐文章于 2024-02-28 14:34:53 发布
最新推荐文章于 2024-02-28 14:34:53 发布
阅读量157 收藏 1
点赞数 1
分类专栏： 微服务笔记 文章标签： 分布式 搜索引擎 elasticsearch es java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sinat_39544342/article/details/119481733
版权

ElasticSearch 分布式搜索引擎，在多台机器上启动多个ElasticSearch进程实例，组成ElasticSearch集群。

ES的基本单位：索引（index），相当于MySQL的一张表

一个索引拆分成多个分片（shard）

分片优点

  • 横向扩展：方便数据扩容，1T变2T
  • 提高性能：多个分片不同服务器分布式执行，提高吞吐量和性能

分片拥有多个备份，避免机器宕机，实现高可用

ES集群拥有多个节点，负责切换主分片和副本分片的身份，主节点宕机自动选举一个新的主节点
非主节点宕机时，此节点主分片对应的副本分片自动成为主分片，宕机修复后前主分片自动变成副本分片

在这里插入图片描述

发发说代码
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Elasticsearch架构原理 样章
01-15
Elasticsearch架构原理.pdf
ElasticSearch基本原理及分布式环境搭建(1)1
08-03
ElasticSearch在众多大型企业中得到广泛应用，如GitHub用于搜索PB级的项目数据，维基百科将其作为核心搜索架构，音乐分享平台SoundCloud使用它提供即时音乐搜索服务，百度则利用ElasticSearch进行文本数据分析和多...
ElasticSearch 架构原理
mrathena
03-08 410
博文目录 文章目录节点类型Master节点DataNode节点分片和副本机制分片（Shard）副本指定分片、副本数量重要工作流程文档写入原理检索原理准实时索引实现溢写到文件系统缓存写translog保障容错flush到磁盘segment合并 节点类型 在ES主要分成两类节点，一类是Master节点，一类是DataNode节点。 Master节点 在ES启动时，会选举出来一个Master节点。当某个节点启动后，然后使用Zen Discovery机制找到集群中的其他节点，并建立连接。 discovery.se
Elasticsearch架构原理
chuixue24的博客
03-29 6229
1、Elasticsearch的节点类型 在Elasticsearch主要分成两类节点，一类是Master，一类是DataNode。 1.1 Master节点 在Elasticsearch启动时，会选举出来一个Master节点。当某个节点启动后，然后使用Zen Discovery机制找到集群中的其他节点，并建立连接。 discovery.seed_hosts: ["192.168.21.130", "192.168.21.131", "192.168.21.132"] 并从候选主节点中选举出.
Elasticsearch原理（一）：实时架构
桃花惜春风
08-16 6846
Elasticsearch的核心优势就是近乎实时，为什么说是近乎实时而非真实意义上的实时呢，因为Elasticsearch能够做到准实时，而并不是完全的实时。下面介绍Elasticsearch是如何索引数据的整个流程。 先上图： 首先，当我们对记录进行修改时，es会把数据同时写到内存缓存区和translog中。而这个时候数据是不能被搜索到的，只有数据形成了segmentFile，才会...
ES分布式搜索解决方案.docx
04-25
Elasticsearch（ES）是一种基于Lucene的开源全文搜索引擎，专门设计用于处理大规模数据的分布式、实时搜索和分析引擎。它解决了传统数据库在大规模数据检索时的性能问题。 1. **数据存储**：Elasticsearch采用分片...
分布式服务架构.原理、设计与实战
06-04
还会涉及监控和日志管理，如使用ELK（Elasticsearch、Logstash、Kibana）堆栈收集和分析服务运行时的数据，以便快速定位和解决问题。 此外，书中可能会讨论分布式事务处理，如2PC（二阶段提交）、Saga模式和分布式...
分布式全文检索引擎ElasticSearch原理及使用实例
12-16
1. **分布式架构**：Elasticsearch 采用分布式架构，这意味着它可以自动将数据分片并分布在多个节点上，确保高可用性和容错性。当新增节点或数据量增加时，系统能够自动调整和平衡负载。 2. **实时搜索与分析**：...
SpringBoot项目分布式架构网上商城.zip
最新发布
04-15
SpringBoot项目分布式架构网上商城是一个高度可扩展、高性能的电子商务平台，它利用分布式系统的原理和技术来处理大规模的用户访问和海量的商品数据。该系统旨在提供稳定、高效的在线购物体验，同时保证系统的可维护...
Elasticsearch 架构图
05-20
ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。 我们建立一个网站或应用程序，并要添加搜索功能，但是想要完成搜索工作的创建是非常困难的。我们希望搜索解决方案要运行速度快，我们希望能有一个零配置和一个完全免费的搜索模式，我们希望能够简单地使用JSON通过HTTP来索引数据，我们希望我们的搜索服务器始终可用，我们希望能够从一台开始并扩展到数百台，我们要实时搜索，我们要简单的多租户，我们希望建立一个云的解决方案。因此我们利用Elasticsearch来解决所有这些问题及可能出现的更多其它问题。 架构图方便理解Elasticsearch
Elasticsearch原理解析
10-13
不支持HTML标签，这是一个ppt文档，大牛总结的es底层的一些原理
ElasticSearch架构介绍及原理解析
love6a6的博客
02-28 1760
ElasticSearch是一款基于Lucene构建的开源、分布式、RESTful搜索和分析引擎。ElasticSearch以其弹性伸缩能力、高可用性和易用性而受到广泛欢迎，被应用于日志分析、全文搜索、实时数据检索等领域。ElasticSearch因其强大的搜索能力、灵活的配置选项和可扩展性，在各种行业中得到了广泛的应用。通过合理利用其功能和特点，企业和组织可以更高效地管理和分析数据，从而做出更明智的决策。ElasticSearch广泛应用于全文搜索、实时分析以及其它类型的搜索场景。
ElasticSearch集群架构原理
m0_60162373的博客
03-29 3710
match查询keyword字段：match将查询数据分词后的信息，需要和keyword字段完全匹配，这条记录才会被查到。 _seq_no:是跟着索引库走的， 如果操作一个文档，他的version和seq_no都会变化，如果操作另一个文档，则另个文档的seq_no会紧接着上一次的变化进行变化，递增。类似于数据库的id。 ...
elasticsearch的分布式架构原理
06-28 667
对于全文检索，lucene是目前最流行的搜索库。以前我们都需要学习使用lucene,基于lucene做相关的开发，学习倒排索引的原理，而现在，我们可以直接使用现成的搜索框架了，因为现在很多这种搜索框架底层都是直接基于lucene的分布式搜索引擎，例如elasticsearch就是其中最典型的代表，我们亲切的简称其为es。 现在分布式搜索基本已经成为大部分互联网行业的java体系的标配，其中尤为流行的就是es，记得我2014年的时候还在用用solr，估计那个时候大部分小伙伴也是一样。但是最近几年基本都.
Elasticsearch 分布式架构原理
弹指天下
01-11 2650
前言 前面介绍了很多ES使用过程中的具体实战知识点，本文主要是谈谈ES分布式架构原理。 一、Elasticsearch特点 elasticsearch是近实时的分布式搜索分析引擎，底层实现还是基于Lucene的，核心思想是在多态机器上启动多个es进程实例，组成一个es集群。一下是es的几个概念： 接近实时 es是一个接近实时的搜索平台，这就意味着，从索引一个文档直到文档能够被搜索到有一个轻微的延迟 集群（cluster） 一个集群有多个节点（服务器）组成，通过所有的节点一起保存你的全部数据并且通过联合索
互联网大厂技术-elasticsearch(es)原理-ES架构、elasticsearch架构原理、ES数据写入、数据删除、数据读取、搜索过程、检索原理、节点协调过程、搜索引擎、索引原理
码者人生的技术博客
07-20 5295
Elasticsearch 是由Lucene提供支持的搜索引擎。 它为 “搜索部分” 提供了强大的动力，而 Elasticsearch 为你提供了可扩展性，可用性，REST API，专门的数据结构等（从广义上来说）。 Elasticsearch 架构的概略示意图 从图中可以看出，Elasticsearch 在可用节点上对每个 Lucene 索引进行了分片。 分片可以是主分片或副本分片。 每个分片都是一个 Lucene 索引，这些索引中的每个索引都可以具有多个 segment，每个 segem...
Elasticsearch基本原理
驰骋翱翔
10-09 854
       ES作为高度可伸缩的全文搜索与分析引擎，经常被用作大量数据的复杂搜索与分析业务。本博文以问题方式展示ES的基础特性，并简单介绍底层算法实现。        1. ES搜索速度为什么会特别快？        简单来说就是使用了使用了Lucene的倒排索引技术，首先以分词的形式将文档分解成单词+文章号【频率】+位置的形式，借用网上例子：               文章1的内容为：...
Elasticsearch
sam19911的博客
05-04 327
一.什么是 Elasticsearch ElasticSearch 是一个基于 Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch 是用 Java开发的，并作为 Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。 二.Elasticsearch应用场景 (1).大型分布式日志分析系统ELK ela...
互联网面试热门：Elasticsearch分布式架构解析
在现代互联网行业，搜索引擎技术尤其是分布式搜索引擎已经成为面试中的热门话题。Lucene曾是早期搜索领域的核心...因此，对于求职者而言，深入理解ES的分布式架构原理和实际应用场景，是提升自己在面试中竞争力的关键。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值