es 几个重要的底层原理相关概念

最新推荐文章于 2024-08-06 15:17:55 发布
最新推荐文章于 2024-08-06 15:17:55 发布
阅读量1.1k 收藏 1
点赞数
分类专栏： elasticsearch学习笔记
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/keyuquan/article/details/82022024
版权

1、Elasticsearch对复杂分布式机制的透明隐藏特性

  • 分片机制
  • shard副本
  • 集群发现机制 
  • shard负载均衡

2、Elasticsearch的垂直扩容与水平扩容

  • 垂直扩容：采购更强大的服务器，成本非常高昂，而且会有瓶颈，假设世界上最强大的服务器容量就是10T，但是当你的总数据量达到5000T的时候，你要采购多少台最强大的服务器啊
  • 水平扩容：业界经常采用的方案，采购越来越多的普通服务器，性能比较一般，但是很多普通服务器组织在一起，就能构成强大的计算和存储能力

3.节点平等的分布式架构

  • 节点对等，每个节点都能接收所有的请求
  • 自动请求路由
  • 响应收集

4、master节点

  • 创建或删除索引
  • 增加或删除节点

5.基于_version进行乐观锁并发控制

 

 

 

 

kequanjade
关注
专栏目录
【Elasticsearch】倒排索引原理
九师兄
07-04 966
1.概述 转载：elasticsearch 倒排索引原理 本文写的不错。 网上看到的一篇文章，对Lucene的倒排索引是如何执行的，说的比较易懂，就转过来分享下。 Elasticsearch是通过Lucene的倒排索引技术实现比关系型数据库更快的过滤。特别是它对多条件的过滤支持非常好，比如年龄在18和30之间，性别为女性这样的组合查询。倒排索引很多地方都有介绍，但是其比关系型数据库的b-tree索引快在哪里？到底为什么快呢？ 笼统的来说，b-tree索引是为写入优化的索引结构。当我们不需要支持快速的更新的
ES 底层原理
much efforts, much luck
04-03 4920
一、分布式节点 1、client 客户端节点（协调节点） 当主节点和数据节点配置都设置为false的时候，该节点只能处理路由请求，处理搜索，分发索引操作等，从本质上来说该客户节点表现为智能负载平衡器。独立的客户端节点在一个比较大的集群中是非常有用的，协调主节点和数据节点，客户端节点加入集群可以得到集群的状态，根据集群的状态可以直接路由请求。大多数情况下不需要专用的协调节点，协调节点的功能可以由主节点或数据节点来完成，中小型集群中，专门的协调节点的并没有专用的数据节点必要。 主要功能：负责任务分发和结果汇聚
ES---底层原理
shall潇の菜园
03-17 500
ES—底层原理 ES一般情况下分为：主节点，子节点，云端节点 主节点：(master:例如下面的boss)负责创建索引、删除索引、分配分片、追踪集群中的节点状态等 子节点 ：负责存储数据，修改索引，查询信息等 云端节点： 负责当数据丢失情况，进行恢复 索引分片 每个索引默认有5个分片，1个副本数 number_of_shards：分片数 number_of_replicas：备份数 【注意：该图是ES的head插件创建索引时的截图】 至于怎么将文件存储到不同的节点，es会根据hashcode（rout
谈谈ElasticSearch中分词与倒排索引的原理
最新发布
wupanP的博客
08-06 373
ElasticSearch 是一个分布式搜索和分析引擎，其高效的搜索性能主要依赖于分词（tokenization）和倒排索引（inverted index）这两个核心技术。
ElasticSearch底层原理浅析
热门推荐
zkyfcx的博客
04-18 3万+
基本概念索引（Index）ES将数据存储于一个或多个索引中，索引是具有类似特性的文档的集合。类比传统的关系型数据库领域来说，索引相当于SQL中的一个数据库，或者一个数据存储方案(schema)。索引由其名称(必须为全小写字符)进行标识，并通过引用此名称完成文档的创建、搜索、更新及删除操作。一个ES集群中可以按需创建任意数目的索引。类型（Type）类型是索引内部的逻辑分区(category/part...
ES底层原理知识（无代码篇）
qq_48819461的博客
11-04 385
版本更新知识：ES--删除映射类型-爱码网 1、Index索引，包含了一堆有相似数据结构的文档数据，一个索引包含很多document，一个索引就代表一类相似或者相同的document。索引简单来说就相对于关系型数据库的库。 2、Type类型，每个索引里可以有一个或者多个type，type是index的一个逻辑分类，例如建立电影的索引，电影可以分为多个type：科幻type、喜剧 type、魔幻type等等。每个type下的document中的field可能是不一样的。类型简单来说就相对于关系型数据库的表
ES读写的底层原理过程
yinni11的博客
06-19 5735
es读写数据的工作原理 （1）es写数据过程 1）客户端选择一个node发送请求过去，这个node就是coordinating node（协调节点） 2）coordinating node，对document进行路由（根据documentID路由），将请求转发给对应的node（有primary shard） 3）实际的node上的primary shard处理请求，然后将数据同步到r...
Elasticsearch 常规概念及底层原理
言七墨
11-01 594
一、ES 分布式架构原理 ES设计的理念是分布式搜索引擎，底层实现基于Lucene，核心思想是在多台机器上启动多个ES进程实例，组成一个ES集群。 概念描述 接近实时：ES是一个接近实时的搜索平台，这就意味着，从存入一个文档直到文档能够被搜索到有一个轻微的延迟 集群（cluster）：一个集群由多个节点（服务器）组成，所有节点一起保存全部数据，每一个集群有一个唯一的名称标识 节点（node）：一个节点是一个单一的服务器，是集群的一部分，它存储数据并且参与集群的搜索功能，一个节点可以通过.
Elasticsearch 写入和查询优化底层原理
zhangCheng的博客
06-12 746
一、Elasticsearch 写入原理 二、es 写入涉及到的概念 三、写入的特性 优化方案一: 优化方案二: 五、es优化1、写优化： 2、读优化
ElasticSearch笔记二-架构及底层原理
smarttally的博客
10-25 218
架构介绍 先图为敬 序号 架构层 说明 1 Gateway 它是ES用来存储索引的文件系统，支持多种类型 2 Distributed Lucene Directory 它是一个分布式的lucene框架，位于Gateway的上层，内部包含Lucene-core 3 关键模块 （index Module、SearchModul、Mapping)等下面专门讲 4 Discovery 它是ES的节点发现模块，不同机器上的ES节点要组成集群需要进行消息通信，集群内部需要选举master节
elasticsearch原理剖析
lhj_sjtu的博客
09-17 8432
elasticsearch原理 Master/Slave架构 VS P2P 环形结构 Master-Slave master 节点负责管理整个系统,监视 slave 节点的运行状态,同时为其下的每一个 slave 节点分配存储的范围,是查询和写入的入口.master 节点一般全局只有 1个,该节点的状态将严重影响整个系统的性能,当 master 节点宕机时,会引起整个系统的瘫痪.实...
ES技术原理
05-10
华为教程，内容由浅入深，适合各个层次学习，欢迎大家讨论
ElasticSearch 面试 4 连问，你顶得住么？
架构文摘
02-18 477
来源：https://github.com/doocs/advanced-java 面试题 ES 写入数据的工作原理是什么啊？ES 查询数据的工作原理是什么啊？底层的 Lucene 介绍一下呗？倒排索引了解吗？ 面试官心理分析 问这个，其实面试官就是要看看你了解不了解 es 的一些基本原理，因为用 es 无非就是写入数据，搜索数据。你要是不明白你发起一个写入和搜索请求的时候，es 在干什么，那你真的是… 对 es 基本就是个黑盒，你还能干啥？你唯一能干的就是用 es 的 api 读写数据了。要是出点什么.
Elasticsearch 查询数据的工作原理是什么？
勇往直前的专栏
08-20 980
面试题 ES 写入数据的工作原理是什么啊？ES 查询数据的工作原理是什么啊？底层的 Lucene 介绍一下呗？倒排索引了解吗？ 面试官心理分析 问这个，其实面试官就是要看看你了解不了解 es 的一些基本原理，因为用 es 无非就是写入数据，搜索数据。你要是不明白你发起一个写入和搜索请求的时候，es 在干什么，那你真的是...... 对 es 基本就是个黑盒，你还能干啥？你唯一能干的就是用 es 的 api 读写数据了。要是出点什么问题，你啥都不知道，那还能指望你什么呢？ 面试题剖析 es 写数据
Elasticsearch从入门到精通-07ES底层原理学习
落雪
03-25 1520
本篇主要介绍和大家一块学习一下ES底层原理包括集群原理、路由原理、分配控制、分配原理、文档分析原理、文档并发安全原理以及一些高级ES语法的学习包括SQL使用、模版搜索、建议搜索、嵌套文档、父子文档、地理位置索引等
ES分布式架构和底层原理分析
shine的博客
09-30 1941
一 ES 简介 elasticsearch设计的理念就是分布式搜索引擎，底层实现还是基于Lucene的，核心思想是在多台机器上启动多个es进程实例，组成一个es集群。 二 es 概念 A 接近实时 es是一个接近实时的搜索平台，这就意味着，从索引一个文档直到文档能够被搜索到有一个轻微的延迟。 B　集群（cluster） 一个集群有多个节点（服务器）组成，通过所有的...
一文读懂ElasticSearch底层原理
benben044的专栏
02-04 2285
ES是一个，有数据的引擎。支持等功能。近实时：非实时，数据不是实时最新的。其底层基于Lucene，但比较复杂，面向普通应用开发者而言，易用性不是很好，同时，所以就诞生了ES。ES使用Java编写，它的内部使用Lucene做索引与搜索，隐藏了Lucene的复杂性，面向开发者暴露了，方便大家将搜索功能快速植入到日常应用中。
ElasticSearch架构介绍及原理解析
不积跬步无以致千里 不积小流无以成江海
03-02 5057
目录 简介 架构原理 基本概念与MySQL的对比 分片机制 document路由原理 集群发现机制 shard&replica规则 避免脑裂 负载均衡 相关配置 容错过程与选举机制 扩容机制 容错机制 Lucene 结构原理 ​ Lucene索引实现 DocValues 关于ES索引与检索分片 运行原理解析 倒排索引说明 检索倒排索引 分词器Analyzer 建立索引和类型 分片内文档写入流程场景 多个分片的文档写入场景 确定文档存储位置 同步
ES分布式架构及底层原理
weixin_44330810的博客
08-27 3286
ES分布式架构及底层原理
Vue底层实现原理详解：数据绑定背后的观察者模式
Vue框架的底层实现原理是一种关键概念，对于理解其高效、简洁的双向数据绑定机制至关重要。本文旨在通过实例和理论相结合的方式，揭示Vue如何利用JavaScript的核心特性——Object.defineProperty来实现其核心功能。 ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值