ElasticSearch查询原理一篇文章搞懂

最新推荐文章于 2024-09-28 22:16:31 发布
最新推荐文章于 2024-09-28 22:16:31 发布
阅读量4.4k 收藏 2
点赞数 1
分类专栏： JAVA进阶学习训练营 云搜索进阶之路 文章标签： elasticsearch 搜索 倒排 求交 跳表
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/huangleijay/article/details/93346876
版权
本文介绍了ElasticSearch的查询原理，包括查询分类query_and_fetch、query_then_fetch、DFS_query_and_fetch，详细解释了两阶段的查询过程，涉及到查询、排序和fetch阶段，帮助读者理解ES的搜索机制。
摘要由CSDN通过智能技术生成

1ES架构简介  

    国际惯例，站在上帝的视角看看闻名的ElasticSearch长什么样，由于今天仅仅讲查询模块，所以对图中的大多数模块不会涉及。

    查询相关的模块主要有：Api接口，Transport模块，Searcher模块、索引相关。

2ES查询分类   

ElasticSearch支持的查询有三种

  1.     query_and_fetch  

  2.     query_then_fetch  

  3.     DFS_query_and_fetch 

三种查询的名字都很简练，并且单词都很熟悉，那这三种查询各代表什么意思，又该如何选择呢？首先需要理解什么是query，和fetch，以及DFS。

一般来说检索的查询都会分为两个阶段

    a： 获取命中的docid list （只需要id和score即可）。

    b： 根据符合条件的docid，取正排信息，返回客户端&

了解本专栏 订阅专栏 解锁全文 超级会员免费看
huangleijay
关注
专栏目录
订阅专栏
ELK系列(十五)、Elasticsearch核心原理一篇全搞定
王义凯 的博客
06-23 2177
答应我，看完这篇文章，别再跟面试官说你不会Elasticsearch了！ 本文会从ES底层Lucene开始，到ES 读写原理一一介绍，希望对大家有帮助，谢谢。
Elasticsearch 原理解析（介绍）
m0_67698950的博客
04-07 7625
介绍 Elasticsearch 是一个分布式可扩展的实时搜索和分析引擎,一个建立在全文搜索引擎 Apache Lucene(TM) 基础上的搜索引擎.当然 Elasticsearch 并不仅仅是 Lucene 那么简单，它不仅包括了全文搜索功能，还可以进行以下工作: 分布式实时文件存储，并将每一个字段都编入索引，使其可以被搜索。 实时分析的分布式搜索引擎。 可以扩展到上百台服务器，处理 PB 级别的结构化或非结构化数据。 基本概念 对应关系 一个文档的数据，通常是 json 格式
ElasticSearch的搜索原理
最新发布
2401_86218127的博客
09-28 917
Elasticsearch的搜索原理主要是通过倒排索引实现的，而倒排索引是相对于像MySQL数据库搜索数据的正向索引而言的。正向索引是最传统的，根据id索引的方式。但根据词条查询时，必须先逐条获取每个文档，然后判断文档中是否包含所需要的词条，是根据文档找词条的过程。《2》案例分析：假设在数据库中有以下数据表 ：当我们给id字段添加索引后，在查询数据时，通过id字段可很快查询到相关数据，但如果我们通过title字段进行模糊查询时，则会执行以下的步骤:①用户输入搜索条件：如%手机%。
Elasticsearch进阶篇(二)：Elasticsearch查询原理
后端开发
03-16 1252
本文档深入探讨了Elasticsearch的查询原理，包括单个ID查询文档和多个ID查询文档的流程。在搜索查询方面，通过两阶段查询，首先在各个分片拷贝中搜索匹配的文档标识符，然后在协调节点合并结果并获取完整文档。此外，全文检索的执行流程也得到了详细解释，从分析器处理查询词到构建查询语法树、匹配文档、评分和排序等步骤，分析其复杂的工作流程。
elasticsearch查询原理query-fetch分析
u013905744的专栏
11-11 3769
es的查询dsl有很多种类型，比如match query，term query, filter, 关于elasticsearch query 各种dsl可以参考：elastic search query dsl查询语法总结 这篇文章不详细展开具体的区别，仅对完整的流程做一个分析 查询分为两个阶段：query阶段和fetch阶段 query阶段 1、客户端发送请求到任意一个coordinate node（节点默认就为coordinate node） 构建一个priority queue，长度以paging操作
Elasticsearch查询原理浅析
hellozhxy的博客
08-01 539
Elasticsearch作为一个开源的高扩展的分布式全文搜索引擎。最为人称道就是它对于海量数据近乎实时的强大搜索能力了。这里我们从索引的角度来分析一下，为什么Elasticsearch能够实现快速的检索。通过多级索引的方式减小最前端索引占用的空间，感觉与操作系统防止页表太大，而分为多级页表的思想类似将索引放入内存，尽可能减少磁盘随机读，提高索引查找效率。
elasticsearch查询原理
u012063409的博客
03-02 637
1.本文阐述了elasticsearch的查询原理和为什么不能使用深度分页 http://lxwei.github.io/posts/%E4%BD%BF%E7%94%A8scroll%E5%AE%9E%E7%8E%B0Elasticsearch%E6%95%B0%E6%8D%AE%E9%81%8D%E5%8E%86%E5%92%8C%E6%B7%B1%E5%BA%A6%E5%88%86%E9%A
一篇搞懂ElasticSearch（附学习脑图）
05-04 566
小知识，大挑战！本文正在参与“程序员必备小知识”创作活动\ 既然你点进来了，说明你了解过ES或者是对ES感兴趣，这一篇目的在于扫盲，主要以概念理解为主，可能会比较枯燥，但是天将降大任于斯人也，必先… 这篇我以ElasticSearch是什么、底层原理、特点和应用场景三部分来让大家入门ElasticSearch\ ​文章末尾白嫖es学习脑图，要个关注不过分吧？ 了解ElasticSearch 先看看排名，很强的位置吧，学起来，让你薪资翻啊翻，一个月因为学会了一门技术多领个几千块薪资难道不香吗？\ Elas
用原生JS搞懂VUE的响应式原理，这篇文章就够了
01-08
Vue.js的响应式原理是其核心特性之一，它允许开发者以声明式的方式创建动态的数据绑定。Vue通过将数据模型转化为普通的JavaScript对象，并利用`Object.defineProperty`这个ES5的方法，为对象的每个属性添加getter和...
es查询大于某个值的数据_Elasticsearch和MySQL查询原理分析与对比
weixin_39881958的博客
11-22 881
导语ES 现在已经越来越火，很多公司会把 MySQL 里面的数据导入到 ES，用 ES 来做海量数据的实时查询。那为什么 MySQL 做不了海量数据的实时查询呢？为什么 ES 可以？本文将从原理上来回答这个问题。基本分析经过分析和对比，得出结论如下：1、ES 天生分布式架构，天然支持海量数据的分片和查询，而 MySQL 不行；2、MySQL 和 ES 底层索引结构导致即便是单片数据查询，...
一篇文章读懂大数据中台架构.docx
11-23
- **Logstash**：Logstash是Elasticsearch的一部分，主要用于收集、解析和富化来自不同来源的数据。它可以轻松地与Elasticsearch集成，便于数据的存储与检索。Logstash支持丰富的插件，使得数据预处理变得更加灵活和...
【数据库学习】Elasticsearch（ES）原理
午后阳光
10-01 7092
Elasticsearch索引的精髓：一切设计都是为了提高搜索的性能 1，正向索引和反向索引 1）正向索引（正排索引） 从文档中查找字符串。关系型数据库使用的是正向索引。 2）反向索引（倒排索引） 从字符串查找文档。搜索引擎lucene使用的是反向索引。 假设有这么几条数据： ID Name Age Sex 1 Kate 24 Female 2 John 24 Male ...
ElasticSearch学习笔记（九）——Elasticsearch查询原理分析
LJJZJ的博客
01-21 656
一、前言 ES的查询分为两个阶段： 查询 取回 首先，一个 index 的数据会被分为多片，所以一个 document ，只能存在于一个 shard 中，如何确定doc的位置呢？ 数据路由算法： shard = hash(routing) % number_of_primary_shards routing 可以是_id（默认）或者由我们自定义传入。 手动指定 在发送请求的时候，手...
ElasticSearch(ES)的基本使用与查询原理
chen_yuxi的博客
02-14 1705
1.缘起 为啥想学习es，主要是在工作中会用到，但是因为不了解原理，所以用起来畏手畏脚的，就想了解下es是怎么存储数据，以及es是怎么搜索数据的，和平时的mysql有什么区别，什么情况下用es，什么情况下用mysql。第一次接触es是纠纷有个需求，需要搜索用户组，但是一个用户可能会有多个用户组，此时mysql虽然可以支持，但是搜索效率很低，就考虑将纠纷接入es。 ...
【154期】面试官：你能说说 Elasticsearch 查询数据的工作原理是什么吗？
良月柒
03-12 439
程序员的成长之路互联网/程序员/技术/资料共享关注阅读本文大概需要 7分钟。来自：https://doocs.gitee.io/#/面试题ES 写入数据的工作原理是什么啊？ES 查询数...
es查询原理
TreeCode的博客
07-21 1336
es查询原理： 步骤： 查询请求将被随机发送到一个es节点，该节点成为coordinating node，即协调节点 协调节点根据路由算法算出被查询doc所在的primary shard在哪个节点 协调节点使用轮询调度算法（Round-Robin Scheduling）将请求平均的分配到primary shard和replica shard上，目的是负载均衡 处理请求的节点将请求结果返回给协调节点 协调节点将结果返回给用户 本文参考 千锋教育 搜索引擎 ElasticSearch 视频教程全集（60P）
ElasticSearch 面试 4 连炮，你顶得住么？
程序猿DD
01-28 956
作者 |kevin0016来源 |https://www.jianshu.com/p/d6fd7e8cf220面试题es 写入数据的工作原理是什么啊？es 查询数据的工作原理是什么啊...
ElasticSearch原理+实战知识点
weixin_46787788的博客
11-30 2121
今天为大家带来流计算领域经常使用的组件 ElasticSearch，本文通过原理+实战操 教程带领大家快速学会 ElasticSearch 搜索引擎，以下内容全部经过实战操作，可 以根据文档进行学习~ 大纲如下： 1 ElasticSearch 概述 1.1 全文搜索引擎 小伙伴们经常使用 google 或者百度进行搜索内容，在输入框中输入关键字，这个时候，网站会将包含 关键字 的所有网页返回，大家有没有想过，为什么输入关键字就可以查到结果呢？ 同时网站上返回的页面内容大多都是一些 非结构化 的文本数据，
《熬夜搞17000字，彻底搞懂ES搜索引擎的原理和使用》
平常经常用ES(ElasticSearch)，觉得这真是个好玩意儿，所以来分享一篇文章，希望通过这篇文章能让读者大致了解ES是做什么的以及它的使用和基本原理。可能有的读者航海不知道ES是个啥玩儿，别着急，看完本文后，相信...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

huangleijay

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值