ElasticSearch 源码分析19 Node && search scroll

最新推荐文章于 2022-06-15 17:29:48 发布
最新推荐文章于 2022-06-15 17:29:48 发布
阅读量271 收藏
点赞数
分类专栏： es，solr 搜索相关
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kuaipao19950507/article/details/106006780
版权
本文深入探讨了ElasticSearch中Node和Search Scroll的操作。首先介绍了如何获取并处理节点数组，接着详细阐述了TransportSearchScrollAction的工作流程，包括QUERY_THEN_FETCH、QUERY_AND_FETCH、DFS query and fetch以及DFS_QUERY_THEN_FETCH四种搜索模式的差异，特别是DFS模式在搜索精度和效率上的权衡。
摘要由CSDN通过智能技术生成 
TransportNodesAction

1.获取请求的nodes节点数组，获取不到就直接return

2.循环nodes数组，然后获取每个node的nodeId

3.根据nodeId创建nodeRequest，然后调用TransportService.sendRequest发送请求

4.回调函数handleResponse来处理请求的响应respon

++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++

TransportSearchScrollAction

1.从request获取scrollId

2.判断scrollId的类型Type，分成QUERY_THEN_FETCH 和 QUER

最低0.47元/天 解锁文章
kuaipao19950507
关注
专栏目录
【ElasticSearch】Es 源码之 NodeService 源码解读
九师兄
05-06 257
1.概述 根据启动流程 【ElasticSearch】Es 启动流程源码分析 在Node初始化的时候将会初始化NodeService logger.info("初始化 NodeService "); this.nodeService = new NodeService(settings, threadPool, monitorService, discoveryModule.getDiscovery(), transportService, indicesService, pluginsServ
Elasticsearch源码（二）：scroll原理
桃花惜春风
04-13 3524
问题 scroll查询指定_doc排序要比不指定sort或者指定某个字段sort要快很多。 scroll查询每次依然要进行collect及计算打分，并非是第一次查询之后会缓存命中结果。 源码分析 首先看一下Elasticsearch的Collector，主要以下几个 这里主要介绍一下TopDocsCollector，TopDocsCollector类在收集完文档后，会返回一个TopDocs对象。TopDocs对象是收集后的文档信息按照某种规则有序的存放在TopDocs对象中，该对象是搜索结果的返回值。
Elasticsearch scroll的源码研究
zsy455636422的专栏
12-09 515
本文主要对Elasticsearch scroll 的API进行深入剖析，包括client端和service端。 client端的源码研究 首先是构建transportclient对象，在settings中设置cluster的各种属性。 Settings settings = ImmutableSettings.settingsBuilder() .put("client.tran
elasticsearch 源代码分析之ScanScroll
chian1949的博客
10-27 149
ScanScroll 的特点 优点 速度快 大数据量 缺点 不支持排序 不支持分页 不支持评分 不支持续查 使用场景 看起来，缺点要比优点多很多，不过它很有用。如果说BULK是为了快速入库存...
elasticSearch6源码分析(7)node
12-13 155
1.node概述 Any time that you start an instance of Elasticsearch, you are starting a node. A collection of connected nodes is called a cluster. If you are running a single node of Elasticsearch, ...
Elasticsearch
weixin_55261016的博客
06-15 729
ELK是包含但不限于Elasticsearch（简称es）、Logstash、Kibana 三个开源软件的组成的一个整体。这三个软件合成ELK。是用于数据抽取（Logstash）、搜索分析（Elasticsearch）、数据展现（Kibana）的一整套解决方案，所以也称作ELK stack。 本课程从分别对三个组件经行详细介绍，尤其是Elasticsearch，因为它是elk的核心。本课程从es底层对文档、索引、搜索、聚合、集群经行介绍，从搜索和聚合分析实例来展现es的魅力。Logstash从内部如何采集
【2021最新版】Elasticsearch面试题总结（24道题含答案解析）
热门推荐
程序媛小琬的博客
05-11 3万+
文章目录1、Elasticsearch了解多少，说说你们公司ES的集群架构，索引数据大小，分片有多少，以及一些调优手段 。2、Elasticsearch的倒排索引是什么？3、Elasticsearch索引数据多了怎么办，如何调优，部署？4、Elasticsearch是如何实现master选举的？5、详细描述一下Elasticsearch索引文档的过程。6、详细描述一下Elasticsearch搜索的过程？7、Elasticsearch在部署时，对Linux的设置有哪些优化方法？8、lucence内部结构是什
ElasticSearch修改默认分片数量
kubernetes中文社区
08-11 4977
PUT /_cluster/settings { "persistent": { "cluster": { "max_shards_per_node":10000 } } } es 默认分片数量是100 使用此方法修改成10000 Elasticsearch基于JAVA开发而来，Elasticsearch能够从传统的解决方案中脱颖而出，自然尤其深邃之处。本次的课程我们将不再满足于Elasticsearch的基础技术，而是全面且深入的进行探究。从Elasticsea..
2021年Elasticsearch 高级面试题及答案
weixin_56667968的博客
04-08 2642
前言 最近针对互联网公司面试问到的知识点，总结出了Java程序员面试涉及到的绝大部分面试题及答案分享给大家，希望能帮助到你面试前的复习且找到一个好的工作，也节省你在网上搜索资料的时间来学习。 内容涵盖：Java、MyBatis、ZooKeeper、Dubbo、Elasticsearch、Memcached、Redis、MySQL、Spring、SpringBoot、SpringCloud、RabbitMQ、Kafka、Linux等技术栈。 完整版Java面试题地址：JAVA后端面试题整合 1、elastic
ElasticSearch 源码分析三 节点Node初始化 && 启动
郭传志的博客
11-23 305
Node类源码结构 核心类Node 先看Node的构造函数 1.创建nodeEnvironment，节点的环境信息 2.读取jvm信息 jvmInfo 3.创建pluginService对象，会加载所有的模块和插件 4.然后调用pluginService更新settings配置文件 5.再初始化最终的environment 6.创建一个线程池，包含一个List<Exec...
Elasticsearch 5.x 源码分析（3）from size, scroll 和 search after
C18298182575的博客
01-06 250
前两天突然被业务部的同事问了一句：“我现在要做搜索结果全量导，该用哪个接口，性能要好的？”之前虽然是知道这三种方法都是可以做分页的深度查询，但是由于具体的代码实现细节没看过，因此心里一下子就没有了底气，只好回答说先看看。 from size from size是最家喻户晓的，也是最暴力的，需要查询from + size 的条数时，coordinate node就向该index的其余的shards 发送同样的请求，等汇总到（shards * （from + size））条数时在coordinate nod
ElasticSearch 源码分析八 ES搜索实现 Search(一)
郭传志的博客
12-01 624
搜索任务被分成两步，query and fetch 建立索引和执行搜索的原理 词 --> 生成倒排和正排索引 9.1.2 执行搜索 1. 对检索字段使用建立索引时相同的分析器进行分析，产生Token列表 2.根据查询语句的语法规则转换成一棵语法树 3.查找符合语法树的文档 4.对匹配到的文档列表进行相关性评分，使用TF/IDF ...
［8］elasticsearch源码深入分析——Node与NodeEnvironment的实例化
weixin_33724570的博客
01-22 135
本篇为elasticsearch源码分析系列文章的第八篇，又到了我们深扒ElasticSearch源码的时候了:） 本篇开始将会详细解释Node实例化的过程，从Node实例化这个操作为源点，了解ElasticSearch的编码思想,由于Node内容众多，所以会分篇叙述。 Node概览 前不久的分析中说到了，Node是ElasticSearch启动的重中之重，一个Node代表在一个集群(clus...
elasticsearch 启动过程源码（三）
anti
06-08 842
elasticsearch 启动过程源码（三） 主要涉及NodeEnvironment 注 es 版本1.0 上次看到了InternalNode构造函数中的压缩配置，今天就涉及到InternalNode中的非常重要的一行代码 NodeEnvironment nodeEnvironment = new NodeEnvironment(this.settings, this.enviro...
ElasticSearch CircuitBreakingException相关问题排查
define_us的专栏
10-22 4716
现象 logstash向ES写入数据，出现错误 [2018-10-22T14:23:07,406][INFO ][logstash.outputs.elasticsearch] retrying failed action with response code: 503 ({&quot;type&quot;=&amp;gt;&quot;circuit_breaking_exception&quot;, &quot;reason&quot;=&a
Elasticsearch Scroll (游标)API详解
kevin_xiang的专栏
02-21 8366
http://www.16php.com/archives/380 今天我们来探讨一下Elasticsearch Scroll API，在这之前我们先回顾一下数据库的知识。 1. 相关数据库知识（帮助理解） 传统数据库游标：游标（cursor）是系统为用户开设的一个数据缓冲区，存放SQL语句的执行结果。每个游标区都有一个名字,用户可以用SQL语句逐一从游标中获取记录，并赋
ElasticSearch实战：打造高效搜索与分析引擎
"本文主要介绍了如何使用ElasticSearch (ES) 搭建搜索和分析引擎，强调了ES作为搜索引擎轮子的便利性和其提供的统计分析能力，对比了自行开发和使用现成解决方案的差异。文章提及ES是基于Lucene构建的开源产品，通过...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值