elasticsearch的查询器（query）和过滤器（filter）的比较

最新推荐文章于 2023-03-30 21:26:56 发布
最新推荐文章于 2023-03-30 21:26:56 发布
阅读量425 收藏
点赞数
分类专栏： 技术篇 文章标签： elasticsearch 

<p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"><span style="font-size: 16px;">类似lucene, elasticsearch的查询有两部分组成：query and filter 。 </span></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"><span style="box-sizing: border-box; font-size: 14px;">参考：https://www.elastic.co/guide/en/elasticsearch/guide/current/_queries_and_filters.html</span></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;">
<span style="box-sizing: border-box; color: rgb(0, 153, 0); text-decoration: none; font-size: 18px;"></span></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"><span style="box-sizing: border-box; font-size: 18px;">Query查询器 与 Filter 过滤器</span></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"><span style="box-sizing: border-box; font-size: 14px;">尽管我们之前已经涉及了查询DSL，然而实际上存在两种DSL：查询DSL（query DSL）和过滤DSL（filter DSL）。</span><br style="box-sizing: border-box;" /><span style="box-sizing: border-box; font-size: 14px;">过滤器（filter）通常用于过滤文档的范围，比如某个字段是否属于某个类型，或者是属于哪个时间区间</span><br style="box-sizing: border-box;" /><span style="box-sizing: border-box; font-size: 14px;">* 创建日期是否在2014-2015年间？</span><br style="box-sizing: border-box;" /><span style="box-sizing: border-box; font-size: 14px;">* status字段是否为success？</span></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"><span style="box-sizing: border-box; font-size: 14px;">* lat_lon字段是否在某个坐标的10公里范围内？</span></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"><span style="box-sizing: border-box; font-size: 16px;"><br style="box-sizing: border-box;" /></span></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"><span style="box-sizing: border-box; font-size: 16px;">查询器（query）的使用方法像极了filter，但query更倾向于更准确的查找。</span></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"><span style="box-sizing: border-box; font-size: 16px;">* 与full text search的匹配度最高</span></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"><span style="box-sizing: border-box; font-size: 16px;">* 正则匹配</span></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"><span style="box-sizing: border-box; font-size: 16px;">* 包含run单词，如果包含这些单词：runs、running、jog、sprint，也被视为包含run单词</span><br style="box-sizing: border-box;" /><span style="box-sizing: border-box; font-size: 16px;">* 包含quick、brown、fox。这些词越接近，这份文档的相关性就越高</span><br style="box-sizing: border-box;" /><span style="box-sizing: border-box; font-size: 16px;">查询器会计算出每份文档对于某次查询有多相关（relevant），然后分配文档一个相关性分数：_score。而这个分数会被用来对匹配了的文档进行相关性排序。相关性概念十分适合全文搜索（full-text search），这个很难能给出完整、“正确”答案的领域。</span></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"><span style="box-sizing: border-box; font-size: 16px;">query filter在性能上对比：filter是不计算相关性的，同时可以cache。因此，filter速度要快于query。</span></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"><span style="box-sizing: border-box; font-size: 16px;">下面是使用query语句查询的结果,第一次查询用了300ms,第二次用了280ms.</span></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"></p><p style="box-sizing: border-box; margin-top: 0px; margin-bottom: 10px; color: rgb(61, 68, 80); font-family: "Microsoft Yahei", Helvetica, Arial, sans-serif;"></p><div id="crayon-57b29b90eda00375056990" class="crayon-syntax crayon-theme-solarized-light crayon-font-monaco crayon-os-pc print-yes notranslate" data-settings=" minimize scroll-mouseover expand" style="box-sizing: border-box; text-size-adjust: none; width: 712px; padding: 0px; margin: 12px 0px; font-family: Monaco, MonacoRegular, "Courier New", monospace; color: rgb(61, 68, 80); height: auto; top: auto; left: auto; overflow: hidden !important; position: relative !important; direction: ltr !important; text-shadow: none !important; background: rgb(253, 246, 227) !important; border-style: solid !important; border-width: 1px !important; border-color: rgb(153, 153, 153) !important; line-height: 15px !important;"><div class="crayon-toolbar" data-settings=" show" style="box-sizing: border-box; border-top: 0px; border-right: 0px; border-left: 0px; border-image: initial; padding: 0px; margin: 0px; width: 710px; position: relative; overflow: hidden; z-index: 4; background: rgb(221, 221, 221) !important; border-bottom: 1px solid rgb(187, 187, 187) !important; height: 18px !important; line-height: 18px !important;"><span class="crayon-title" style="box-sizing: border-box; font-family: inherit; float: left; height: inherit; font-size: inherit !important; line-height: inherit !important; font-weight: inherit !important; color: rgb(51, 51, 51) !important; padding: 0px 4px !important;"></span><div class="crayon-tools" style="box-sizing: border-box; font-family: inherit; background: 0px center; border: 0px; padding: 0px; margin: 0px; position: absolute; right: 0px; height: 18px !important; line-height: 18px !important; font-weight: inherit !important; float: right !important;"><div class="crayon-button crayon-nums-button crayon-pressed" title="切换是否显示行编号" style="box-sizing: border-box; font-family: inherit; background-image: initial; background-position: -24px 0px; background-size: initial; background-repeat: no-repeat; background-attachment: initial; background-origin: initial; background-clip: initial; border: 0px; padding: 0px; margin: 0px; height: inherit; line-height: 15px; display: inline; position: relative; width: 24px; color: rgb(255, 255, 255); background-color: rgb(188, 188, 188) !important; font-size: inherit !important; font-weight: inherit !important; float: left !important;"><div class="crayon-button-icon" style="box-sizing: border-box; font-family: inherit; background: url("../images/toolbar/buttons.png") -24px -32px; border: 0px; padding: 0px; margin: -8px 0px 0px; width: 24px; position: absolute; left: 0px; top: 9px; height: 16px !important; font-size: inherit !important; line-height: inherit !important; font-weight: inherit !important;"></div></div><div class="crayon-button crayon-plain-button crayon-pressed" title="纯文本显示代码" style="box-sizing: border-box; font-family: inherit; background-image: initial; background-position: -24px 0px; background-size: initial; background-repeat: no-repeat; background-attachment: initial; background-origin: initial; background-clip: initial; border: 0px; padding: 0px; margin: 0px; height: inherit; line-height: 15px; display: inline; position: relative; width: 24px; color: rgb(255, 255, 255); background-color: rgb(188, 188, 188) !important; font-size: inherit !important; font-weight: inherit !important; float: left !important;"><div class="crayon-button-icon" style="box-sizing: border-box; font-family: inherit; background: url("../images/toolbar/buttons.png") -24px -48px; border: 0px; padding: 0px; margin: -8px 0px 0px; width: 24px; position: absolute; left: 0px; top: 9px; height: 16px !important; font-size: inherit !important; line-height: inherit !important; font-weight: inherit !important;"></div></div><div class="crayon-button crayon-wrap-button" title="切换自动换行" style="box-sizing: border-box; font-family: inherit; background-image: initial; background-position: 0px center; background-size: initial; background-repeat: no-repeat; background-attachment: initial; background-origin: initial; background-clip: initial; border: 0px; padding: 0px; margin: 0px; height: inherit; line-height: 15px; display: inline; position: relative; width: 24px; background-color: transparent !important; font-size: inherit !important; font-weight: inherit !important; float: left !important;"><div class="crayon-button-icon" style="box-sizing: border-box; font-family: inherit; background: url("../images/toolbar/buttons.png") 0px -112px; border: 0px; padding: 0px; margin: -8px 0px 0px; width: 24px; position: absolute; left: 0px; top: 9px; height: 16px !important; font-size: inherit !important; line-height: inherit !important; font-weight: inherit !important;"></div></div><div class="crayon-button crayon-copy-button" title="复制代码" style="box-sizing: border-box; font-family: inherit; background-image: initial; background-position: 0px center; background-size: initial; background-repeat: no-repeat; background-attachment: initial; background-origin: initial; background-clip: initial; border: 0px; padding: 0px; margin: 0px; height: inherit; line-height: 15px; display: inline; position: relative; width: 24px; background-color: transparent !important; font-size: inherit !important; font-weight: inherit !important; float: left !important;"><div class="crayon-button-icon" style="box-sizing: border-box; font-family: inherit; background: url("../images/toolbar/buttons.png") 0px -16px; border: 0px; padding: 0px; margin: -8px 0px 0px; width: 24px; position: absolute; left: 0px; top: 9px; height: 16px !important; font-size: inherit !important; line-height: inherit !important; font-weight: inherit !important;"></div></div><div class="crayon-button crayon-popup-button" title="在新窗口中显示代码" style="box-sizing: border-box; font-family: inherit; background-image: initial; background-position: 0px center; background-size: initial; background-repeat: no-repeat; background-attachment: initial; background-origin: initial; background-clip: initial; border: 0px; padding: 0px; margin: 0px; height: inherit; line-height: 15px; display: inline; position: relative; width: 24px; background-color: transparent !important; font-size: inherit !important; font-weight: inherit !important; float: left !important;"><div class="crayon-button-icon" style="box-sizing: border-box; font-family: inherit; background: url("../images/toolbar/buttons.png") 0px 0px; border: 0px; padding: 0px; margin: -8px 0px 0px; width: 24px; position: absolute; left: 0px; top: 9px; height: 16px !important; font-size: inherit !important; line-height: inherit !important; font-weight: inherit !important;"></div></div><span class="crayon-language" style="box-sizing: border-box; font-family: inherit; float: left; height: inherit; font-size: inherit !important; line-height: inherit !important; font-weight: inherit !important; color: rgb(153, 153, 153) !important; padding: 0px 8px 0px 4px !important;">Python</span></div></div><div class="crayon-plain-wrap" style="box-sizing: border-box; background: 0px center; border: 0px; padding: 0px !important; margin: 0px !important; height: auto !important;">
  
  

   
   
 
       
 
        

          1 
        
 
        

          2 
        
 
        

          3 
        
 
        

          4 
        
 
        

          5 
        
 
        

          6 
        
 
        

          7 
        
 
        

          8 
        
 
        

          9 
        
 
        

          10 
        
 
        

          11 
        
 
        

          12 
        
 
        

          13 
        
 
        

          14 
        
 
        

          15 
        
 
        

          16 
        
 
        

          17 
        
 
        

          18 
        
 
        

          19 
        
 
        

          20 
        
 
        

          21 
        
 
        

          22 
        
 
        

          23 
        
 
        

          24 
        
 
        

          25 
        
 
        

          26 
        
 
        

          27 
        
 
        

          28 
        
 
        

          29 
        
 
        

          30 
        
 
        

          31 
        
 
        

          32 
        
 
        

          33 
        
 
        

          34 
        
 
        

          35 
        
 
        

          36 
        
 
        

          37 
        
 
        

          38 
        
 
        

          39 
        
 
        

          40 
        
 
        

          41 
        
 
       
 
       
 
        

            
        
 
        
 
         #blog:  http://xiaorui.cc 
        
 
        
 
         { 
        
 
        
 
              
         "size" 
         : 
           
         1 
         , 
        
 
        
 
              
         "query" 
         : 
           
         { 
        
 
        
 
                  
         "bool" 
         : 
           
         { 
        
 
        
 
                      
         "must" 
         : 
           
         [ 
        
 
        
 
                          
         { 
        
 
        
 
                              
         "terms" 
         : 
           
         { 
        
 
        
 
                                  
         "keyword" 
         : 
           
         [ 
        
 
        
 
                                      
         "手机" 
         , 
        
 
        
 
                                      
         "iphone" 
        
 
        
 
                                  
         ] 
        
 
        
 
                              
         } 
        
 
        
 
                          
         } 
         , 
        
 
        
 
                          
         { 
        
 
        
 
                              
         "range" 
         : 
           
         { 
        
 
        
 
                                  
         "cdate" 
         : 
           
         { 
        
 
        
 
                                      
         "gt" 
         : 
           
         "2015-11-09T11:00:00" 
        
 
        
 
                                  
         } 
        
 
        
 
                              
         } 
        
 
        
 
                          
         } 
        
 
        
 
                      
         ] 
        
 
        
 
                  
         } 
        
 
        
 
              
         } 
        
 
        
 
         } 
        
 
        

            
        
 
        
 
         { 
        
 
        
 
              
         "took" 
         : 
           
         51 
         , 
        
 
        
 
              
         "timed_out" 
         : 
           
         false 
         , 
        
 
        
 
              
         "_shards" 
         : 
           
         { 
        
 
        
 
                  
         "total" 
         : 
           
         30 
         , 
        
 
        
 
                  
         "successful" 
         : 
           
         30 
         , 
        
 
        
 
                  
         "failed" 
         : 
           
         0 
        
 
        
 
              
         } 
         , 
        
 
        
 
              
         "hits" 
         : 
           
         { 
        
 
        
 
                  
         "total" 
         : 
           
         6818 
         , 
        
 
        
 
                  
         "max_score" 
         : 
           
         0 
         , 
        
 
        
 
                  
         "hits" 
         : 
           
         [ 
         ] 
        
 
        
 
              
         } 
        
 
        
 
         } 
        
 
       

  
  
下面是使用filter查询出来的结果,第一次查询时间是280ms,第二次130ms…. 速度确实快了不少，也证明filter走了cache缓存。 但是如果我们对比下命中的数目，query要比filter要多一点，换句话说，更加的精准。 

【Elasticsearch】Elasticsearch filter和query的不同
九师兄
05-09 413
查询上下文中，查询操作不仅仅会进行查询，还会计算分值，用于确定相关度；在过滤器上下文中，查询操作仅判断是否满足查询条件过滤器上下文中，查询的结果可以被缓存。
Elasticearch Filter Query 过滤查询--(五)
好好学习技术
02-07 1456
Elasticearch Filter Query 过滤查询
Elasticsearch DSL中Query与Filter的不同
xingoo
11-18 180
Elasticsearch支持很多查询方式，其中一种就是DSL，它是把请求写在JSON里面，然后进行相关的查询。 举个DSL例子 GET _search { "query": { "bool": { "must": [ { "match": { "title": "Search" }}, ...
【转】elasticsearch的查询器query与过滤器filter的区别
weixin_30412577的博客
11-25 246
很多刚学elasticsearch的人对于查询方面很是苦恼，说实话es的查询语法真心不简单… 当然你如果入门之后，会发现elasticsearch的rest api设计是多么有意思。 说正题，elasticsearch的查询有两部分组成：query and filter 。 下面是官方的query vs filter的介绍，其实说的也是不明不白的. https://www.elast...
elasticsearch的查询器query与过滤器filter的区别
JacksonKing的专栏
03-06 376
很多刚学elasticsearch的人对于查询方面很是苦恼，说实话es的查询语法真心不简单… 当然你如果入门之后，会发现elasticsearch的rest api设计是多么有意思。 说正题，elasticsearch的查询有两部分组成：query and filter 。 下面是官方的query vs filter的介绍，其实说的也是不明不白的. https://www.el...
Elasticsearch的查询器query与过滤器filter的区别
matl1990的博客
09-07 3800
elasticsearch的查询器query与过滤器filter的区别
【ElasticSearch】filter与query对比
海棠不惜胭脂色，独立蒙蒙细雨中
12-07 232
对比filter与query的使用： 先插入两条数据： PUT /company/employee/2 { "address": { "country": "china", "province": "jiangsu", "city": "nanjing" }, "name": "tom", "age": 30, "join_date": "2016-01-01" } PUT /company/employee/3 { "address": { "co
ElasticQuery:一个用于Elasticsearch的简单（Python）查询构建器
05-04
使用metod调用及其args / kwargs生成查询/过滤器/聚合对象。 输出dict / json表示形式，将其直接传递给ES。 概要 from elasticsearch import Elasticsearch from elasticquery import ElasticQuery , Filter , ...
ElasticSearch-过滤查询(filter)（四）
qq_42218187的博客
11-23 9171
Filter Query(执行顺序：先进行过滤，之后再筛选出符合条件的) 1. 过滤查询 其实准确来说，ES中的查询操作分为2种: 查询(query)和过滤(filter)。查询即是之前提到的query查询，它 (查询)默认会计算每个返回文档的得分，然后根据得分排序。而过滤(filter)只会筛选出符合的文档，并不计算 得分，且它可以缓存文档 。所以，单从性能考虑，过滤比查询更快。 换句话说，过滤适合在大范围筛选数据，而查询则适合精确匹配数据。一般应用时， 应先使用过滤操作过滤数据， ...
【ES】ElasticSearch 结构化查询和过滤
w1992wishes的博客
10-09 649
文章目录@[toc]一、DSL1.1、叶子查询语句1.2、复合查询语句二、Query DSL 和 Filter DSL2.1、Query DSL2.2、Filter DSL2.3、比较三、重要的查询过滤语句3.1、match3.2、multi_match3.3、match_phrase3.4、match_all3.5、term3.6、terms3.7、range3.8、exists3.9、bool...
ElasticSearch系列 - SpringBoot整合ES：查询条件 query 和过滤条件 filter 的区别
最新发布
你今天真好看呀
03-30 2725
需要注意的是，虽然过滤器（Filter）不会影响文档的相关性得分，但是当过滤器与查询条件组合使用时，查询结果仍然会根据文档与查询条件的匹配程度计算相关性得分。ElasticSearch中的过滤器（Filter）是一种用于限制查询结果范围的查询类型，它可以根据指定的条件来过滤掉不符合要求的文档，从而提高查询效率。在ElasticSearch中，过滤器（Filter）是一种用于限制查询结果范围的查询类型，它可以根据指定的条件来过滤掉不符合要求的文档，从而提高查询效率。
为QUERY设置过滤条件
CK_MooN的专栏
03-09 1298
给Query传过滤条件 EntityViewInfo evi = new EntityViewInfo(); FilterInfo filterInfo = new FilterInfo(); //建立过滤条件 filterInfo.getFilterItems().add( new FilterItemInfo("typelink.id", info.getId(), Com
【Python】Django filter 如何支持 or 条件过滤？
weixin_34357887的博客
03-28 783
from django.db.models import QItem.objects.filter(Q(creator=owner) | Q(moderated=False)) 代码示例： if(request.GET.has_key('search')): search = request.GET.get('search') ...
Elasticsearch中Query与Filter之间的区别
weixin_34319999的博客
05-25 254
2019独角兽企业重金招聘Python工程师标准>>> ...
dsl java 语言_DSL语句丶Java教程网-IT开发者们的技术天堂
weixin_31089065的博客
02-15 347
结构化查询Elasticsearch在一个简单的JSON接口中用结构化查询来展现Lucene绝大多数能力空查询 -{}- 在功能上等同于使用match_all查询子句，正如其名字一样，匹配所有的文档：GET /_search{"query": {"match_all": {}}}等同于GET /_search{}查询子句的JSON构造结构{QUERY_NAME: {ARGUMENT: VALU...
吃透 | Elasticsearch filter和query的不同
热门推荐
铭毅天下Elasticsearch
05-27 5万+
少啰嗦，直接看东西。——罗永浩 1、query和filter的本质区别？ 以下几张图能更好的概括： query关注点：此文档与此查询子句的匹配程度如何？ filter关注点：此文档和查询子句匹配吗？ 2、Query检索细化关注点 1）是否包含？ 确定文档是否应该成为结果的一部分. 2）相关度得分多少？ 除了确定文档是否匹配外，查询子句还计算了表示文档与其他文档相比匹配程度...
es filter过滤器_Elasticsearch 之 Filter 与 Query 有啥不同？
weixin_30446969的博客
02-01 2992
今天来了解下 Elasticsearch(以下简称 ES) 中的 Query 和 Filter。在 ES 中，提供了 Query 和 Filter 两种搜索：Query Context：会对搜索进行相关性十分Filter Context：不需要相关性算分，能够利用缓存来获得更好的性能举一个例子，比如需要搜索一场电影，包含以下信息：评论中包含了烧脑，评分高于 8 分，同时上映时间在 2010 到 2...
Elasticsearch——filter过滤查询
weixin_34242331的博客
02-19 2170
1. filter filter，就是按照搜索条件过滤出需要的数据，不计算任何相关度分数，对相关度没有影响 2. filter 与 query 对比 filter，按照搜索条件过滤出需要的数据，不计算任何相关度分数，对相关度没有影响 query，会去计算每个document相对于搜索条件的相关度，并按照相关度进行排序 在实际开发中，如果需要把最匹配搜索条件的数据先返回，那么用query，果只是...
Elasticsearch查询API详解：全文检索与过滤器应用
Elasticsearch查询API提供了一种强大而灵活的方式来处理复杂的搜索和过滤任务，通过理解并熟练运用查询和过滤器上下文，开发者能够更有效地利用Elasticsearch进行高效的数据检索。掌握这些概念对于开发基于Elastic...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值