es的doc_value对排序字段的作用

最新推荐文章于 2023-04-10 08:48:28 发布
最新推荐文章于 2023-04-10 08:48:28 发布
阅读量250 收藏
点赞数
分类专栏： elasticsearch 文章标签： elasticsearch javascript
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lixia0417mul2/article/details/120775996
版权

es普通情况下的查询类型是query_then_fetch,query阶段是把所有满足条件的文档id和对应的排序字段的值读取到汇总节点，按照排序字段的值排序后取前N的文档id再进行下一步的fetch阶段，所以各个分片如何快速的返回文档id和排序字段值就至关重要，而doc_value字段的作用即在于此，他可以根据文档id快速得到对应字段的值.

lixia0417mul2
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
排序及Doc Values&Fielddata
weixin_40809179的博客
11-25 73
//单字段排序 POST /kibana_sample_data_ecommerce/_search { "size": 5, "query": { "match_all": {} }, "sort": [ { "order_date": { "order": "desc" } } ] } //多字段排序 POST /kibana_sample_data_ecommerce/_search { "size": 5, ...
sort-script:elasticsearch排序脚本
04-07
Elasticsearch默认提供了多种排序方式，如字段排序、评分排序等。然而，在实际应用中，我们可能需要根据更复杂的场景进行排序，例如，基于多个字段的组合权重、动态计算的值或者实时的外部数据。这时，SortScript就...
当es使用script脚本查询聚合等操作遇到空字段报错问题解决方案
IT之一小佬的博客
04-10 2167
当es使用script脚本查询聚合等操作遇到空字段报错问题解决方案
ES doc_values介绍2——本质是field value的列存储，做聚合分析用，ES默认开启，会占用存储空间...
weixin_33758863的博客
11-15 457
一、doc_values介绍 doc values是一个我们再三重复的重要话题了，你是否意识到一些东西呢？ 搜索时，我们需要一个“词”到“文档”列表的映射 排序时，我们需要一个“文档”到“词“列表的映射，换句话说，我们需要一个在倒排索引的基础上建立的“正排索引” 这里的“正排索引”结构通常在其他系统中（如关系型数据库）被称为“列式存储”。本质上，它是...
关于es中聚类 与 Doc Values 与 列式存储问题
Angus
01-15 1457
抛砖引玉：我们先来思考一个问题，es中的agg桶聚类，等操作是如何来做到的？ 如果想要提升聚类的性能，又应该如何做呢？ 我们可以从es的底层存储原理中来寻找答案！所以将会学到Doc Values这个列式存储的数据结构。 那又为什么需要列式存储？我提一个需求你大概就能明白了：如果mysql中数据有1000W,如果让你去执行groupby操作，需要多长的时间呢？假如数据有 1 亿、10亿，又需要花多长时间呢？如果能做到秒级别？因为mysql是按行来存储数据的，想要完成这...
Elasticsearch学习---Doc_values应用介绍
自律使我自由
07-12 980
前言
Elastic_Search_CRUD_Swagger
05-14
@Api(value = "Elasticsearch Operations", description = "CRUD operations on Elasticsearch") public class ElasticsearchController { @ApiOperation(value = "Create Document", notes = "Adds a document to...
Elasticsearch5学习笔记和Java对es进行增删改查示例
01-09
**Java 对 Elasticsearch 的增删改查示例** Java API 提供了丰富的接口来与Elasticsearch进行交互。以下是一些基本操作的示例代码： ```java // 创建TransportClient或RestHighLevelClient TransportClient client...
flink如何写入Elasticsearch5和Elasticsearch7
最新发布
01-30
而到了Elasticsearch 7，由于`type`字段的移除，我们在`Elasticsearch7RowSinkFunction`中创建`IndexRequest`时不再包含`type`。 这两个示例都涉及到以下知识点： 1. **Flink的Elasticsearch Connector**: 这是...
python中的Elasticsearch操作汇总
09-18
在Python中，Elasticsearch是一个强大的全文搜索引擎库，它提供了丰富的API来操作Elasticsearch集群。...在实践中，还可以结合Elasticsearch的聚合分析、过滤、排序等功能，实现更复杂的数据处理需求。
ElasticSearch的Script逻辑查询
qq_36245532的博客
07-06 4719
———————————————— 版权声明：本文为CSDN博主「CTO修炼手册」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。 原文链接：https://blog.csdn.net/Prepared/article/details/102893852 在使用 ES 进行统计的时候，经常会用到查询某个小时的统计数据，比如统计每个小时的数据；比如计算早晚高峰的数据。 这些场景都可以使用 script 进行查询、统计。 ES 语句 { "query": { "boo
ElasticSearch搜索引擎：常用的存储mapping配置项 与 doc_values详细介绍
热门推荐
张维鹏的博客
06-15 1万+
1、Elasticsearch的mapping设置：enabled，index，doc_values，store，_source 2、doc_values 详细说明：doc values就是在构建倒排索引时，对开启 doc values 的字段额外构建一个有序的 "document文档 ==> field value“ 的列式存储映射，从而实现对指定字段进行排序和聚合时对内存的依赖，提升该过程的性能。 3、doc_values 与 source 的区别？使用 docvalue_fields 检索指定字段
ES doc_values介绍——本质是field value的列存储，做聚合分析用，ES默认开启，会占用存储空间（列存储压缩技巧，除公共除数或者同时减去最小数，字符串压缩的话，直接去重后用数字ID压...
djph26741的博客
02-15 184
doc_values Doc values are the on-disk data structure, built at document index time, which makes this data access pattern possible. They store the same values as the_sourcebut in a column-o...
ElasticSearch | 排序 | Doc Values | Fielddata
乌鲁木齐001号程序员
05-27 360
排序 默认情况下，ElasticSearch 会根据算分进行排序； 可以使用 sort API 指定排序的规则 排序 | sort API | 举几个栗子 根据单字段排序 使用了 sort API 之后，_score 的值就会变成 null； POST /kibana_sample_data_ecommerce/_search { "size": 5, "query": { ...
ES的默认排序和慎用_doc排序
shengpli′s blog
06-10 3949
1.ES的默认排序 ES默认的排序，是按 _score的desc。如果score分数一样排序就会乱。所以需要给不打分的数据排序可以用** _uid或者自定义的字段排序** 2.为什么慎用_doc排序 _doc 其实就是按照Lucene 文件结构的当时索引时的先后顺序，那么按道理它就是最快的，可是，别忘了，ES是分布式的，也就是说，这里有很多个Lucene，这个_doc 在一个shard 里它是唯一...
Es官方文档整理-3.Doc Values和FieldData
儒生的博客
02-24 6585
1.Doc Values 聚合使用一个叫Doc Values的数据结构。Doc Values使聚合更快、更高效且内存友好。 Doc Values的存在是因为倒排索引只对某些操作是高效的。倒排索引的优势在于查找包含某个项的文档，而反过来确定哪些项在单个文档里并不高效。 结构类似如下： Doc      Terms ----------------------------------
elasticsearch的Doc Values 和 Fielddata
thomas0yang的专栏
03-30 1万+
DocValues 什么是DocValues 简单说明DocValues就是一个种列式的数据存储结构（docid、termvalues）。 倒排索引的优势在于查找包含某个项的文档，即通过Term查找对应的docid。 term的倒排 Term Doc_1 Doc_2 Doc_3 brown X X dog X
lucene DocValues——没有看懂
djph26741的博客
04-05 371
前言： 在Lucene4.x之后，出现一个重大的特性，就是索引支持DocValues，这对于广大的solr和elasticsearch用户，无疑来说是一个福音，这玩意的出现通过牺牲一定的磁盘空间带来的好处主要有两个： （1）节省内存 （2）对排序，分组和一些聚合操作时能够大大提升性能 下面来详细介绍下DocValue的原理和使用场景 （一）什么是DocValues？ ...
ES dsl 分桶聚合后 在按照分桶后的doc_count排序
05-24
可以使用 Elasticsearch 中的 `bucket_sort` 聚合来实现按照分桶后的 doc_count 排序。具体步骤如下： 1. 使用分桶聚合，按照需要的字段进行分桶。 2. 在每个分桶中使用子聚合来统计 doc_count。 3. 在所有分桶之外，添加 `bucket_sort` 聚合，按照子聚合统计的 doc_count 进行排序，如下所示： ``` { "size": 0, "aggs": { "my_buckets": { "terms": { "field": "my_field" }, "aggs": { "doc_count": { "value_count": { "field": "my_field" } } } }, "sorted_buckets": { "bucket_sort": { "sort": [ { "doc_count": { "order": "desc" } } ], "size": 10 } } } } ``` 上述 DSL 将会返回 top10 的分桶，按照 doc_count 从大到小排序。其中 `my_field` 为需要分桶的字段。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值