es painless 聚合查询 脚本查询 聚合结果求和

最新推荐文章于 2024-03-29 10:25:47 发布
最新推荐文章于 2024-03-29 10:25:47 发布
阅读量2.8k 收藏 1
点赞数
分类专栏： es
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_31720329/article/details/104432796
版权

我需要通过一次ES查询, 完成如下场景:

统计一个公司下各个部门的人数分布, 并需要统计各个部门的1月份在职人数, 入职, 离职人数, 以及公司总共的在职, 入职, 离职人数

具体条件如下(做了简化处理)

  • 查询出的人员需要为指定公司 id 的人员(条件中的 c_company_id 表示)
  • 部门统计需要统计值为空的人数(脚本的 "missing": "未填写" 表示)
  • 员工只存储了入/离日期字段
  • 月初在职人数(employed_origin 表示)
    • 对于 c_status 字段在 [1, 2] 区间内(非离职人员), 并且入职日期小于 2020-01-01, 该员工计入在职人数
    • 对于 c_status 为 3 的员工(离职人员), 如果他的离职日期大于 2020-01-01 并且入职日期小于 2020-02-01, 那么该员工计入在职员工
  • 入职人数(hire 表示)
    • 入职日期介于 2020-01-01 和 2020-02-01 之间的人数
  • 离职人数(leave 表示)
    • c_status 为 3 并且离职日期介于 2020-01-01 和 2020-02-01 之间的人数
  • 月末在职人数(这才是真正需要的在职人数的值)
    • 月初在职人数 + 入职人数 - 离职人数
  • 最后几个 sum_bucket
最低0.47元/天 解锁文章
zp0int
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
elasticsearch对painless脚本的常用操作api实例
02-25
项目中es版本从es2升级到es6之后，使用的groovy废弃，转换为painless脚本，转换过程中经过查询官网总结整理而成的笔记
es聚合后求count的总和
qq_35249342的博客
08-02 4532
使用sum_bucket聚合 { "size": 0, "query": { "match_all": {} }, "aggregations": { "questionRecommendAgg": { "nested": { "path": "messages" }, "aggregations": { "messagesAgg": { "terms": { "field": "messages.cards", "size
ElasticSearch 实战：ES的脚本使用实践
最新发布
qq_33240556的博客
03-29 347
在Elasticsearch中，脚本功能允许用户在查询、聚合、更新文档时执行自定义的脚本逻辑。脚本可以用多种语言编写，包括Painless（默认脚本语言）、Groovy（在Elasticsearch 7.x之后已弃用）、JavaScript、Python等。
es 报表聚合，分组，求和，排序，合计，分页等综合应用
BUG指挥课堂
04-12 5134
一，最终实现：查询条件及查询结果如下图所示 需要实现：分组，求和，聚合后排序，总计，分页 二， 需求分析：关于分组维度 es数据主键为：日期（年月日）+采购组织+采购组+门店 统计维度：可根据是否选择门店，按日或按月统计可分为四种情况 日+采购组织+采购组；采购组织+采购组；日+采购组织+采购组+门店；月+采购组织+采购组+门店； 按正常es多条件分组求和处理方式很麻烦，可参考网上写法。可以转变思路，把每个维度拼接成一个字段，即新增四个字段，多条件分组统计转化为单条件分组统计，实现起来会简.
es java 聚合方法——求和
柒然的博客
07-13 1万+
/** * 求和 求和字段字段类型为integer,double,long */ @Test public void sum(){ SearchResponse response = client.prepareSearch("twitter").setTypes("tweet") .addAggregation...
elasticsearch实现聚合后两个字段相除/相加/相减/相乘运算
热门推荐
zpzkitt的专栏
09-26 1万+
1、实际需求 在sum聚合运算时会有两个值sum之后相除的运算方式sum(A)/sum(B)，这就需要用到es的Bucket ScriptAggregation聚合方式。 "aggregations" : { "A" : { "sum" : { "field" : "A" } }, "B" : { "sum" : { ...
Elasticsearch高级聚合查询
vc33569的专栏
09-22 414
shard_min_doc_count参数用于调节如果索引词实际上应该被添加到候选列表或者不应该被添加到min_doc_count中的分片所具有的确定性。如果您的文档包含许多低频索引词，并且您对这些索引词不感兴趣（例如，拼写错误），那么您可以设置shard_min_doc_count参数以筛选分片级别上的候选索引词，即使经过合理的确定也不会达到所需的min_doc_count。//这里会生成 min_doc_count:1 shard_min_doc_count:0。
Elasticsearch Painless Script入门教程--示例数据-sat.json
03-23
自Elasticsearch 5.x 引入Painless，使得Elasticsearch拥有了安全、可靠、高性能脚本的解决方案。Painless是Elastic开发并做了专门的优化，相较之前的脚本更快、安全、易使用、可靠。 Painless脚本的目标是使编写...
groovy脚本转painless语法总结
02-25
项目从es2升级到es6，groovy脚本也要相应的转换为painless脚本，转换过程中遇到了很多坑，特此总结成文档，供大家一起交流学习。
ElasticSearch实战教程
07-22
"ElasticSearch实战教程" ElasticSearch是一款分布式、RESTful 风格的搜索和数据分析引擎，能够达到近实时搜索，稳定，可靠，快速，安装使用方便。客户端支持Java、.NET（C#）、PHP、Python、Ruby等多种语言。 ...
关于ES自定义script painless的问题
leonard_mo的博客
03-22 131
目前我的排序是用es的painless的自定义排序去做的，但是我在脚本return的时候加了一个double类型的数，接口性能从平均500ms，慢到了1s~2s，非常奇怪，想问问大佬们有没有什么解决方案。查了很多也没有发现是哪里的问题，球球各位大佬帮忙分析下。
Es7.x使用RestHighLevelClient进行聚合操作
猪之仆的博客
07-10 3072
参考：http://events.jianshu.io/p/cd27fe9cb642 https://www.cnblogs.com/heyouxin/p/13865293.html 聚合操作分为指标聚合和分组聚合。RestHighLevelClient可以使用API方法也可以使用script脚本进行聚合。 1.API聚合方法 @Slf4j public class EsAggsTest { public static void testAggs() thro...
Elasticsearch 的Painless
qq_37609701的博客
09-30 800
在 Elasticsearch 中，它使用了一个叫做 Painless 的语言。它是专门为 Elasticsearch 而建立的。Painless 是一种简单，安全的脚本语言，专为与 Elasticsearch 一起使用而设计。 它是 Elasticsearch 的默认脚本语言，可以安全地用于 inline 和 stored 脚本。它具有像 Groovy 那样的语法。 Painless 语法主要用于复杂的操作，简单es自己本身就有，比如下面的范围查询： { "query": { "...
ElasticSearch Painless 脚本 简单使用
周天祥的博客
08-06 1万+
ElasticSearch Painless 脚本 简单使用 数据准备 使用for循环---改变搜索评分 使用for循环---对数组求和 对拼接字段排序 使用脚本更新文档 使用脚本添加新字段 使用脚本对日期操作 正则表达式使用 1、数据准备 PUT hockey/_bulk?refresh {"index":{"_id":1}} {"first":"johnny","la...
ElasticSearch 聚合查询-脚本
酆都城博客
08-29 431
ElasticSearch 聚合查询-脚本 •指标聚合：相当于MySQL的聚合函数。max、min、avg、sum等 •桶聚合：相当于MySQL的 group by 操作。不要对text类型的数据进行分组，会失败。 就是将 查询结果进行分组显示在控制台，对查询结果进行，求和统计、最大值、最小值、平均值等函数方面的计算查询。 # 聚合查询 # 指标聚合 聚合函数 GET goods/_search { "query": { "match": { "title": "手机"
ES学习五 -- Painless语法
ywb201314的专栏
07-11 2021
通过painless获取文档数据 Document values can be accessed from a Map named doc. For example, the following script calculates a player’s total goals. This example uses a strongly typed int and a for loop. 通过total 打分 排序返回 The following example uses a Painle
ElasticSearch~聚合查询~(求和、最大值、最小值、平均值、去重、百分比、占比、中位数、topN、分组聚合)
feizuiku0116的博客
02-25 1万+
一、ES聚合分析查询的写法 "aggregations" : { "<aggregation_name>" : { <!--聚合的名字 --> "<aggregation_type>" : { <!--聚合的类型 --> <aggregation_body>
es painless 排序_通过painless脚本控制elasticsearch搜索结果的评分 互联网技术圈 互联网技术圈...
weixin_33072399的博客
02-01 462
为了控制搜索结果的相关度，elasticsearch 提供了多种方式，通过脚本实现自定义评分逻辑是终极方式。脚本返回一个评分值，该值再与原_score再进行加法等运算。脚本编写很简单，我们跟随一个例子(基于5.5版本)来看看如何通过脚本实现自定义排序。创建 user_info索引，只有一个 name 字段，并且不分词：PUT user_info{"mappings":{"user": {"prop...
Elasticsearch之聚合aggregations
Dreamer.
01-11 4999
聚合可以让我们极其方便的实现对数据的统计、分析。例如： 什么品牌的手机最受欢迎？ 这些手机的平均价格、最高价格、最低价格？ 这些手机每月的销售情况如何？ 实现这些统计功能的比数据库的sql要方便的多，而且查询速度非常快，可以实现实时搜索效果。 1 基本概念 Elasticsearch中的聚合，包含多种类型，最常用的两种，一个叫桶，一个叫度量： 桶（bucket） 桶的作用，是按照某种方式对...
painless脚本语言
07-28
Painless是一种基于Java语法的脚本语言，最初是为了Elasticsearch搜索引擎的脚本查询而开发的。它的设计目标是提供一种安全、简单易用的脚本语言，可以在大规模分布式系统中进行快速而准确的数据处理。Painless具有良好的可读性和可维护性，支持各种数据类型和运算符，可以与Java API无缝集成。由于其轻量级和高效性能，Painless逐渐成为了许多分布式系统中的首选脚本语言。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值