Elasticsearch 脚本编写基础

最新推荐文章于 2024-03-29 10:25:47 发布
最新推荐文章于 2024-03-29 10:25:47 发布
阅读量524 收藏
点赞数
分类专栏： 人在江湖之Elasticsearch 文章标签： elasticsearch 脚本查询 painless脚本 存储脚本 脚本参数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/forlinkext/article/details/131432917
版权

文章目录

脚本语言

  • painless
    ES 的脚本语言可以通过 lang 来设置，如果不设置，默认为 Painless。Painless 专为 Elasticsearch 构建，可用于脚本 API 中的任何目的，并提供最大的灵活性。而且 Painless 是 ES 内置的，无需安装其他插件来支持，而且Painless 使用 Java 语法的子集， Painless 实现了任何具有基本编码经验的人都自然熟悉的语法。
  • expressions
    Lucene 的表达式语言将javascript表达式编译为字节码。

脚本使用格式

  "script": {
    "lang":   "...",
    "source" | "id": "...",
    "params": { ... }
  }
  • lang
    指定编写脚本所用的语言。默认为 painless。
  • source 或 id 脚本本身
    • source 内联脚本（就是脚本代码）
    • 存储脚本 id 。使用存储的脚本 API 创建和管理存储的脚本。(脚本代码存储在别处，此处用id引用)
  • params
    指定作为变量传递到脚本中的任何命名参数。使用参数而不是硬编码值来减少编译时间。

脚本中访问文档字段

在脚本中访问文档字段一般有如下两种方式：

  • doc 访问，列如：doc[‘age’].value
  • fieldAPI 访问
    • field(‘my_field’).get(<default_value>)：例如：field(‘age’).get(-1)
    • $(‘my_field’,‘default_value’)

script_fields 对查询字段进行计算

{  
  "_source":{
    "excludes":["remark"]
  },
  "query": {  
    "script": {  
      "script": {  
        "source": "doc['age'].value > 20 &&  $('sex',-1) == 0",  
        "lang": "painless"  
      }  
    }  
  },
    "script_fields": {  
        "tt":{
            "script": {  
                "source": "$('height',0) + 1"
            }  
        }
    }  
}

示例结果 tt 字段为我们使用脚本对 height 字段进行了 +1 操作后的结果。

结果

{
    "took": 12,
    "timed_out": false,
    "_shards": {
        "total": 1,
        "successful": 1,
        "skipped": 0,
        "failed": 0
    },
    "hits": {
        "total": {
            "value": 374,
            "relation": "eq"
        },
        "max_score": 1.0,
        "hits": [
            {
                "_index": "person",
                "_id": "265",
                "_score": 1.0,
                "_source": {
                    "id": 266,
                    "name": "文敏",
                    "age": 31,
                    "height": 1.75,
                    "birthday": "1987-05-07 11:47:16",
                    "sex": 0
                },
                "fields": {
                    "tt": [
                        2.75
                    ]
                }
            },
            {
                "_index": "person",
                "_id": "267",
                "_score": 1.0,
                "_source": {
                    "id": 268,
                    "name": "董超",
                    "age": 42,
                    "height": 1.67,
                    "birthday": "1974-09-04 12:27:55",
                    "sex": 0
                },
                "fields": {
                    "tt": [
                        2.67
                    ]
                }
            },
            {
                "_index": "person",
                "_id": "269",
                "_score": 1.0,
                "_source": {
                    "id": 270,
                    "name": "江娟",
                    "age": 46,
                    "height": 1.04,
                    "birthday": "1975-12-05 02:03:17",
                    "sex": 0
                },
                "fields": {
                    "tt": [
                        2.04
                    ]
                }
            },
            {
                "_index": "person",
                "_id": "277",
                "_score": 1.0,
                "_source": {
                    "id": 278,
                    "name": "卢杰",
                    "age": 28,
                    "height": 1.73,
                    "birthday": "2012-01-31 01:28:44",
                    "sex": 0
                },
                "fields": {
                    "tt": [
                        2.73
                    ]
                }
            },
            {
                "_index": "person",
                "_id": "279",
                "_score": 1.0,
                "_source": {
                    "id": 280,
                    "name": "黎霞",
                    "age": 24,
                    "height": 1.61,
                    "birthday": "2003-09-08 10:44:28",
                    "sex": 0
                },
                "fields": {
                    "tt": [
                        2.6100001
                    ]
                }
            },
            {
                "_index": "person",
                "_id": "281",
                "_score": 1.0,
                "_source": {
                    "id": 282,
                    "name": "武芳",
                    "age": 42,
                    "height": 1.34,
                    "birthday": "1994-11-11 13:48:35",
                    "sex": 0
                },
                "fields": {
                    "tt": [
                        2.3400002
                    ]
                }
            },
            {
                "_index": "person",
                "_id": "283",
                "_score": 1.0,
                "_source": {
                    "id": 284,
                    "name": "白杰",
                    "age": 28,
                    "height": 1.47,
                    "birthday": "2020-07-04 15:59:12",
                    "sex": 0
                },
                "fields": {
                    "tt": [
                        2.47
                    ]
                }
            },
            {
                "_index": "person",
                "_id": "285",
                "_score": 1.0,
                "_source": {
                    "id": 286,
                    "name": "高秀英",
                    "age": 31,
                    "height": 1.61,
                    "birthday": "1989-12-23 18:01:15",
                    "sex": 0
                },
                "fields": {
                    "tt": [
                        2.6100001
                    ]
                }
            },
            {
                "_index": "person",
                "_id": "289",
                "_score": 1.0,
                "_source": {
                    "id": 290,
                    "name": "江丽",
                    "age": 21,
                    "height": 1.55,
                    "birthday": "1979-03-23 15:42:32",
                    "sex": 0
                },
                "fields": {
                    "tt": [
                        2.55
                    ]
                }
            },
            {
                "_index": "person",
                "_id": "291",
                "_score": 1.0,
                "_source": {
                    "id": 292,
                    "name": "杜霞",
                    "age": 40,
                    "height": 1.26,
                    "birthday": "1995-02-19 04:09:23",
                    "sex": 0
                },
                "fields": {
                    "tt": [
                        2.26
                    ]
                }
            }
        ]
    }
}

脚本中使用参数

ES 在第一次执行脚本时，会编译脚本并将编译后的版本存储在缓存。是否将可变内容参数化，这个和sql 中 Statement 和 PrepareStatement 的差别是一样的。

{  
  "_source":{
    "excludes":["remark"]
  },
  "query": {  
    "script": {  
      "script": {  
        "source": "$('age',0) > params.age",  
        "params":{
            "age" : 30
        }
      }  
    }  
  }  
}

存储脚本

创建或更新存储脚本

PUT _scripts/<script-id>

POST _scripts/<script-id>

路径参数

<script-id>
（必需，字符串）存储的脚本或搜索模板的标识符。在集群内必须是唯一的。

正文参数

  • lang
    （必需，字符串） 脚本语言。
  • source
    （必需，字符串或对象）对于脚本，包含脚本的字符串。
  • params
    （可选，对象）脚本的参数。
PUT /_scripts/test1
{
  "script": {
    "lang": "painless",
    "source": "$('age',0) > params['age']"
  }
}

参数 age 我们在此没有直接定义，在脚本执行时直接配置即可

在查询中使用

{  
  "_source":{
    "excludes":["remark"]
  },
  "query": {  
    "script": {  
      "script": {  
        "id": "test1",  
        "params":{
            "age" : 40
        }
      }  
    }  
  }  
}

删除存储脚本

DELETE /_scripts/test1
没事儿写两篇
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【Elasticsearch】如何在 Elasticsearch 中轻松编写脚本
九师兄
05-31 224
如何在 Elasticsearch 中轻松编写脚本 随着 Elasticsearch 5.x 的发布，Painless 出现了，这是 Elasticsearch 对安全、可靠和高性能脚本编写的回答。我们将向您介绍 Painless 并向您展示它的功能。 随着一年多前 Elasticsearch 5.x 的推出，我们获得了一种新的脚本语言 Painless。Painless 是一种由 Elastic 开发和维护并针对 Elasticsearch 进行优化的脚本语言。虽然它仍然是一种实验性脚本语言...
【Elasticsearch】es脚本编程使用详解
congge
10-25 4920
es脚本编程使用详解
Elasticsearch初识之脚本查询附加示例代码（script）
hcj_ER的博客
01-05 642
Scripting是Elasticsearch支持的一种专门用于复杂场景下支持自定义编程的强大的脚本功能，ES支持多种脚本语言，如painless，其语法类似于Java,也有注释、关键字、类型、变量、函数等，其就要相对于其他脚本高出几倍的性能，并且安全可靠，可以用于内联和存储脚本
ElasticSearch 实战：ES的脚本使用实践
最新发布
qq_33240556的博客
03-29 293
在Elasticsearch中，脚本功能允许用户在查询、聚合、更新文档时执行自定义的脚本逻辑。脚本可以用多种语言编写，包括Painless（默认脚本语言）、Groovy（在Elasticsearch 7.x之后已弃用）、JavaScript、Python等。
elasticsearch ES中使用脚本(script)
m0_67401920的博客
03-25 2275
摘要1：ElasticSearch 比较两个时间的大小_gaojie_csdn的博客-CSDN博客_es 时间比较 摘要2：zlasticsearch脚本教程——计算日期生成分组_neweastsun的专栏-CSDN博客 摘要3：elasticsearch painless脚本_疯狮子的博客-CSDN博客_painless脚本 摘要4：es score限制 - zhangdapao - 博客园 摘要5：function_score 之script_score【图文】_大海之中_51CTO博客 摘要6：Ela
python编写es脚本_es数据迁移脚本(python)
weixin_39760389的博客
11-24 155
#!/usr/bin/python#-*- coding: UTF-8 -*-#文件名：indiceCreate.pyimportsysimportbase64importtimeimporthttplibimportjson## 老集群host（ip+port）oldClusterHost = "192.168.1.85:9200"## 老集群用户名，可为空oldClusterUserName ...
Elasticsearch 脚本功能
Ingenuity1992的博客
02-20 1519
1、脚本功能的基本介绍 1.1 使用场景 当需要生成自定义字段或者需要自定义评分时，可以考虑使用脚本。 1.2 基本使用模式 "script": { "lang": "...", //语言 "source" | "id": "...", //脚本代码或者脚本ID "params": { ... } //参数 } 1.3 默认脚本语言的变化 从5.0版本开始，默认脚本语言从groovy改为painless，一个主要的差别是对脚本参数的使用，groovy中
Elasticsearch：如何在 Elasticsearch 中轻松编写 Painless 脚本
Elastic 中国社区官方博客
01-28 3736
你可以在我之前的文章 “Elastic：开发者上手指南” 的 “Painless 编程” 章节里找到许多介绍 Elasticsearch Painless 脚本编程的教程。在那些文章中，我大量地介绍了许多的使用案例。在今天的文章中，我更着重于介绍 Painless 这个脚本语言的语法。这个是在之前的文章中缺少的一部分。 随着 Elasticsearch 5.x 及以后版本的推出，我们获得了一种新的脚本语言 Painless。 Painless 是一种由 Elastic 开发和维护并针对 Elasticse
es脚本(script)的简单使用
weixin_50418464的博客
09-04 4286
elasticsearch7.x中painless脚本的简单使用
Elastic Search高级操作(脚本操作&&JAVA操作)
weixin_43949154的博客
04-03 3002
Elastic Search高级操作 小编在这里先介绍一下，Elastic Search高级操作分为：批量操作、导入数据、ES的各种那个查询、索引别名和重建索引，下面的各种操作小编都会介绍两种操作方式，里面有的可能会介绍不对，请各位及时在评论区提出意见，这也是小编的学习笔记，拿出来与各位分享，话不多说，开始正式的内容 批量操作 批量操作-脚本 Json必须一行，换行不支持操作。 操作，每个成功与否不会干预其他，都会执行。看status码 批量操作-JAVA 导入数据 首先先看下goods
（十）ES 入门教程
taoge512的博客
05-11 6820
本文为学习笔记，主要用于记录本人学习过程。部分内容为转载！！！！. 1、 ElasticSearch介绍 1.1 介绍 官方网址：https://www.elastic.co/cn/products/elasticsearch Github：https://github.com/elastic/elasticsearch 总结： 1、elasticsearch是一个基于Lucene的高扩展的分布式搜索服务器，支持开箱即用。 2、elasticsearch隐藏了Lucene的复杂性，对外提供Rest
Elasticsearch 开机自启脚本
10-14
Elasticsearch 开机自启脚本，方便用户自动启动Elasticsearch，也可以直接用systemctl启动或是关闭
Elasticsearch Painless Script入门教程--示例数据-sat.json
03-23
Elasticsearch Painless Script入门教程--示例数据。 自Elasticsearch 5.x 引入Painless，使得Elasticsearch拥有了安全、可靠、高性能脚本的解决方案。...可能你还不熟悉Elasticsearch脚本，让我们从基础开始。
es-clip-image-search:使用OpenAI的CLIP和Elasticsearch进行自然语言图像搜索的示例实现
04-12
使用OpenAI的和Elasticsearch进行自然语言图像搜索的示例实现。 受启发。 我的目标是测试在Elasticsearch上进行图像搜索的各种方法，并将图像搜索与其他搜索条件相结合。 去做 使用加快搜索速度 解释架构 即时添加...
基于python的elasticsearch和gurobi的外卖配送路径优化问题
05-19
通过编写Python脚本, 实现了利用elasticsearch读取大型数据, 然后通过gurobi对模型进行求解, 最后将最优路径通过Folium生成HTML文件展示. 该资源包括模型说明（英文，bd翻译即可）、完整的数据、源代码、运行结果...
脚本操作ElasticSearch
ClinEvol的博客
03-20 229
Restful就是一个资源定位及资源操作的风格。不是标准也不是协议，只是一种风格。基于这个风格设计的软件可以更简洁，更有层次，可以降低开发的复杂性，提高系统的可伸缩性。特点：1.基于http协议2.使用XML格式定义或JSON格式定义3.每一个URI代表1种资源。4.客户端使用GET、POST、PUT、DELETE 4个表示操作方式的动词对服务端资源进行操作：GET：用来获取资源POST：用来新建资源（也可以用于更新资源）PUT：用来更新资源DELETE：用来删除资源。
Elasticsearch 参考指南（如何使用脚本）
weixin_34236497的博客
10-31 351
如何使用脚本 无论Elasticsearch API支持何种脚本，语法都遵循相同的模式： "script": { "lang": "...", "source" | "id": "...", "params": { ... } } 脚本编写的语言，默认为painless。 脚本本身可以指定为内...
elasticsearch 6.1.1编写脚本插件以及使用方法
神鱼来啦的博客
08-07 967
在es6.1.1中编写自定义的script 先编写一个自定义类继承Plugin实现ScriptPlugin package org.elasticsearch.script; import java.util.Collection; import org.elasticsearch.common.settings.Settings; import org.elasticsearch.plugins.Plugin; import org.elasticsearch.plugins.ScriptPl.
关于es（elasticsearch）的启动脚本编写思路附带一个实例
zsk_john的技术分享专用博客
05-27 1433
关于elasticsearch的启动脚本编写思路（es的管理规范） elasticsearch是干什么的不用我多说了，一般安装是二进制安装方式，具体的安装不在本文讨论范围，主要是安装后的服务优化之一的开机启动脚本的编写思路。 首先，我们需要明白，es出于安全考虑会禁止使用root账号操作，当然指的主要是启动操作，一般默认，按照惯例是使用普通账号es，该账号需要自己手工新建。而我们平常的运维操作并不是在es账号下面进行，这就使得我们启停服...
编写python脚本实现es集群扩容
05-25
实现ES集群扩容的python脚本可以使用Elasticsearch官方Python客户端库进行编写。以下是一个简单的示例脚本： ```python from elasticsearch import Elasticsearch # 创建Elasticsearch客户端实例 es = Elasticsearch(["http://localhost:9200"]) # 获取当前集群节点数量 nodes_count = len(es.cat.nodes().splitlines()) # 扩容集群 es.cluster.put_settings(body={ "transient": { "cluster.routing.allocation.enable": "all" } }) # 等待新节点加入集群 while len(es.cat.nodes().splitlines()) <= nodes_count: pass # 缩回集群 es.cluster.put_settings(body={ "transient": { "cluster.routing.allocation.enable": "none" } }) ``` 上述代码的逻辑为： 1. 创建Elasticsearch客户端实例； 2. 获取当前集群节点数量； 3. 扩容集群，使所有节点都可以进行分片分配； 4. 循环等待新节点加入集群； 5. 缩回集群，禁止节点分片分配。 该脚本仅供参考，实际使用时需要根据自己的需求进行修改。例如，可以从命令行参数中获取ES节点地址、集群名称等信息，并添加异常处理等功能。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值