elasticesearch--script脚本

已于 2022-11-07 17:42:02 修改
阅读量467 收藏
点赞数
分类专栏： 笔记 文章标签： java 搜索引擎
于 2022-11-07 17:41:18 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/my_rough_life/article/details/127735648
版权

elasticesearch–script脚本
查询语句

GET /索引名称/_search
{
  "from": 0,
  "size": 150,
  "query": {
    "bool": {
      "must": [
        {
          "match": {
            "blacklist": {
              "query": 1,
              "operator": "OR",
              "prefix_length": 0,
              "max_expansions": 50,
              "fuzzy_transpositions": true,
              "lenient": false,
              "zero_terms_query": "NONE",
              "auto_generate_synonyms_phrase_query": true,
              "boost": 1
            }
          }
        },
        {
          "range": {
            "lastLoginTime": {
              "from": "2022-10-17 13:55:23",
              "to": null,
              "include_lower": true,
              "include_upper": true,
              "boost": 1
            }
          }
        },
        {
          "range": {
            "lastLoginTime": {
              "from": null,
              "to": "2022-10-20 13:55:23",
              "include_lower": true,
              "include_upper": true,
              "boost": 1
            }
          }
        },
        {
          "range": {
            "enrollBirthday": {
              "from": "1972-01-01T00:00:00.000Z",
              "to": null,
              "include_lower": true,
              "include_upper": true,
              "boost": 1
            }
          }
        },
        {
          "range": {
            "enrollBirthday": {
              "from": null,
              "to": "2006-01-01T00:00:00.000Z",
              "include_lower": true,
              "include_upper": true,
              "boost": 1
            }
          }
        },
        {
          "bool": {
            "should": [
              {
                "match_phrase": {
                  "expectedPosition": {
                    "query": "影视传媒",
                    "slop": 0,
                    "zero_terms_query": "NONE",
                    "boost": 1
                  }
                }
              }
            ],
            "adjust_pure_negative": true,
            "boost": 1
          }
        },
        {
          "bool": {
            "should": [
              {
                "geo_distance": {
                  "expectWorkPlace.geoPoint": [
                    106.258864,
                    38.472247
                  ],
                  "distance": 20000,
                  "distance_type": "arc",
                  "validation_method": "STRICT",
                  "ignore_unmapped": false,
                  "boost": 1
                }
              },
              {
                "match": {
                  "expectWorkPlace.address": {
                    "query": "宁夏回族自治区银川市",
                    "operator": "AND",
                    "prefix_length": 0,
                    "max_expansions": 50,
                    "fuzzy_transpositions": true,
                    "lenient": false,
                    "zero_terms_query": "NONE",
                    "auto_generate_synonyms_phrase_query": true,
                    "boost": 1
                  }
                }
              }
            ],
            "adjust_pure_negative": true,
            "minimum_should_match": "1",
            "boost": 1
          }
        }
      ],
      "must_not": [
        {
          "terms": {
            "taskRegistList.taskId": [
              "1cadfa76-475e-4f30-9aa4-e049551b58d6"
            ],
            "boost": 1
          }
        }
      ],
      "adjust_pure_negative": true,
      "boost": 1
    }
  },
  "sort": [
    {
      "_geo_distance": {
        "expectWorkPlace.geoPoint": [
          {
            "lat": 38.472247,
            "lon": 106.258864
          }
        ],
        "unit": "km",
        "distance_type": "arc",
        "order": "asc",
        "validation_method": "STRICT",
        "ignore_unmapped": false
      }
    },
    {
      "outTime": {
        "order": "desc"
      }
    },
    {
      "enrollCreateTime": {
        "order": "asc"
      }
    }
  ],
  "collapse": {
    "field": "enrollRegistId"
  }
}```


```javascript
GET /索引名称/_search
{
  "from": 0,
  "size": 150,
  "query": {
    "bool": {
      "must": [
        {
          "match": {
            "blacklist": {
              "query": 1,
              "operator": "OR",
              "prefix_length": 0,
              "max_expansions": 50,
              "fuzzy_transpositions": true,
              "lenient": false,
              "zero_terms_query": "NONE",
              "auto_generate_synonyms_phrase_query": true,
              "boost": 1
            }
          }
        },
        {
          "range": {
            "lastLoginTime": {
              "from": "2022-10-06 14:01:24",
              "to": null,
              "include_lower": true,
              "include_upper": true,
              "boost": 1
            }
          }
        },
        {
          "range": {
            "lastLoginTime": {
              "from": null,
              "to": "2022-10-20 14:01:24",
              "include_lower": true,
              "include_upper": true,
              "boost": 1
            }
          }
        },
        {
          "range": {
            "enrollBirthday": {
              "from": "1972-01-01T00:00:00.000Z",
              "to": null,
              "include_lower": true,
              "include_upper": true,
              "boost": 1
            }
          }
        },
        {
          "range": {
            "enrollBirthday": {
              "from": null,
              "to": "2006-01-01T00:00:00.000Z",
              "include_lower": true,
              "include_upper": true,
              "boost": 1
            }
          }
        },
        {
          "bool": {
            "should": [
              {
                "match_phrase": {
                  "expectedPosition": {
                    "query": "影视传媒",
                    "slop": 0,
                    "zero_terms_query": "NONE",
                    "boost": 1
                  }
                }
              }
            ],
            "adjust_pure_negative": true,
            "boost": 1
          }
        },
        {
          "bool": {
            "should": [
              {
                "geo_distance": {
                  "expectWorkPlace.geoPoint": [
                    106.258864,
                    38.472247
                  ],
                  "distance": 35000,
                  "distance_type": "arc",
                  "validation_method": "STRICT",
                  "ignore_unmapped": false,
                  "boost": 1
                }
              },
              {
                "match": {
                  "expectWorkPlace.address": {
                    "query": "宁夏回族自治区银川市",
                    "operator": "AND",
                    "prefix_length": 0,
                    "max_expansions": 50,
                    "fuzzy_transpositions": true,
                    "lenient": false,
                    "zero_terms_query": "NONE",
                    "auto_generate_synonyms_phrase_query": true,
                    "boost": 1
                  }
                }
              }
            ],
            "adjust_pure_negative": true,
            "minimum_should_match": "1",
            "boost": 1
          }
        }
      ],
      "must_not": [
        {
          "terms": {
            "taskRegistList.taskId": [
              "1cadfa76-475e-4f30-9aa4-e049551b58d6"
            ],
            "boost": 1
          }
        },
        {
          "geo_distance": {
            "expectWorkPlace.geoPoint": [
              106.258864,
              38.472247
            ],
            "distance": 20000,
            "distance_type": "arc",
            "validation_method": "STRICT",
            "ignore_unmapped": false,
            "boost": 1
          }
        },
        {
          "terms": {
            "enrollRegistId": [
              389155,
              389186
            ],
            "boost": 1
          }
        },
        {
          "match": {
            "expectWorkPlace.address": {
              "query": "宁夏回族自治区银川市",
              "operator": "AND",
              "prefix_length": 0,
              "max_expansions": 50,
              "fuzzy_transpositions": true,
              "lenient": false,
              "zero_terms_query": "NONE",
              "auto_generate_synonyms_phrase_query": true,
              "boost": 1
            }
          }
        }
      ],
      "adjust_pure_negative": true,
      "boost": 1
    }
  },
  "sort": [
    {
      "_geo_distance": {
        "expectWorkPlace.geoPoint": [
          {
            "lat": 38.472247,
            "lon": 106.258864
          }
        ],
        "unit": "km",
        "distance_type": "arc",
        "order": "asc",
        "validation_method": "STRICT",
        "ignore_unmapped": false
      }
    },
    {
      "outTime": {
        "order": "desc"
      }
    },
    {
      "enrollCreateTime": {
        "order": "asc"
      }
    }
  ],
  "collapse": {
    "field": "enrollRegistId"
  }
}

更新数据语句

POST /索引名称/_update_by_query?conflicts=proceed
{
  "script": {
    "source": "ctx._source['commuting']=0",
    "lang": "painless"
  }
}

创建索引语句

PUT 索引名称
{
  "mappings": {
    "properties" : {
        "ageGroup" : {
          "type" : "long"
        },
        "blacklist" : {
          "type" : "long"
        },
        "commuting" : {
          "type" : "short"
        },
        "enrollBirthday" : {
          "type" : "date"
        },
        "enrollCreateTime" : {
          "type" : "date"
        },
        "enrollHobby" : {
          "type" : "text",
          "analyzer" : "ik_smart"
        },
        "enrollId" : {
          "type" : "long"
        },
        "enrollName" : {
          "type" : "keyword",
          "ignore_above" : 256
        },
        "enrollNum" : {
          "type" : "long"
        },
        "enrollPhone" : {
          "type" : "keyword",
          "ignore_above" : 256
        },
        "enrollProfile" : {
          "type" : "text",
          "analyzer" : "ik_smart"
        },
        "enrollRegistId" : {
          "type" : "long"
        },
        "enrollSex" : {
          "type" : "keyword",
          "ignore_above" : 256
        },
        "enrollWorking" : {
          "type" : "text",
          "analyzer" : "ik_smart"
        },
        "enrollmentNum" : {
          "type" : "long"
        },
        "expectWorkPlace" : {
          "properties" : {
            "address" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              },
              "analyzer" : "ik_smart"
            },
            "geoPoint" : {
              "type" : "geo_point"
            },
            "id" : {
              "type" : "integer"
            }
          }
        },
        "expectedPosition" : {
          "type" : "text",
          "analyzer" : "ik_smart"
        },
        "expectedSalary" : {
          "type" : "byte"
        },
        "lastLoginTime" : {
          "type" : "date",
          "format" : "yyyy-MM-dd HH:mm:ss"
        },
        "needDorm" : {
          "type" : "byte"
        },
        "nightShift" : {
          "type" : "byte"
        },
        "outTime" : {
          "type" : "date",
          "format" : "yyyy-MM-dd HH:mm:ss"
        },
        "parentExpectedPosition" : {
          "type" : "text",
          "analyzer" : "ik_smart"
        },
        "phoneCity" : {
          "type" : "keyword",
          "ignore_above" : 256
        },
        "phoneProvince" : {
          "type" : "keyword",
          "ignore_above" : 256
        },
        "phoneStatus" : {
          "type" : "byte"
        },
        "recommendNum" : {
          "type" : "long"
        },
        "registSource" : {
          "type" : "byte"
        },
        "registUserImage" : {
          "type" : "keyword",
          "index" : false
        },
        "tagList" : {
          "properties" : {
            "createTime" : {
              "type" : "date"
            },
            "id" : {
              "type" : "long"
            },
            "name" : {
              "type" : "keyword",
              "ignore_above" : 256
            },
            "path" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            },
            "updateTime" : {
              "type" : "date"
            }
          }
        },
        "taskRegistList" : {
          "properties" : {
            "employCreateTime" : {
              "type" : "date",
              "format" : "yyyy-MM-dd HH:mm:ss"
            },
            "enrollChannel" : {
              "type" : "byte"
            },
            "enrollCreateTime" : {
              "type" : "date",
              "format" : "yyyy-MM-dd HH:mm:ss"
            },
            "enrollStatus" : {
              "type" : "byte"
            },
            "personalType" : {
              "type" : "byte"
            },
            "realNameStatus" : {
              "type" : "byte"
            },
            "registId" : {
              "type" : "long"
            },
            "source" : {
              "type" : "byte"
            },
            "status" : {
              "type" : "byte"
            },
            "taskId" : {
              "type" : "keyword",
              "ignore_above" : 256
            },
            "taskName" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              },
              "analyzer" : "ik_smart"
            }
          }
        }
      }
  }
}

索引的字段类型创建的时候有问题，es本身不能修改索引中的字段类型，删除索引后把数据都删除了，这个时候不想删除索引该怎么办？
首先要滚动创建索引，然后给新索引创建一个别名，同步原索引的数据完成后，再去把原索引删除就可以了

POST _reindex
{
  "source": {
    "index": "删除的索引名称"
  },
  "dest": {
    "index": "新索引名称"
  }
} 


POST _aliases
{
  "actions": [
    {
      "add": {
        "index": "新索引名称",
        "alias": "regist_enroll"
      }
    }
  ]
}

POST _aliases
{
  "actions": [
    {
      "remove": {
        "index": "删除的索引名称",
        "alias": "regist_enroll"
      }
    }
  ]
}
my_rough_life
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
elasticsearch常用命令脚本
11-26
后端工程师开发时经常需要操作es，要是每次都去找相关命令就太麻烦了。这里提供了常用的es操作脚本，比如删除单个索引、删除多个索引、创建索引、查看全部索引、查看粉刺等等，以及深分页查询脚本
google-apps-script:Google Apps脚本
05-12
CloudDatastore.gs CloudDatastore.gs是作为服务帐户运行的Google Cloud Datastore的客户端。 它是用Google Apps脚本编写的，到目前为止，它可以选择，插入，更新和删除实体。 设置 a）将脚本添加到 b）添加OAuth2 for Apps Script库： 1B7FSrk5Zi6L1rSxxTDgDEUsPzlukDsi4KGuTMorsTQHhGBzBkMun4iDF 。 c）将服务帐户配置文件上传到您的Google云端硬盘（要从下载，然后上传到 ） 。 服务帐户需要分配“ Cloud Datastore User”角色。 d）根据配置文件的文件名调整脚本。 参考 @see @请参阅 @see
高效Ambari部署Python3脚本资源 - umx-deploy-script
03-25
项目概述：本项目名为umx-deploy-script，旨在提供一种高效的Ambari部署方式，专门为Python 3环境设计。包含62个文件，主要采用Python语言编写，并辅以Shell脚本，以实现灵活的自动化部署流程。 文件组成： - Python脚本（.py）：共24个，构成部署流程的核心部分。 - 配置文件（.xml）：17个，用于定义Ambari服务的配置参数。 - 数据文件（.json）：5个，包含必要的配置及元数据信息。 - 模板文件（.j2）：3个，用于动态生成配置文件。 - 编译后的Python文件（.pyc）：3个，为脚本执行准备的部分。 - 许可文件（LICENSE）：1个，明确项目的许可协议。 - SQL脚本：1个，用于数据库相关操作。 - 秘钥文件：包括key_itserver25、key_itserver26、key_itserver27，用于服务间的安全认证。 简而言之，umx-deploy-script是一个基于Python 3开发的Ambari部署脚本集，旨在简化集群管理和配置过程，提高运维效率。
vue-plugin-load-script:一个Vue插件，用于注入远程脚本
04-30
Vue插件加载脚本 一个Vue 2插件，用于注入远程脚本。 请参阅vue3分支以获取Vue 3支持。 安装 # npm npm install --save vue-plugin-load-script # yarn yarn add vue-plugin-load-script 用 // In main.js import LoadScript from 'vue-plugin-load-script' ; Vue . use ( LoadScript ) ; // As a global method Vue . loadScript ( "https://maps.googleapis.com/maps/api/js?key=YOUR_API_KEY" ) . then ( ( ) => { // Script is loaded, do
pppd支持ip-up-script ip-down-script参数的patch 和ppp.sh脚本
06-09
pppd支持ip-up-script ip-down-script参数的patch 和ppp.sh脚本
elasticsearch: script查询的一些简单用法
qq_39198749的博客
05-23 2295
script字段值过滤 查询indexName索引中，name==‘测试’ && fieldName字段值的长度>2的文档 GET /indexName/_search { "query": { "bool": { "must": [ { "match_phrase": { "name": "测试" } }, { "script":
ES-脚本查询
蓝天⊙白云的博客
03-17 1350
首先，使用doc关键字，将导致该字段的条件被加载到内存（缓存），这将导致更快的执行，但更多的内存消耗。（2）painless：JavaEE使用java语言开发，.Net使用C#/F#语言开发，Flutter使用Dart语言开发，同样，ES 5.0+版本后的Scripting使用的语言默认就是painless，painless是一种专门用于Elasticsearch的简单,用于内联和存储脚本，是ES 5.0+的默认脚本语言，类似于Java,也有注释、关键字、类型、变量、函数等，是一种安全的脚本语言。
ElasticSearch的Script逻辑查询
qq_36245532的博客
07-06 4680
———————————————— 版权声明：本文为CSDN博主「CTO修炼手册」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。 原文链接：https://blog.csdn.net/Prepared/article/details/102893852 在使用 ES 进行统计的时候，经常会用到查询某个小时的统计数据，比如统计每个小时的数据；比如计算早晚高峰的数据。 这些场景都可以使用 script 进行查询、统计。 ES 语句 { "query": { "boo
ES中script脚本的使用
热门推荐
弹指天下
11-09 2万+
本文主要介绍了ES中script脚本的使用。 其主要作用是：提取字段属性，进行表达式计算。 最典型的使用场景是：定义运行时字段。
Elasticsearch脚本查询
小獣专栏
07-05 1095
Elasticsearch脚本查询。
C-Script脚本使用教程
03-31
本资源为C-Script脚本使用教程，内涵8个文档。详细介绍了C-Script脚本的使用。 （资源整理自网络）
post-install-script：一个简单的shell脚本，用于自动在Linux上进行后期安装
02-28
供个人使用的shell脚本，以我喜欢的方式设置linux。 将要安装的软件包添加到install-list.txt 将要删除的软件包添加到remove-list.txt 将要安装的flatpak-list.txt添加到flatpak-list.txt 快速开始 git clone ...
Elasticsearch学习--script
CelineT的博客
11-13 1921
doc['age'].value和doc['age']都能正确输出，doc['age'] * 0.9和doc['age'].value * 0.9也都不报错。，doc['age'].value和doc['age']都能正确输出，但是doc['age'] * 0.9报错。:会被加载到内存中，效率更高，更消耗内存，只允许简单类型，object和nested属于复杂类型。es源数据是map类型的，在取值的时候，要根据doc['x xx']取值。但是，painless，如果字段为空，*0.9会报错。
深入了解 Elasticsearch 8.1 中的 Script 使用
醉鱼的博客
10-28 1924
如果我们还想操作当前解析的数据我们可以使用运行时字段，因为运行时字段不需要进行索引会更加的灵活，可以很方便的修改脚本及运行方式。所谓的解析字符串，只是一组固定格式的字符串，提前使用变量的形式编译，在插入文档时，通过脚本进行解析保存，方便后面的检索等请求。后面有机会会出现一片使用Java编译脚本的使用，等后面时间吧，最近这段时间听尴尬的，也托更很久了，以后慢慢的都要补上。上面我们是在检索请求中使用的脚本字段来使用的脚本，下面我们先内置一个脚本，通过使用。中，可以用于查询、聚合、脚本字段、脚本排序等各种用例。
Elasticsearch初识之脚本查询附加示例代码（script）
hcj_ER的博客
01-05 712
Scripting是Elasticsearch支持的一种专门用于复杂场景下支持自定义编程的强大的脚本功能，ES支持多种脚本语言，如painless，其语法类似于Java,也有注释、关键字、类型、变量、函数等，其就要相对于其他脚本高出几倍的性能，并且安全可靠，可以用于内联和存储脚本
es 脚本及脚本查询
zsj777的专栏
08-04 1733
{ "query": { "bool": { "must": [ { "term": { "rtype.keyword": "820100" } }, { "script": { "script": { "lang": "painless", "source": "doc[.
elasticSearch中查询使用脚本(script),处理时区偏移量 日期区间 时间区间双重查询
weixin_43367053的博客
08-10 503
项目需求:使用es查询获取某个日期区间内每天早高峰的数据量，技术栈使用中的，其中时间参数在es存储的时候时区偏移了八个小时，另外说明：我使用的es版本为7.9的，不同版本在脚本中获取参数值有所不同，下面贴一下7.9版本的获取值的方式。
ElasticSearch之script语法使用
勤于笔记，成于点滴。
07-26 4501
script参数能够自由定义需要比较运算的字段
轻量级 ioc/aop 框架 loveqq 1.0 发布，完全替换掉若依底层 spring 及其 starter
最新发布
kfyty725的博客
06-18 214
【代码】轻量级 ioc/aop 框架 loveqq 1.0 发布，完全替换掉若依底层 spring 及其 starter。
-Wl,--version-script脚本文件格式
05-26
-Wl,--version-script选项是用于链接时告诉链接器使用特定版本脚本文件的选项。这个选项的参数是一个版本脚本文件的路径。 版本脚本文件是一个纯文本文件，其中包含了一系列命令，用于指定符号的可见性和版本信息。...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值