总结工作中常用ES脚本

已于 2024-01-24 21:30:16 修改
阅读量1.5k 收藏 1
点赞数
分类专栏： # shell # elasticSearch 文章标签： es
于 2021-03-30 21:49:43 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/csdncjh/article/details/115336512
版权

总结工作中常用ES脚本，方便日后查阅，此次脚本应用于es5

增删操作

建立索引

curl -XPUT 'http://192.168.6.122:9200/major_info'

完整创建

curl -X PUT --header 'Content-Type: application/json' --header 'Accept: application/json'  'http://127.0.0.1:9200/farer_index' -d@test.json  

test.json

{
    "settings":{
        "number_of_shards":5,
        "number_of_replicas":0
    },
    "mappings":{
        "article":{
            "dynamic":"strict",
            "_all":{
                "enabled":false
            },
            "properties":{
                "title":{
                    "type":"string",
                    "index":"analyzed",
                    "analyzer":"ik_max_word",
                    "search_analyzer":"ik_max_word"
                },
                "describe":{
                    "type":"string",
                    "index":"analyzed",
                    "analyzer":"ik_max_word",
                    "search_analyzer":"ik_max_word"
                },
                "content":{
                    "type":"string",
                    "index":"analyzed",
                    "analyzer":"ik_max_word",
                    "search_analyzer":"ik_max_word"
                },
                "author":{
                    "type":"string",
                    "index":"no"
                },
                "time":{
                    "type":"date",
                    "index":"not_analyzed",
                    "format":"yyyy-MM-dd HH:mm:ss"
                }
            }
        }
    }
}

 删除索引


curl -XDELETE 'http://192.168.6.122:9200/major_info_202006'

mapping操作

设置mapping

curl -XPUT '192.168.10.183:9200/test2/entities/_mapping' -d@test.json

mapping文件样例

{
      "entities" : {
        "dynamic" : "false",
        "properties" : {
          "concept_id" : {
            "type" : "long",
            "store" : true
          },
          "entity_id" : {
            "type" : "long",
            "store" : true
          },
          "entity_name" : {
            "type" : "text",
            "store" : true
          }
        }
      }
}

拉取mapping


curl -XGET '192.168.6.122:9200/weibo_info_202002/_mapping?pretty' > weibo_info_202002.json

整体状况

查看实体以及数据量


curl -XGET 'http://192.168.6.122:9200/_cat/indices?v'

查看所有节点

curl '10.128.55.188:9200/_cat/nodes?v'

健康状况检查

来源

elasticsearch 查看集群健康、节点状态_u011250186的博客-CSDN博客_es查看集群健康状态

 elasticsearch启动后查看是否启动成功：
curl -XGET"http://$(hostname):9200/_cluster/health?pretty=true"

2. 停止elasticsearch应用：
curl -XPOST "http:// $(hostname):9200/_shutdown"

3. 查看集群健康：
curl $(hostname):9200/_cluster/health?pretty

4. 检查集群状态：
curl $(hostname):9200/_cluster/stats?pretty

5. 节点状态：
curl $(hostname):9200/_nodes/process?pretty

curl $(hostname):9200/_nodes/node1/process?pretty

6. 当你不知道有那些属性可以查看时：
curl '$(hostname):9200/_cat/'，会返回可以查看的属性


查看指定索引库的健康状态
http://localhost:9200/_cluster/health/index_name?pretty
http://localhost:9200/_cluster/health/index_name,index_name2?pretty

模板相关操作

来源

es 使用curl创建索引模板_laimao8079的博客-CSDN博客_es创建索引模板

创建模板 

curl -X PUT --header 'Content-Type: application/json' --header 'Accept: application/json'  'http://127.0.0.1:9200/_template/people_trail' -d@tmp_people_trail.json 

 tmp_people_trail.json

{
    "template":"people_trail*",
    "settings":{
        "index":{
            "number_of_shards":"1",
            "number_of_replicas":"0",
            "analysis":{
                "analyzer":{
                    "pinyin":{
                        "tokenizer":"pinyin_tokenizer"
                    }
                },
                "tokenizer":{
                    "pinyin_tokenizer":{
                        "type":"pinyin",
                        "keep_joined_full_pinyin":true
                    }
                }
            }
        }
    },
    "mappings":{
        "_default_":{
            "_all":{
                "enabled":true,
                "analyzer":"standard"
            },
            "dynamic_templates":[
                {
                    "xms":{
                        "mapping":{
                            "fields":{
                                "py":{
                                    "analyzer":"pinyin",
                                    "type":"text"
                                }
                            },
                            "type":"keyword"
                        },
                        "match_mapping_type":"string",
                        "match":"XM"
                    }
                },
                {
                    "strings":{
                        "match_mapping_type":"string",
                        "mapping":{
                            "type":"keyword",
                            "fields":{
                                "full":{
                                    "type":"text",
                                    "analyzer":"standard"
                                }
                            }
                        }
                    }
                }
            ]
        }
    }
}

新版本

{
  "index_patterns": ["my_index*"],
  "aliases": {
    "my_alias": {}
  },
  "settings": {
    "number_of_shards": 1,
    "number_of_replicas": 1
  },
  "mappings": {
    "properties": {
      "field1": {
        "type": "text"
      },
      "field2": {
        "type": "keyword"
      }
    }
  }
}

旧版本

{
    "template":"log_info*",
    "mappings":{
        "article":{
            "dynamic":"strict",
            "_all":{
                "enabled":false
            },
            "properties":{
                "title":{
                    "type":"string",
                    "index":"analyzed",
                    "analyzer":"ik_max_word",
                    "search_analyzer":"ik_max_word"
                },
                "author":{
                    "type":"string",
                    "index":"no"
                },
                "itemId":{
                    "type":"long"
                },
                "site":{
                    "type":"keyword"
                },
                "time":{
                    "type":"date",
                    "index":"not_analyzed",
                    "format":"yyyy-MM-dd HH:mm:ss"
                },
                "laudio":{
                    "type":"nested",
                    "properties":{

                    }
                },
                "nfri":{
                    "type":"long"
                }
            }
        }
    }
}

查询所有模板

curl -XGET 127.0.0.1:9200/_cat/templates

查看某一个模板

curl -XGET http://127.0.0.1:9200/_template/article_type?pretty

删除一个索引模板

curl -XDELETE http://127.0.0.1:9200/_template/article_type

添加别名

curl -H "Content-Type: application/json" -XPOST 'http://192.168.6.122:9200/_aliases' -d '
    {
        "actions": [
            {"add": {"index": "major_info_202007_v2", "alias": "main_info"}}
        ]
    }'

查看索引别名


curl -XGET http://192.168.6.122:9200/major_info_202007/_aliases

查看别名下的索引


curl -XGET '192.168.6.122:9200/_alias/major_info'

删除别名

curl -XPOST 'http://192.168.6.122:9200/_aliases' -d '
{
    "actions" : [
        { "remove" : { "index" : "major_info_202007_v2","alias" : "major_info" } }
    ]
}'

查看所有别名

curl -XGET '192.168.6.122:9200/_alias'

查询操作

查询


curl -XGET http://192.168.6.122:9200/major_info_202007/major_info_202007/e7af0e55d1307e021f8eb7594bfd3737?pretty

搜索


curl -XGET 'http://192.168.6.122:9200/major_info/major_info/_search' -d '{"query":{"match":{"uuid":""}}}'

 reindex

curl -XPOST 'localhost:9200/_reindex?pretty' -H 'Content-Type: application/json' -d'
{
  "source": {
    "index": "twitter"
  },
  "dest": {
    "index": "new_twitter"
  }
}
'

按照pubtime倒叙排列

curl -XGET 'http://10.128.55.7:6200/news_ref/news_ref/_search' -d '{ "sort" : [{ "pubtime" : {"order" :"desc"}} ],"from":0,"size":10 }'

term搜索以后排序

curl -XGET 'http://192.168.10.183:9200/info_data/info_data/_search' -d '{"query" : {"term" : { "site_group" : "106" } }, "sort" : [{ "id" : {"order" :"asc"}} ],"from":0,"size":1 }'

根据site_group查询

curl -XGET 'http://192.168.10.183:9200/info_data/info_data/_search' -d '
{
    "query":{
        "term":{
            "site_group":"106"
        }
    },
    "sort":[
        {
            "id":{
                "order":"asc"
            }
        }
    ],
    "from":0,
    "size":1
}
'

根据复合条件查询

curl -XGET 'http://192.168.10.183:9200/info_data/info_data/_search' -d '
{
    "query":{
        "bool":{
            "must":[
                {
                    "term":{
                        "data_type":"1"
                    }
                },
                {
                    "term":{
                        "site_group":"106"
                    }
                }
            ]
        }
    },
    "sort":[
        {
            "id":{
                "order":"asc"
            }
        }
    ],
    "from":0,
    "size":1
}
'

查询删除 delete_by_query

这种删除最快，但是一定要慎重，先查询确认，再删除

curl -X POST "localhost:9200/twitter/_delete_by_query?scroll_size=5000" -H 'Content-Type: application/json' -d'
{
  "query": {
    "term": {
      "user": "kimchy"
    }
  }
}
'

range query 范围查询

curl -XGET 'x.x.55.188:9200/second_short_video_info_ref/second_short_video_info_ref/_search' -d'
{
  "query": {
    "range": {
      "pubtime": { 
        "gte": "2022-03-23 00:00:00", 
        "lte": "2022-03-23 23:59:00"                  
      }
    }
  },
  "size":0
}'

来源

es常用curl整理_谬也的博客-CSDN博客_es查询curl

csdncjh
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
elasticsearch对painless脚本的常用操作api实例
02-25
项目中es版本从es2升级到es6之后，使用的groovy废弃，转换为painless脚本，转换过程中经过查询官网总结整理而成的笔记
浅谈webpack构建工具配置和常用插件总结
10-15
- `package.json`：NPM包管理配置文件，用于管理项目依赖和运行脚本。 - `node_modules`：项目中的依赖包存放目录。 接下来是`webpack.config.js`配置文件的解析： - `mode`：指定当前环境，如`"development"`或`...
es脚本(script)的简单使用
weixin_50418464的博客
09-04 4339
elasticsearch7.x中painless脚本的简单使用
ElasticSearch 实战：ES的脚本使用实践
qq_33240556的博客
03-29 377
在Elasticsearch中，脚本功能允许用户在查询、聚合、更新文档时执行自定义的脚本逻辑。脚本可以用多种语言编写，包括Painless（默认脚本语言）、Groovy（在Elasticsearch 7.x之后已弃用）、JavaScript、Python等。
ECMAScript 详解
最新发布
数字人生
05-27 1169
ECMAScript 标准定义了 JavaScript 语言的核心功能和语法，而 JavaScript 则是 ECMAScript 标准的具体实现之一。虽然 ECMAScript 是一个标准规范，JavaScript 则是其最著名的实现，但请注意，JavaScript 实际上包含了更多由浏览器或其他宿主环境提供的额外功能，如DOM操作、BOM（浏览器对象模型）等，这些并不属于 ECMAScript 标准。TC39 是 Ecma 国际中的一个技术委员会，负责推动 ECMAScript 标准的发展。
elasticsearch ES中使用脚本(script)
m0_67401920的博客
03-25 2289
摘要1：ElasticSearch 比较两个时间的大小_gaojie_csdn的博客-CSDN博客_es 时间比较 摘要2：zlasticsearch脚本教程——计算日期生成分组_neweastsun的专栏-CSDN博客 摘要3：elasticsearch painless脚本_疯狮子的博客-CSDN博客_painless脚本 摘要4：es score限制 - zhangdapao - 博客园 摘要5：function_score 之script_score【图文】_大海之中_51CTO博客 摘要6：Ela
ElasticSearch的复杂查询与脚本
禅与计算机程序设计艺术
01-21 943
1.背景介绍 1. 背景介绍 ElasticSearch是一个分布式、实时的搜索引擎，它可以处理大量数据并提供快速、准确的搜索结果。在现代互联网应用中，ElasticSearch是一个非常重要的技术，它可以帮助我们解决大量数据的搜索和分析问题。 在ElasticSearch中，复杂查询和脚本是非常重要的一部分，它们可以帮助我们实现更高级的搜索功能，例如： 基于文本分析的搜索 基于时间范围...
es 脚本查询
qq_38146392的博客
11-17 1563
脚本查询 概念 Scripting是Elasticsearch支持的一种专门用于复杂场景下支持自定义编程的强大的脚本功能，ES支持多种脚本语言，如painless，其语法类似于Java,也有注释、关键字、类型、变量、函数等，其就要相对于其他脚本高出几倍的性能，并且安全可靠，可以用于内联和存储脚本。 支持的语言 groovy：ES 1.4.x-5.0的默认脚本语言 painless：JavaEE使用java语言开发，.Net使用C#/F#语言开发，Flutter使用Dart语言开发，同样，ES
elasticsearch安装和使用
11-06
3. 解压后，通过执行bin目录下的elasticsearch脚本启动服务。在Linux环境下，命令为`/opt/es/essoftware/elasticsearch-2.3.4/bin/elasticsearch`。 4. 服务启动成功后，可以在浏览器中输入`http://cm3:9200/`来验证...
elasticsearch-ik分词插件.rar
05-11
2. 安装：将压缩包解压后，通过ES的`bin/elasticsearch-plugin`脚本安装，命令格式通常为`bin/elasticsearch-plugin install file:///path/to/ik/plugin.zip`。 3. 配置：在ES的`config/elasticsearch.yml`配置文件...
javascript常用语句总结
05-16
本总结将深入探讨JavaScript中的常用语句，帮助你更好地理解和运用。 一、变量声明 在JavaScript中，我们可以使用`var`, `let`, 或 `const` 来声明变量。`var` 是传统的变量声明方式，但存在作用域问题；`let` 和 `...
elasticsearch脚本实现先聚合后过滤
03-02
elasticsearch脚本实现先聚合，然后使用聚合的值进行后过滤
JAVA体系总结内容.doc
12-21
集合框架（如ArrayList、LinkedList、HashMap等）和类库API（如Math、String等）是编程中常用的工具。 2. **Java界面编程**：JAVA提供了AWT和Swing两个图形用户界面（GUI）框架，事件机制用于处理用户交互。 3. **...
ES及其客户端工具安装包
09-21
IK分词器是Elasticsearch中最常用的中文分词插件，尤其适用于全文检索场景。`ik分词器安装.md`文档会指导你如何安装和配置IK分词器： 1. **下载**: 获取最新版本的IK分词器，通常是通过Maven仓库或GitHub。 2. **...
ELK完整教程，从资源申请、部署、运维、程序、脚本所有细节 还包括过程一些经验的总结，概念等 可满足一般公司生产和开发环境使用
02-27
技术组件包括：elasticsearch + logstash + kafka + filebeat + head + zookeeper + kibana ...7.elasticsearch常用查询语法 8.filebeat基座制作及微服务集成 9.elasticsearch集群 10.filebeat使用
JavaScript基础进阶之数组方法总结(推荐)
01-19
数组常用方法总结： 下面我只总结了es3中常用的数组方法，一共有11个。es5中新增的9个数组方法，后续再单独总结。 1个连接数组的方法：concat（） 2个数组转换为字符串的方法：join（）、toString（） 6个增删数组...
ElasticSearch（4）脚本操作ES
учёба
01-10 495
Restful风格 REST (Representational State Transfer)，表述性状态转移，是一组架构约束条件和原则。满足这些约束条件和原则的应用程序或设计就是RESTful。就是一种定义接口的规范。 简单来说：就是一种定义接口的规范 要求： 基于HTTP 可以使用XML定义或Json格式定义 每一个URI代表一种资源 客户端使用GET、POST、PUT、DELETE4个表示操作方式的动词对服务端资源进行操作: GET：用来获取资源 POST：用来新建资源(也可以用于更新资源)
Elasticsearch 自动重启脚本，同样适用于其他应用
weixin_33909059的博客
07-24 767
应产品要求，让写个es的自动重启的脚本，如果es挂了，要在分分钟之内重启，当时我的内心是崩溃的，像我这种Linux只会cd、 ls 的哪会写什么脚本啊，无奈，只能去谷歌了，边看边改，没想到还真给写出来了，貌似还不难，是不是有什么漏洞我就母鸡了。 es自动重启，首先要知道es是怎么启的，下载，配置，启动，这里就略过了。直接看脚本吧。 创建脚...
使用ES脚本更新文档
weixiaohuai的博客
06-07 1887
可以使用更新API使用指定的脚本更新文档。该脚本可以对文档进行更新、删除或跳过修改操作。更新API还支持传递部分文档，将其合并到现有文档中。(1)、首先，我们准备一个简单的文档： (2)、案例一：更新num的值，每次递增2 (3)、案例二：更新hobbys的值，添加新值 执行之后查询结果： 接着再次执行一次脚本，hobbys因为是一个列表，即使它已经存在了“basketball”，同样也会被重复添加。如下图： (4)、案例三：更新hobbys的值，删除某个已存在的值 执行完操作我们
elasticsearch 脚本中 in 判断字符串怎么使用
06-09
在 Elasticsearch 的脚本中，可以使用 `contains()` 方法来判断一个字符串是否包含另一个字符串。如果你想要判断一个字符串是否属于一个字符串列表，可以使用 Java 的 `Arrays.asList()` 方法将列表转换为 Java 的 List，然后使用 `contains()` 方法来判断该字符串是否存在于列表中。 举个例子，假设你有一个字符串字段 `name`，你想要在脚本中判断该字段的值是否属于一个字符串列表 `['John', 'Mary', 'Bob']`，你可以使用以下脚本： ``` def nameList = Arrays.asList('John', 'Mary', 'Bob'); if (nameList.contains(doc['name'].value)) { // 字段值属于列表中的一个 } ``` 在这个脚本中，`Arrays.asList()` 方法将字符串列表转换为 Java 的 List，并将其赋值给变量 `nameList`。然后，我们使用 `contains()` 方法来判断 `doc['name'].value` 字段的值是否存在于该列表中。如果存在，则执行下一步操作。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值