ES常用命令-------------随笔

最新推荐文章于 2021-09-30 11:43:32 发布
最新推荐文章于 2021-09-30 11:43:32 发布
阅读量909 收藏
点赞数
分类专栏： ES 文章标签： elasticsea 命令
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wangxilong1991/article/details/73733669
版权 
【shrink】
要求如下
1首先，它使用与源索引相同的定义创建一个新的目标索引，但是比原索引的主碎片少。
2然后将源索引中的硬链接段与目标索引关联起来。(如果文件系统不支持硬链接，那么所有的片段都被复制到新的索引中，这是一个更耗时的过程。)
3最后，它恢复了目标索引，就像它是一个刚刚重新打开的封闭索引。


***为了缩小索引，索引必须被标记为只读，索引中每个shard的(主或副本)副本必须迁移到相同的节点并具有健康绿色

强制将每个shard的副本迁移到具有名称收缩的节点。【"index.routing.allocation.require._name": "node-1"】
将索引设置成 只读模式【"index.blocks.write": true】

【不是只读模式，会报错index test2 must be read-only to shrink index. use \"index.blocks.write=true\""】


curl -XPUT '172.16.2.99:9200/my_source_index/_settings?pretty' -H 'Content-Type: application/json' -d'
{
  "settings": {
    "index.routing.allocation.require._name": "node-1", 
    "index.blocks.write": true 
  }
}
'
curl -XPOST '172.16.2.99:9200/test2/_shrink/test1?pretty' -H 'Content-Type: application/json' -d'
{
  "settings": {
    "index.number_of_replicas": 0,
    "index.number_of_shards": 1, 
    "index.codec": "best_compression" 
  },
  "aliases": {
    "my_search_indices": {}
  }
}
给索引起的别名
"aliases": {
    "my_search_indices": {}
  }
curl -XPOST '172.16.2.99:9200/test2/_settings?pretty' -H 'Content-Type: application/json' -d'
{
  "settings": {}，
  "aliases": {
    "my_search_indices": {}
  }
}'

【delete index】
curl -XDELETE '172.16.2.99:9200/test1?pretty'

【delete by query】
curl -XPOST '172.16.2.99:9200/bank/_delete_by_query?pretty' -H 'Content-Type: application/json' -d'
{
  "query": { 
    "match_all": {
    }
  }
}
'
curl -XPOST 'localhost:9200/twitter,blog/tweet,post/_delete_by_query?pretty' -H 'Content-Type: application/json' -d'
{
  "query": {
    "match_all": {}
  }
}
'
curl -XPOST 'localhost:9200/twitter,blog/tweet,post/_delete_by_query?pretty' -H 'Content-Type: application/json' -d'
{
  "query": {
    "match_all": {}
  }
}
'

curl -XPOST 'localhost:9200/twitter/_delete_by_query?scroll_size=5000&pretty' -H 'Content-Type: application/json' -d'
{
  "query": {
    "term": {
      "user": "kimchy"
    }
  }
}
'


【cat】

curl -XGET '172.16.2.99:9200/_cat/indices/twi*?v&s=index&pretty'

Which index has the largest number of documents?
curl -XGET 'localhost:9200/_cat/indices?v&s=docs.count:desc&pretty'





How much memory is used per index?
curl -XGET 'localhost:9200/_cat/indices?v&h=i,tm&s=tm:desc&pretty'

How many merge operations have the shards for the twitter completed?
curl -XGET 'localhost:9200/_cat/indices/twitter?pri&v&h=health,index,pri,rep,docs.count,mt&pretty'
【cat recovery】

curl -XGET '172.16.2.99:9200/_cat/recovery?v'
------------------------------------
[root@Vm99 bin]# curl -XGET '172.16.2.99:9200/_cat/recovery?v'
index               shard time  type           stage source_host source_node target_host target_node repository snapshot files files_recovered files_percent files_total bytes 

bytes_recovered bytes_percent bytes_total translog_ops translog_ops_recovered translog_ops_percent
test2               0     295ms existing_store done  n/a         n/a         172.16.2.99 node-1      n/a        n/a      0     0               100.0%        10          0     0  

             100.0%        73797       0            0                      100.0%
test2               1     394ms existing_store done  n/a         n/a         172.16.2.99 node-1      n/a        n/a      0     0               100.0%        10          0     0  

             100.0%        79051       0            0                      100.0%
test2               2     326ms existing_store done  n/a         n/a         172.16.2.99 node-1      n/a        n/a      0     0               100.0%        13          0     0  

             100.0%        81701       0            0                      100.0%
.kibana             0     268ms existing_store done  n/a         n/a         172.16.2.99 node-1      n/a        n/a      0     0               100.0%        7           0     0  

             100.0%        7817        0            0                      100.0%
filebeat-2017.06.22 0     176ms empty_store    done  n/a         n/a         172.16.2.99 node-1      n/a        n/a      0     0               0.0%          0           0     0  

             0.0%          0           0            0                      100.0%
filebeat-2017.06.22 1     217ms empty_store    done  n/a         n/a         172.16.2.99 node-1      n/a        n/a      0     0               0.0%          0           0     0  

             0.0%          0           0            0                      100.0%
filebeat-2017.06.22 2     209ms empty_store    done  n/a         n/a         172.16.2.99 node-1      n/a        n/a      0     0               0.0%          0           0     0  

             0.0%          0           0            0                      100.0%
filebeat-2017.06.22 3     149ms empty_store    done  n/a         n/a         172.16.2.99 node-1      n/a        n/a      0     0               0.0%          0           0     0  

             0.0%          0           0            0                      100.0%
filebeat-2017.06.22 4     141ms empty_store    done  n/a         n/a         172.16.2.99 node-1      n/a        n/a      0     0               0.0%          0           0     0  

             0.0%          0           0            0                      100.0%
test1               0     300ms local_shards   done  n/a         n/a         172.16.2.99 node-1      n/a        n/a      0     0               100.0%        33          0     0  

             100.0%        235792      -1           0   
------------------------------------

curl -XGET '172.16.2.99:9200/_cat/recovery?v&h=i,s,t,ty,st,shost,thost,f,fp,b,bp'
------------------------------------
[root@Vm99 bin]# curl -XGET '172.16.2.99:9200/_cat/recovery?v&h=i,s,t,ty,st,shost,thost,f,fp,b,bp'
i                   s t     ty             st   shost thost       f fp     b bp
test2               0 295ms existing_store done n/a   172.16.2.99 0 100.0% 0 100.0%
test2               1 394ms existing_store done n/a   172.16.2.99 0 100.0% 0 100.0%
test2               2 326ms existing_store done n/a   172.16.2.99 0 100.0% 0 100.0%
.kibana             0 268ms existing_store done n/a   172.16.2.99 0 100.0% 0 100.0%
filebeat-2017.06.22 0 176ms empty_store    done n/a   172.16.2.99 0 0.0%   0 0.0%
filebeat-2017.06.22 1 217ms empty_store    done n/a   172.16.2.99 0 0.0%   0 0.0%
filebeat-2017.06.22 2 209ms empty_store    done n/a   172.16.2.99 0 0.0%   0 0.0%
filebeat-2017.06.22 3 149ms empty_store    done n/a   172.16.2.99 0 0.0%   0 0.0%
filebeat-2017.06.22 4 141ms empty_store    done n/a   172.16.2.99 0 0.0%   0 0.0%
test1               0 300ms local_shards   done n/a   172.16.2.99 0 100.0% 0 100.0%
------------------------------------

【aliases】

curl -XPOST '172.16.2.99:9200/_aliases?pretty' -H 'Content-Type: application/json' -d'
{
    "actions" : [
        { "add" : { "index" : "test3", "alias" : "my_search_indices" } }
    ]
}
'
curl -XPOST '172.16.2.99:9200/_aliases?pretty' -H 'Content-Type: application/json' -d'
{
    "actions" : [
        { "remove" : { "index" : "test3", "alias" : "my_search_indices" } }
    ]
}
'

【reindex】
curl -XPOST '172.16.2.99:9200/_reindex?pretty' -H 'Content-Type: application/json' -d'
{
  "source": {
    "index": "test2"
  },
  "dest": {
    "index": "test3"
  }
}
'
----------------------------------
//另一个集群中copy
【【elasticsearch.yaml 中将远程集群添加到白名单】】
reindex.remote.whitelist: 172.16.2.97:9200 
curl -XPOST '172.16.2.99:9200/_reindex?pretty' -H 'Content-Type: application/json' -d'
{
  "source": {
    "remote": {
      "host": "http://172.16.2.97:9200"
    },                              
    "index": "bank"
  },
  "dest": {
    "index": "bank"
  }
}
'

curl -XPOST '172.16.2.99:9200/_reindex?pretty' -H 'Content-Type: application/json' -d'
{
  "source": {
    "remote": {
      "host": "http://172.16.2.97:9200"
    },                              
    "index": "bank",
    "size": 10
  },
  "dest": {
    "index": "bank"
  }
}
'
------------------------------
可以rename field
curl -XPOST 'localhost:9200/test/test/1?refresh&pretty' -H 'Content-Type: application/json' -d'
{
  "text": "words words",
  "flag": "foo"
}
'
curl -XPOST 'localhost:9200/_reindex?pretty' -H 'Content-Type: application/json' -d'
{
  "source": {
    "index": "test"
  },
  "dest": {
    "index": "test2"
  },
  "script": {
    "inline": "ctx._source.tag = ctx._source.remove(\"flag\")"
  }
}
'
curl -XGET 'localhost:9200/test2/test/1?pretty'

{
  "found": true,
  "_id": "1",
  "_index": "test2",
  "_type": "test",
  "_version": 1,
  "_source": {
    "text": "words words",
    "tag": "foo"
  }
}

【open/close index】
curl -XPOST '172.16.2.99:9200/my_index/_close?pretty'
curl -XPOST '172.16.2.99:9200/my_index/_open?pretty'

【update indice settings】
curl -XPUT '172.16.2.97:9200/bank/_settings' -d '
{
    "index" : {
        "number_of_replicas" : 0
    }
}'

【task】
curl -XGET 'localhost:9200/_tasks?detailed=true&actions=*reindex&pretty'

【load data】
curl -XPOST '172.16.2.97:9200/bank/account/_bulk?pretty&refresh' --data-binary "@accounts.json"
curl 'localhost:9200/_cat/indices?v'

【mapping】
curl -XPUT '172.16.2.99:9200/my_index?pretty' -H 'Content-Type: application/json' -d'
{
  "mappings": {
    "user": { 
      "_all":       { "enabled": false  }, 
      "properties": { 
        "title":    { "type": "text"  }, 
        "name":     { "type": "text"  }, 
        "age":      { "type": "integer" }  
      }
    },
    "blogpost": { 
      "_all":       { "enabled": false  }, 
      "properties": { 
        "title":    { "type": "text"  }, 
        "body":     { "type": "text"  }, 
        "user_id":  {
          "type":   "keyword" 
        },
        "created":  {
          "type":   "date", 
          "format": "strict_date_optional_time||epoch_millis"
        }
      }
    }
  }
}
'
AngelaPotato
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ElasticSearch 源码分析 十一 索引恢复流程
郭传志的博客
02-09 490
使用Translog 来恢复 fileSystem cache丢失的数据 索引的恢复分为以下几种： 1. EXISTING_STORE ： 主分片从本地恢复 1.1 启动一个新的线程池，执行主分片的恢复。调用recoverFromStore 1.2 先判断canRecover： 索引的分片不能是closed，当前不能是主分片，必须是副分片 1.3 ...
ES常用操作命令
最新发布
子笙的博客
04-29 325
es版本为6.7.2，kibana版本6.7.2。
ES常用命令
bo_wei的博客
09-30 9798
#查看磁盘空间 _cat/allocation?v #查看索引分片分布及分片占用存储空间大小与文档数（会扫描所有分片，慎用!!!） _cat/shards?v #查看指定索引分片分布及分片占用存储空间大小与文档数 _cat/shards/{index}?v #查看主节点是哪台机器 _cat/master?v #查看主节点CPU，内存情况 _cat/nodes?v #查看集群任务 _cat/tasks?v #查看集群所有索引列表，并展示每个索引的状态、分片数量、文档数量、索引占用存储空间大小 _cat/in.
ES基础命令(参照mysql)
wwwwwww31311的博客
08-31 1863
一 基础ES命令 1、http://localhost:9200 先当于查看mysql数据库本地连接信息 2、向ES 服务器发 PUT 请求 http://127.0.0.1:9200/shopping；幂等性意味着不会重复发送,我们可以把一个索引shopping抽象成一个数据库中唯一的一张表IndexTable；这里相当于做创建数据库的操作 3、向 ES 服务器发 GET 请求 ： http://127.0.0.1:9200/_cat/indices?v 查看索引下所有请求，相当于mysql下查看一个
es常用命令
阿呆的专栏
01-31 2312
where (and in) (and not in) select * from order-202001 where contract_type = 1 and order_type in (0,1,2,3,4,5,8,9,10) and platform_shopid not in (72,166) GET order-202101/_search { "query": { "bool": { "must": [ { "term": {
es重命名索引
sxf_123456的博客
08-28 9012
from elasticsearch import Elasticsearch from elasticsearch import helpers es = Elasticsearch(hosts="0.0.0.0:9200") source_index = "ana-test_20180805_1" target_index = "ana-test-test_20180805_1" bod...
elasticsearch-analysis-dynamic-synonym-7.6.2
08-17
`elasticsearch-analysis-dynamic-synonym-7.6.2`是一个专为ES7.6.2版本设计的动态同义词插件，旨在实现同义词的动态加载和管理，使得同义词库可以随着业务需求的变化而实时更新。 **一、动态同义词插件的作用** 1...
elasticsearch插件delete-by-query
12-04
bin/elasticsearch-plugin install file:///path/to/delete-by-query-2.4.4.jar ``` 其中，`/path/to/delete-by-query-2.4.4.jar`替换为实际文件路径。 4. 重启Elasticsearch服务以使插件生效。 ### 2. 使用...
elasticsearch-8.11.0-windows-x86-64
11-27
Elasticsearch是一个分布式RESTful搜索引擎，针对生产规模工作负载的速度和相关性进行了优化。您可以使用Elasticsearch对包括以下应用程序的海量数据集执行实时搜索：矢量搜索、全文搜索、日志、度量、应用程序性能...
elasticsearch-analysis-pinyin-7.12.1.zip
11-05
为了更好地支持中文处理，Elasticsearch提供了丰富的插件，其中"elasticsearch-analysis-pinyin-7.12.1"是一款专门用于中文分词的拼音分析器插件，适用于7.12.1版本的Elasticsearch。本文将深入探讨这款插件的功能、...
elasticsearch-analysis-ik-7.9.0.zip
09-08
Elasticsearch是一个高度可扩展的开源全文本搜索和分析引擎。它使您可以快速，近乎实时地存储，搜索和分析大量数据。它通常用作支持具有复杂搜索功能和要求的应用程序的基础引擎...elasticsearch-analysis-ik-7.9.0.zip
elasticsearch常用命令学习记录.log
12-28
基础crud，分组，排序，聚合分析,基础crud，分组，排序，聚合分析,基础crud，分组，排序，聚合分析,基础crud，分组，排序，聚合分析,基础crud，分组，排序，聚合分析,基础crud，分组，排序，聚合分析,基础crud，分组，排序，聚合分析,
esformatter-rename:用于重命名变量、参数和标签的 Esformatter 插件
07-13
esformatter-重命名 用于重命名变量、参数和标签的插件 这是为了使理解反混淆脚本更容易（例如，将a重命名为jQuery ）。 它基于其姊妹项目 ，它将变量重命名为可发音的等价物（也适用于反混淆脚本）。 特征： 支持 ES6 箭头函数（例如(a) => a + 1 ） 支持let (例如let a = 1; ) 支持解构变量（例如var {a, b} = obj; ） 入门 安装模块： npm install esformatter-rename 然后，将其注册为插件并格式化您的 JS： // Load and register our plugin var esformatter = require ( 'esformatter' ) ; var esformatterRename = require ( 'esformatter-rename' ) ; esfo
elasticsearch索引数据的过程
ok0011的博客
08-29 5621
（一）索引相关主要配置参数： action.auto_create_index index.mapper.dynamic index.number_of_shards index.number_of_replicas index.store.throttle.type index.store.throttle.max_bytes_per_sec index.queries.cache...
Elasticsearch笔记——索引管理
一代键客的博客
11-01 383
一、创建索引 put http://localhost:9200/<index> ,<index>是索引名,传的JSON是这个索引的数据格式。 1、索引名不能包含任何大写字母； 2、如果索引已存在，则抛出索引已存在的异常； 3、elasticsearch 默认给一个索引设置5个分片1个分片，分派给定之后不再修改，副本可以随时修改； put http://loca...
《Elasticsearch 源码解析与优化实战》第10章：索引恢复流程分析
chbxw
09-28 819
简介 **索引恢复(index.recovery)是ES数据恢复过程。待恢复的数据是客户端写入成功，但未执行刷盘(flush)的Lucene分段。**例如，当节点异常重启时，写入磁盘的数据先到文件系统的缓冲，未必来得及刷盘，如果不通过某种方式将未刷盘的数据找回来，则会丢失一些数据，这是保持数据完整性的体现；另一方面，由于写入操作在多个分片副本上没有来得及全部执行，副分片需要同步成和主分片完全一致，这是数据副本一致性的体现。 根据数据分片性质，索引恢复过程可分为主分片恢复流程和副分片恢复流程。 主分片从tr
es 常用命令
keyuquan的博客
08-24 3654
1.简单的集群管理 GET /_cat/health?v GET /_cat/indices?v 2.CRUD操作 # 增 PUT /ecommerce/product/1 { "name" : "gaolujie yagao", "desc" : "gaoxiao meibai", "price" : 30, "producer" :
Elasticsearch常用命令整理
haojiliang
01-24 4170
在命令行查看Elasticsearch信息及数据，另有es head插件（可以自己安装，另外在谷歌浏览器扩展程序里也有），可以直接在网页中可视化操作Elasticsearch https://blog.iaiot.com/Elasticsearch-cmd.html 1.查看Elasticsearch集群状态 curl http://10.1.1.113:9200/_cluster/h...
Cocos2d-x游戏引擎深度解析
同时，它结合OpenGL ES 2.0的渲染管线，深入讨论了游戏开发中的图形学知识，包括纹理处理、计算机字体绘制、多分辨率支持、事件分发、碰撞检测与物理引擎、游戏对象模型架构、Genius-x开源框架的应用，以及脚本在...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值