Elasticsearch指定时间之前的索引删除

最新推荐文章于 2024-09-27 13:55:26 发布
最新推荐文章于 2024-09-27 13:55:26 发布
阅读量7.3k 收藏 2
点赞数
分类专栏： Elasticsearch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/winy_lm/article/details/79803990
版权

http://192.168.1.50:9200/test_dev_log/messages/_query/

DELETE方法

{
  "query": {
        "range" : {
            "jm_timestamp" : { "from" : "2017-07-20T00:00:00.539Z", "to" : "2017-07-20T23:59:59.539Z"}
        }
  }

}

java定时任务删除ElasticSearch没有用的索引
renkai721的专栏
12-23 2073
sprinboot2+elasticSearch7.0.6+kibana7.7删除es集群无用的索引
ElasticSearch删除索引【真实案例】
甘蓝的专栏
05-17 2517
删除ElasticSearch索引的真实案例，以及介绍当时遇到的删除超时问题的解决方案。
定时删除elasticsearch索引
weixin_45203131的博客
09-07 477
定时删除日志索引脚本 #！/bin/bash ###################################################### # $Name: bbs.centoscn.vip # $Version: v1.0 # $Function: clean amazon log index # $Author: djx # $Create Date: 2019-01-08 # $Description: shell #################################
定时删除elasticsearch指定时间之前的数据（delete同步问题）
qq_43130832的博客
04-02 7102
1、批量删除elasticsearch6.6.2 小于指定时间的数据 [root@zabbix:/root/elastic]$ cat del_hz.sh curl -u elastic:***** -XPOST "http://111.111.111.111:9201/Indexname/_delete_by_query" -H 'Content-Type: application/json'...
从 ElasticSearch 中删除数据的几种方式
最新发布
2301_76419561的博客
09-27 1988
在Elasticsearch中删除数据是一个常见的操作，它可以通过多种方式实现，以满足不同的应用场景和需求。
ES按照时间删除索引上的数据
wjy1208的专栏
04-23 2548
被删除的文档在segment合并时，才会被真正删除掉。在某些特定情况下，我们需要强制Elasticsearch进行segment merging，已释放其占用的大量系统、磁盘等资源。执行的期间你会发现，磁盘空间会有一个反复变化的过程，磁盘使用率会先增长，然后在删除释放空间这样一个过程。集群的索引没有预先规划大小，导致索引特别大，删除数据删除索引的形式进行，只能在原来的索引上进行数据删除操作。删除索引时采用最经典的方式，即按照时间戳进行删除，比如删除90天以前的历史数据，保留最新的。
elasticsearch删除 x天前的日志
Ban_liu_er的博客
10-24 453
#!/bin/bash ############################################## #Author: Liuzhengwei - 1135960569@qq.com #QQ:1135960569 #Last modified: 2018-10-15 16:29 #Filename:es-index-delete-30days-ago #Description: 通...
脚本文件实现elasticsearch集群定时删除7天前索引数据
fengzhimohan的博客
11-06 3633
elasticsearch定时删除7天前索引数据的步骤： 1.新建sh脚本文件 项目中elasticsearch集群有两台服务器，分别为126和127,选择127服务器新建sh脚本文件。 es_index_delete.sh脚本文件内容如下： #!/bin/bash #es_index_delete.sh LAST_DATA=`date -d "-7 days" "+%Y-%m-%d"` cur...
elasticsearch定时删除索引数据
Merandღ的博客
03-25 7593
有的时候我们在使用ES时，由于资源有限或业务需求，我们只想保存最近一段时间的数据，所以有如下脚本可以定时删除数据 编写脚本 vim del_es_by_day.sh #!/bin/bash #定时删除elasticsearch索引 #author menard 2019-3-25 date=`date -d "-7 days" "+%Y.%m.%d"` /usr/bin/curl -v --...
对elasticsearch过期索引的定时删除
weixin_38920212的博客
08-02 3194
本脚对我方es中10个按日增长的索引进行定期删除，多数索引只保留7天，部分索引保留30天 每个close_delete方法中只需要替换for i in echo $apm_error672_datetime和apm_overDateIndex="apm-6.7.2-error-$indexOriDate"两处即可直接使用 #/bin/bash #author wxd #apm-6.7.2-er...
es 创建索引 指定id_Elasticsearch创建索引流程
weixin_34677884的博客
12-30 1714
前言说明：本文章使用的ES版本是：6.7.0由此可知，在ES启动过程中，创建Node对象(new Node(environment))时，初始化了RestHandler，由其名字可以知道这是用来处理Rest请求的。在ES源码中，RestHandlerAction如下图：其中：admincluster：处理集群相关请求indices：处理索引相关请求cat：日常查询document：文档处理inge...
Linux定时删除es索引,elasticsearch自动按天创建索引脚本
weixin_31423211的博客
05-14 1790
elasticsearch保存在一个索引中数据量太大无法查询，现在需要将索引按照天来建，查询的时候关联查询即可有时候es集群创建了很多索引，删不掉，如果是测试环境或者初始化es集群(清空所有数据)，可以直接关掉elastic进程，然后删除nodes下面的所有数据，再次启动集群即可，记录一下避免忘记导出mapping信息放到/root/index_mapping目录下1.导出的语句yum insta...
高效管理 Elasticsearch 中基于时间的索引
AzulSystems的博客
03-12 231
用 Elasticsearch 来索引诸如日志事件等基于时间的数据的人可能已经习惯了“每日一索引”模式：使用以天为粒度的索引名字来存放当天的日志数据，一天过去后再建一个新索引。新索引的属性可以由来提前控制。这种模式很容易理解并且易于实现，但是它粉饰了索引管理的一些复杂的地方：为了达到较高的写入速度，活跃索引分片需要分布在_尽可能多的_节点上。为了提高搜索速度和降低资源消耗，分片数量需要_尽可能地少_，但是也不能有过大的单个分片进而不便操作。
删除elasticsearch 30天前的所有索引
weixin_30527143的博客
07-17 1660
我的索引格式为 xxx-xxx-xxx-2019.06.27 xxx-xxxx-2019.06.27 脚本思路： 获取目前 es上所有索引，以日期进行拆分，然后用索引时间对比一个月前的日期,日期小于一个月的直接删除 #!/bin/bash # Remove the index of one month old in elasticserch CMD_ECHO='echo' S...
elasticsearch 删除N天前的索引脚本
种豆农夫的技术备忘录
05-05 1344
#!/bin/sh function delIndex() { index_name=$1 savedays=$2 while [ $savedays -le $3 ] do format_day='%Y.%m.%d' sevendayago=`date -d "-...
自动清理 ES 历史数据
weixin_44770684的博客
05-26 4738
另一个是关键的定时任务，用于删除ES历史数据。随着业务的增长和时间的变化，ES 数据库的存储空间越来越大，存储数据多数为系统监控日志，保存的数据不需要长期保留，多数情况只需要保留几个月ES数据即可，既可以减轻ES服务器的负载和资源使用率，还可以节约更多的存储空间。curl -X DELETE 删除ES索引是没有详细日志的，所以需要在删除前执行 curl -X GET 获取删除前索引信息，一旦出现异常就可以更好判断当次定时任务实际删除了那些内容，实际上是否成功按照保留天数执行了。3、查看创建好的定时任务。
elasticsearch索引按日期拆分和定期删除
ke7025的博客
09-03 5074
ES索引按日期拆分和定期删除，并且不影响原搜索逻辑
手动批量删除es索引，时间范围内
十个菜
04-14 776
由于使用时间戳方式不合适这次删除，只能从开发那儿生成的索引名字进行删除，还好生成的索引比较有规律，本次要删除的索引格式access_logger_+不同的日期。本脚本不之处，遇到不存在的索引会报错404后继续执行shell，没有跳过404的错误提示，只保留执行成功的信息。dev-jaeger-span-$del_date 索引名。本脚本直接在生产上使用了，还没有经过优化，但是可以使用。es版本 7.10.0。
删除60天之前的elasticsearch索引
duanbiren123的博客
04-17 1276
1、说明 索引一天生成一个，格式为： filebeat-xxxx-xx-xx 2、脚本如下 #!/bin/bash curl -XGET http://192.168.11.43:9200/_cat/indices?v | grep 'filebeat' | awk '{print $3}' | sort -n | awk '{if(NR<60)print}' ...
elasticsearch 定期删除索引
Man_In_The_Night的博客
06-17 493
实验环境： cenotos7 使用 docker 部署了 efk，需要定期删除索引，减少磁盘消耗。elasticksearch 地址 10.2.20.100:9200 [root@ansible002 ~]# cat index_delete.sh LAST_DATA=`date -d "-15 days" +%Y.%m.%d` curl -XDELETE ' http://10.2.20.100:9200/* -'${LAST_DATA}'*' ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值