elasticsearch导入之前删除的数据,doc状态为一直为deleted,无法查询

本文档描述了在Elasticsearch中遇到的一个问题,即数据删除后重新导入,文档计数始终为1,而删除计数持续增长。尝试了重新安装、更换版本、创建新索引和forcemerge等方法均未解决问题。解决方案是通过forcemerge清理删除状态的数据,并使用特定的curl命令删除指定ID的文档,随后成功导入数据。
摘要由CSDN通过智能技术生成


之前使用logstash导入到该index下一百多万条数据有问题,删除该节点后,又重新创建该节点;
再次导入原先删除的数据,docs下“count”的数据一直保持为1,只有“deleted”的数量在不停增长。

尝试了:

  1. 重新安装eslasticsearch;替换版本后导入;
  2. 建立不同名称的index后导入;
  3. 删除temp文件夹下的eslasticsearch文件后导入;
  4. forcemerge清空删除状态的数据后导入;

以上操作均无效,数据导入后增长的只有 “deleted”的数量,且每次“count”的数据一直保持为1。

参考Elasticsearch 中为什么会有大量文档插入后变成 deleted?

删除文档的本质 删除文档本质:逻辑删除而非物理删除。
在执行删除文档后,待删除文档不会立即将文档从磁盘中删除,而是将文档标记为已删除状态(版本号 _version + 1, "result"标记为:“deleted”,)

可知删除数据只是将其标记为将文档标记为已删除状态

。。

首先forcemerge清空删除状态的数据:
在这里插入图片描述
再删除剩下的一条数据,curl --silent --location --request DELETE 'http://ip:9200/eswisdom/fdm_query_e_baseinfo/%25%7Bid%7D'
这里的%25%7Bid%7D表示%{id},参考get请求url参数中有+、空格、=、%、&、#等特殊符号的问题解决
请求删除index=eswisdom,type=fdm_query_e_baseinfo,id=%{id}的数据

postman上的请求写法为在这里插入图片描述
再次导入成功

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值