ES文档新增冲突问题

最新推荐文章于 2024-04-29 22:58:18 发布

岁月无痕_2020

最新推荐文章于 2024-04-29 22:58:18 发布

阅读量889

点赞数

分类专栏：高并发文章标签： elasticsearch java 并发

本文链接：https://blog.csdn.net/weixin_46549536/article/details/112251131

版权

在ES 5.5版本中，当多个服务尝试同时新增相同文档时，出现数据覆盖问题。通过引入版本控制，以版本号1进行索引文档插入，若冲突则更新文档，避免数据丢失。示例代码展示了如何处理版本冲突。

摘要由CSDN通过智能技术生成

问题

公司现在使用的ES版本是5.5，发现在生成索引文档的时候，会有新增文档冲突问题。
在这里插入图片描述
比如同一个索引文档中的数据来自两个后台服务，当服务A查询到索引中没有文档1，同一时间服务B也查询到索引中没有文档1，于是两个服务都使用index的方式新增索引文档，导致最后的结果是：文档中要么保存着服务A中的所有字段数据，要么保存着服务B中的所有字段数据，两者的字段数据并不是取并集。这种情况就出现了数据覆盖丢失的问题。

解决方案

使用版本控制，在插入的时候传入一个版本号为1的值，如果文档已经存在，数据会因版本号冲突插入失败，后继续使用update更新文档，这样就可以保证索引中的数据不被覆盖丢失

插入文档：传入版本号1，尝试新增文档数据，如果文档存在，会报版本冲突，不会覆盖文档

Map<String,String> doc = new HashMap<>();
doc.put("id","213333334");
doc.put("name","张三");
doc.put("name2","张三");
ESAliyunClient.getClient().prepareIndex("test","ext","213333334")
        .setVersion(1).setVersionType(VersionType