Elasticsearch create status 409

最新推荐文章于 2024-03-24 07:52:42 发布
最新推荐文章于 2024-03-24 07:52:42 发布
阅读量3.4k 收藏
点赞数
分类专栏： Elasticsearch 文章标签： index
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hyx216/article/details/88636342
版权

插入一条数据到wechat_customer （字段有 openid,nickname,subscribe,sex 等），报下列错误：

Array
(
    [errorMessage] => {"error":{"root_cause":[{"type":"document_already_exists_exception","reason":"[wechat_customer][oTyBt1rElFDmmn7rmNAD9ApiKang]: document already exists","shard":"1","index":"dev_jingsocial_default_index"}],"type":"document_already_exists_exception","reason":"[wechat_customer][oTyBt1rElFDmmn7rmNAD9ApiKang]: document already exists","shard":"1","index":"dev_jingsocial_default_index"},"status":409}
)，

经过排查发现字段openid设置为唯一索引，不能重复插入。

hyx216
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
MySQL 与 Elasticsearch 数据不对称问题解决办法
09-09
CREATE TABLE `elasticsearch_trash` ( `id` int(11) NOT NULL, `mtime` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP, PRIMARY KEY (`id`) ); ``` 5. **同步逻辑优化**：在...
php 的elasticsearch拓展
11-27
在Web开发中，Elasticsearch已经成为了一个强大的搜索引擎和数据分析平台，尤其在处理大量实时数据时，其高效、灵活的特点得到了广泛应用。PHP作为后端开发的主流语言之一，与Elasticsearch的集成是常见的需求。在...
ElasticSearch-冲突处理
奔跑的豆子的专栏
10-18 6538
当我们使用indexAPI更新文档时，可以一次性读取原始文档，然后重新索引整个文档，最近的索引请求将获胜：无论最后哪一个文档被索引，都将被唯一存储在ElasticSearch中。如果其他人同时更改这个文档，他们的更改将丢失。很多时候这是没有问题的，也许我们的主数据存储是一个关系型数据库，我们只是将其复制到ElasticSearch中，使其可以被搜索，也许两个人同时更改同一个文档的几率很小，或者对于我
ES处理冲突
阿拉斯加大闸蟹的博客
07-25 1351
https://github.com/singgel/BigData-SkillTree 处理冲突编辑 当我们使用indexAPI 更新文档，可以一次性读取原始文档，做我们的修改，然后重新索引整个文档。 最近的索引请求将获胜：无论最后哪一个文档被索引，都将被唯一存储在 Elasticsearch 中。如果其他人同时更改这个文档，他们的更改将丢失。 很多时候这是没有问题的。也许我们的...
elasticsearch入门知识讲解（二）
TonyWu的博客
04-11 371
什么是文档?编辑在大多数应用中，多数实体或对象可以被序列化为包含键值对的 JSON 对象。 一个 键 可以是一个字段或字段的名称，一个 值 可以是一个字符串，一个数字，一个布尔值， 另一个对象，一些数组值，或一些其它特殊类型诸如表示日期的字符串，或代表一个地理位置的对象： 通常情况下，我们使用的术语 对象 和 文档 是可以互相替换的。不过，有一个区别： 一个对象仅仅是类似于 hash 、 hash...
【elasticsearch】elasticsearch查询报错问题整理
Mrerlou的博客
09-18 2469
问题一： 1. 业务方：监管科技 2. 报错内容： Caused by: org.elasticsearch.search.query.QueryPhaseExecutionException: Result window is too large, from + size must be less than or equal to: [20000] but was [83440000]. See the scroll api for a more efficient way to request larg
ElasticSearch处理更新冲突
热门推荐
职场里拉开差距的不是知识，而是认知！
07-16 2万+
当使用index API更新文档的时候，我们读取原始文档，做修改，然后将整个文档(whole document)一次性重新索引。最近的索引请求会生效——Elasticsearch中只存储最后被索引的任何文档。如果其他人同时也修改了这个文档，他们的修改将会丢失。 很多时候，这并不是一个问题。或许我们主要的数据存储在关系型数据库中，然后拷贝数据到Elasticsearch中只是为了可以用于搜索。或许
Elasticsearch py客户端库安装及使用方法解析
09-16
`Elasticsearch` 类包含了诸如`get`、`mget`、`search`、`index`、`bulk`、`create`、`delete`等常用方法。使用这些方法前，需要先创建`Elasticsearch`实例。创建实例有两种方式：一是通过指定连接类（connection ...
python elasticsearch从创建索引到写入数据的全过程
09-18
es = Elasticsearch('192.168.1.1:9200') ``` 这里的 `192.168.1.1:9200` 是Elasticsearch服务器的地址和端口，你需要将其替换为你实际的服务器配置。 创建索引是Elasticsearch操作的第一步。索引在Elasticsearch...
Java操作Elasticsearch
05-08
**Java操作Elasticsearch**是将Java编程语言与流行的全文搜索引擎Elasticsearch相结合，用于高效地执行各种数据操作。Elasticsearch是一个分布式、RESTful风格的搜索和数据分析引擎，能够处理大量的数据并提供实时...
ES常见启动报错解决办法
09-16
ES常见启动报错解决办法汇总
Elastic Search权威指南 第一章 ES基础概念
qq_31238727的博客
08-20 360
索引(名词)：一个集群中，可以有多个结点；一个结点中，也可以存在多个索引。一个索引索引着多个分片，所以一个索引索引着的分片，也就可以存在多个结点中。索引其实为一个逻辑命名空间，也就是非真实存在的，只是一个概念。 集群健康 green：主分片都可用，复制分片也都可用 yellow：主分片都可用，复制分片不一定都可用 red：主分片和复制分片都不一定可用 遇到主结点故障时 迅速将一个负结点升级为
ES 错误码
大叶子不小的博客
12-20 1542
2xx状态码（如200）表示请求成功处理，并且不需要重试。400状态码表示客户端发送了无效的请求，例如请求的语法有误或缺少必需的参数。在这种情况下，重试相同的请求很可能会导致相同的错误。因此，应该先检查并修复请求中的问题，然后重新发送请求。404状态码表示请求的资源未找到。在Elasticsearch中，这通常是因为请求的索引、文档或其他资源不存在。重试相同的请求不会解决这个问题，因为资源确实不存在。您可以检查请求中的资源标识符，并确保它们正确存在。
ES update_by_query 更新冲突解决方法
PySean的博客
04-21 4083
问题描述： ES在多次更细同一条数据时会产生冲突 elasticsearch.exceptions.ConflictError: ConflictError(409, '{"took":4,"timed_out":false,"total":1,"updated":0,"deleted":0,"batches":1,"version_conflicts":1,"noops":0,"retries":{"bulk":0,"search":0},"throttled_millis":0,"requests_
Es中索引的删除操作
荣山的博客
08-28 9858
Es中索引的删除操作
es 启动报错大全以及解决办法
.
06-23 1万+
es启动报错解决办法 1内存不够报错 es 5.x版本默认启动内存需要4g ，对于一些低内存的虚拟机或者云服务器可能无法启动，需要修改默认内存参数 红色是默认的，黄色是我修改后我自己机器的，大小根据你机器配置修改。 2 can not run es as root ...
ELK入门——踩坑：version conflict,required seqNo [],primary term [],but no document was found
Netceor的博客
02-20 1万+
一、前言 在ES-head删除索引的时候常常出现很多问题，当大数据量删除的时候往往不是超时就是报错409冲突，具体内容是version conflict,required seqNo [],primary term [],but no document was found 出现这个的原因主要是因为使用随机_id，es内的乐观锁造成的删除不够完全，导致版本号冲突。乐观锁相关的说明可以参见博客Elasticsearch-并发冲突处理机制 网上有说要改用自定义的_id，但是其实不需要，当数据量大的时候也
elasticsearch.exceptions.ConflictError: ConflictError(409
最新发布
maodun
03-24 437
在使用update_by_query更新时，加上参数wait_for_completion=false。加上这个参数后，更新请求会返回一个这个更新请求对应的任务的 task id。之后在进行下一次查询前，可以根据该id，查询任务是否完成，在完成后再进行后续操作。错误是由于update_by_query请求不会等任务处理完成后才返回结果，而是先返回结果，之后会在es后台自动执行。在这个过程中，如果执行下次查询，更新操作，会导致同一个Item同时被两个更新进程更新，进而出现同一个item的版本冲突。
elasticsearch 用http的方式批量插入
09-17
### 回答1： 是的，Elasticsearch可以通过HTTP API进行批量插入操作。你可以通过以下步骤进行批量插入： 1. 准备数据：将要插入的数据格式化为JSON格式，并按照ES要求的格式进行组织。每个文档应该包括一个唯一的ID。 2. 使用Bulk API进行批量插入：将准备好的数据通过HTTP POST请求发送到ES的Bulk API中。Bulk API允许在单个请求中插入多个文档。请求的URL应该是ES的索引URL加上`_bulk`路径。例如，如果你要将数据插入名为`my_index`的索引，那么请求的URL应该是`http://localhost:9200/my_index/_bulk`。 3. 解析响应：ES会返回一个JSON格式的响应，包含每个文档的插入状态和任何错误信息。 以下是一个示例批量插入的Python代码： ```python import requests import json # 准备数据 data = [ {"index": {"_index": "my_index", "_id": "1"}}, {"title": "Article 1", "content": "This is the first article."}, {"index": {"_index": "my_index", "_id": "2"}}, {"title": "Article 2", "content": "This is the second article."}, {"index": {"_index": "my_index", "_id": "3"}}, {"title": "Article 3", "content": "This is the third article."} ] # 发送请求 url = "http://localhost:9200/my_index/_bulk" headers = {"Content-Type": "application/json"} response = requests.post(url, headers=headers, data=json.dumps(data)) # 解析响应 if response.status_code == 200: results = json.loads(response.text) for item in results["items"]: if item["index"]["status"] == 201: print(f"Document {item['index']['_id']} inserted successfully.") else: print(f"Error inserting document {item['index']['_id']}: {item['index']['error']}") else: print(f"Error: {response.text}") ``` 在这个示例中，我们将三个文档插入到名为`my_index`的索引中。每个文档都有一个唯一的ID，因此我们可以在解析响应时识别每个文档的插入状态。 ### 回答2： Elasticsearch是一个基于Lucene的开源搜索引擎，采用分布式的方式来存储和检索数据。在Elasticsearch中，可以使用HTTP的方式来进行数据的批量插入。 通过HTTP的方式批量插入数据是利用Elasticsearch的RESTful API来实现的。具体的步骤如下： 1. 准备要插入的数据：在批量插入之前，首先需要准备好要插入的数据，并将其组织成特定的格式。一般情况下，使用JSON格式来表示数据，并按照批量插入的要求进行格式化。 2. 构建HTTP请求：使用任意的HTTP客户端，可以通过POST方法向Elasticsearch的_bulk API发送批量插入请求。该API允许一次性插入多条数据，并且支持同时插入到多个索引中。 3. 发送HTTP请求：将构建好的HTTP请求发送到Elasticsearch的_bulk API的URL地址上。可以使用 curl 命令或者其他HTTP客户端工具来发送请求。 4. 处理响应结果：Elasticsearch将返回一个包含每条插入操作的结果的响应。可以通过解析响应结果来获取插入操作的状态、成功与否等信息。 需要注意的是，在进行批量插入时，为了提高性能，可以一次性插入多条数据。但是，如果插入的数据量过大，可能会导致请求超时或者负载过大。因此，建议在进行批量插入时，适当控制每次插入的数据量，选择合适的插入策略。 总而言之，通过HTTP的方式批量插入数据是利用Elasticsearch的RESTful API来实现的。通过准备数据、构建HTTP请求、发送请求以及处理响应结果等步骤，可以方便地实现数据的批量插入。 ### 回答3： Elasticsearch是一个开源的搜索引擎，可以通过多种方式向其索引数据，其中一种方式是通过HTTP的方式进行批量插入。 使用HTTP的方式批量插入数据到Elasticsearch，需要通过发送HTTP请求来与Elasticsearch的REST API进行交互。具体步骤如下： 1. 构建批量插入请求体：批量插入请求体是一个包含多个插入操作的JSON数组。每个插入操作包含两部分：操作类型和操作数据。操作类型可以是"index"、"create"、"update"或"delete"，具体看需求。操作数据是要插入的文档数据。 2. 发送HTTP请求：将构建的批量插入请求体发送给Elasticsearch的_bulk接口，使用HTTP的POST方法发送请求。 3. 解析返回结果：Elasticsearch将返回一个JSON响应，包含每个插入操作的结果。可以根据需要解析响应结果，了解每个操作的执行情况。 需要注意的是，批量插入请求体的大小是有限制的，一般建议不要一次性插入过多的数据，以免造成请求过大。 通过HTTP的方式批量插入数据相对简单，适用于一次性插入较少量的数据。如果需要高效地插入大量数据，可以考虑使用Elasticsearch提供的更高级的客户端API，如Java API或Python API，这些API可以更好地利用Elasticsearch的分布式特性来提高插入性能。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值