elasticsearch——upsert(类似于oracle中merge的方法)

最新推荐文章于 2024-01-25 01:55:08 发布
最新推荐文章于 2024-01-25 01:55:08 发布
阅读量588 收藏
点赞数
分类专栏： ES
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_26915707/article/details/103504624
版权

实现有则更新，无则插入

参数中增加doc_as_upsert属性

例：

{
	'_index': INDEX_NAME,
	'_type': doc_type,
	'_id': doc['id'],
	'_op_type': 'update',
	'doc': doc['doc'],
	'doc_as_upsert': True
}

 

黑人子敬
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
7.熟练掌握ES Java API基于upsert实现汽车最新价格的调整
lm324114的专栏
03-02 409
做一个汽车零售数据的mapping，我们要做的第一份数据，其实汽车信息 PUT /car_shop { "settings": { "number_of_shards": 3, "number_of_replicas": 0 }, "mappings": { "cars": { "properties": { "brand"...
elasticsearch中的upsert
热门推荐
BrotherDong90的专栏
02-16 1万+
elasticsearch的更新功能是非常强大的,一直知道在update中有一个upsert功能,因为一直用不到也就没有去仔细看一下,最近,因为有业务可能要用到该功能,这里简单的说一下: 通过curl去更新数据如下: curl -XPOST 'localhost:9200/test/type1/1/_update' -d '{ "doc" : { "name" :
elasticsearch中批量的upsert
杨煜冬煜杨的博客
05-22 8116
大家知道，在elasticsearch中，使用bulk操作可以批量的处理数据，然而文档中的bulk似乎并不能处理upsert操作，事实上，只需要加上如下参数就可以了 "doc_as_upsert" : true 这样，使用python脚本时参数如下所示： t = {'_index': INDEX_NAME, '_type': doc_type, '_id': doc['id'
elasticsearch中的upsert操作
紫一
06-16 1万+
如果指定的document不存在，就执行upsert中的初始化操作； 如果指定的document存在，就执行doc或者script指定的partial update操作 也就是说两种操作只能2选一 POST /test_index/test_type/11/_update { "script" : "ctx._source.num+=1", "upsert": {...
SpringBoot整合ES一个完整的upsert操作
weixin_43862280的博客
05-27 1113
SpringBoot整合ES一个完整的upsert操作 Controller层 @RequestMapping(value = "addAuthTypeForRobot") public Response addAuthType(@RequestBody AuthType authType) { return zhwdUserService.addAuthTypeForRobot(authType); } service业务层 /** * 用户开放问答权限给机
Oracle数据批量导入elasticsearch脚本
12-31
Linux环境下使用sqlplus工具将oracle中的数据导入到elasticsearch中。只需要在es_bulk_tool.properties配置sql即可实现数据的批量导入。在elasticsearch6中测试通过。shell脚本需要使用sqlplus。
适用于elasticsearch7.12.1版本
04-25
这个版本的 Elasticsearch 针对性能和稳定性进行了优化，适用于大规模数据检索和分析场景。Elasticsearch 不仅支持英文分词，还特别强调了对中文的支持，因此在处理中文文档时，它通常会搭配使用专门的中文分词器。 ...
elasticsearch中文文档——基于7.11.zip
最新发布
02-28
**Elasticsearch中文文档——基于7.11版本** Elasticsearch是一款强大的开源搜索引擎，它以分布式、实时、全文检索的特性而广受开发者欢迎。7.11版本是其历史上的一个重要版本，包含了多项改进和优化。在这个版本中...
Python中elasticsearch插入和更新数据的实现方法
09-20
Elasticsearch中的映射类似于数据库中的表结构定义，它指定了如何将文档数据映射到索引中的字段。一个良好的映射设计有助于在数据插入时避免错误，并优化搜索性能。 ### 代码实现示例 以下是一个使用Python进行...
关于elasticsearch5.6版本的upsert文档操作总结
qq_45136592的博客
05-28 1569
关于elasticsearch5.6版本的upsert文档操作总结 一.upser在ealsticsearch中的概念 1.elasticsearch中upsert文档和其他数据库相同，当文档存在时只更新修改的数据，而做到不影响其他字段的值，索引中不存在该文档时就生成文档 二.curl请求直接操作elasticsearch中文档示例 curl --location --request POST 'http://ip:port/{indexName}/{type}/{id}/_update' \ --head
Elasticsearch 7.10 之 Merge
王大呀呀的博客
12-14 756
Elasticsearch 中的分片是 Lucene 索引，Lucene 索引分为多个部分。段是索引中存储索引数据的内部存储元素，并且是不可变的。较小的段会定期合并为较大的段，以保持索引大小不变并清除删除的。 合并过程使用自动限制来平衡合并和其他活动（例如搜索）之间硬件资源的使用。 Merge scheduling 合并调度程序（ConcurrentMergeScheduler）在需要时控制合并操作的执行。合并在单独的线程中运行，并且当达到最大线程数时，直到合并线程可用时才会继续进行进一步的合并，。 合并调
Elasticsearch的性能测试与评估
禅与计算机程序设计艺术
01-25 1203
1.背景介绍 1. 背景介绍 Elasticsearch是一个基于分布式搜索和分析引擎，它可以处理大量数据并提供实时搜索功能。在现代应用程序中，Elasticsearch被广泛使用，因为它能够提供高性能、可扩展性和实时性能。然而，在实际应用中，性能是一个重要的考虑因素。因此，了解如何对Elasticsearch的性能进行测试和评估至关重要。 在本文中，我们将讨论Elasticsearch的性...
elasticsearch里面bulk的用法
JavaAlliance
08-30 1788
本篇我们来看下关于批量写入的方法bulk。 bulk api可以在单个请求中一次执行多个索引或者删除操作，使用这种方式可以极大的提升索引性能。 bulk的语法格式是： action and meta_data \n optional source \n action and meta_data \n optional source \n action and meta_data \n op...
ElasticSearch6.3.2 通过RestHighLevelClient实现Upsert
JacksonKing的专栏
03-02 2363
ImpalaSQLTargetModel targetModel = generateTestImpalaSQLTargetModel(completedQuery); //构建搜索条件，去索引中查找对应文档的索引，有的话就执行更新操作，没有的话就执行update操作，实现upsert IndexRequest i...
Elasticsearch中查询性能优化
醉鱼的博客
07-16 978
需要读取多个小块进行查询时，它并不会一次性将所有的小块全部加入内存中，而是采用分批读取的方式，以避免内存不足的情况发生。会首先从磁盘中读取一部分小块到内存中，以进行排序、过滤和组合等操作，然后将处理过的结果再与后面的小块进行组合。会从磁盘中读取这些小块，并在内存中对它们进行排序、过滤和组合，然后返回查询结果。中，文本内容被拆分成多个小块并不是保存在磁盘中的，而是保存在内存中的。无法将整个文本读入到内存中，因此会将文本拆分为多个小块，并将它们存储在磁盘上的多个。文档，可以通过分片和文档段来存储和管理。
Elasticsearch进阶之路:Java Restapi Upsert文档操作
人在码途，逐日拾光
11-05 3352
Java Restapi Upsert 文档操作 文档更新 UpdateRequest request = new UpdateRequest( "posts", "doc", "1"); String jsonString = "{" + "\"updated\":\"2017-01-01\"," + "...
Elasticsearch7x upsert亲测试有效
lbl251的博客
08-20 683
kibana 局部更新 Elasticsearch7x POST index/_doc/(你自己的id)/_update { "doc": { "doneState": 1, "statusReport" : "DELIVRD" } }
【Elasticsearch】es 插入数据 性能优化 以及 影响插入的因素
九师兄
05-10 1616
1.概述 2.性能优化 3. 性能降低 3.1 插入数据时对索引进行预排序 Index sorting （索引排序）可用于在插入时对索引进行预排序，而不是在查询时再对索引进行排序，这将提高范围查询（range query）和排序操作的性能。 在 Elasticsearch 中创建新索引时，可以配置如何对每个分片内的段进行排序。 这是 Elasticsearch 6.X 之后版本才有的特性。 Index sorting 实战举例： PUT my-index-000001 { "settings": {
Python中elasticsearch如何插入和更新数据
就是爱编程-都有人重名的博客
03-29 1万+
    博主今天简单分享一下如何用Python在elasticsearch中插入和更新数据。    首先，我的索引结构是酱紫的。        存储以name_id为主键的索引，待插入或更新数据为：         一般会有有两种操作：      以下图片为个人见解，我没试过能不能直接运行，但形式上没错。    数据不存在，我需要插入地址为空字符串。    单条插入：    批量插入：    该数...
elasticsearch java upsert
09-01
在Elasticsearch中使用Java进行upsert操作，可以使用Elasticsearch的Java高级客户端（High-Level REST Client）来实现。下面是一个简单的示例代码： ```java import org.apache.http.HttpHost; import org.elasticsearch.action.DocWriteRequest; import org.elasticsearch.action.bulk.BulkRequest; import org.elasticsearch.action.index.IndexRequest; import org.elasticsearch.client.RequestOptions; import org.elasticsearch.client.RestClient; import org.elasticsearch.client.RestHighLevelClient; import java.io.IOException; public class UpsertExample { public static void main(String[] args) { // 创建RestHighLevelClient实例 RestHighLevelClient client = new RestHighLevelClient( RestClient.builder(new HttpHost("localhost", 9200, "http")) ); // 创建IndexRequest和BulkRequest IndexRequest indexRequest = new IndexRequest("your_index", "your_type", "your_id") .source("your_field", "your_value"); // 设置需要插入或更新的字段和值 BulkRequest bulkRequest = new BulkRequest() .add(indexRequest); // 将IndexRequest添加到BulkRequest中 try { // 执行upsert操作 client.bulk(bulkRequest, RequestOptions.DEFAULT); // 关闭client连接 client.close(); } catch (IOException e) { e.printStackTrace(); } } } ``` 在上述示例中，首先创建了一个`RestHighLevelClient`实例，指定Elasticsearch的主机和端口。然后，创建一个`IndexRequest`对象，指定索引、类型和文档ID，并使用`source`方法设置需要插入或更新的字段和值。接下来，创建一个`BulkRequest`对象，并将`IndexRequest`添加到其中。最后，使用`bulk`方法执行upsert操作，并关闭客户端连接。 请根据您的具体需求修改代码中的索引、类型、文档ID、字段和值等参数。另外，您可能还需要处理异常情况和其他错误处理逻辑。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值