关于ES的bulk操作的一些问题

最新推荐文章于 2024-07-15 09:58:20 发布

书生_AABB

最新推荐文章于 2024-07-15 09:58:20 发布

阅读量5.6k

点赞数 1

分类专栏：工作总结文章标签： ES-bulk报错

本文链接：https://blog.csdn.net/qq_36520153/article/details/77407646

版权

工作总结专栏收录该内容

10 篇文章 0 订阅

订阅专栏

写好的代码如下
报错如下

"reason": "Unexpected end-of-input: expected close marker for OBJECT (from [Source: [B@1ce48eee; line: 1, column: 0])\n at [Source: [B@1ce48eee; line: 1, column: 3]"

翻阅资料：每行必须以\n结尾
然后经过多次更改发下如下代码可行

总结：看来代码写的美观并不总是对的，如es的bulk操作，请求头与请求体的内容都不能换行，两者之间换行即可

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

书生_AABB

关注关注

1
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

使用ES的_bulk进行批处理

u011511601的专栏

03-26

1260

使用ES的_bulk进行批处理欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢...

python elasticsearch bulk_Elasticsearch之批量操作bulk

weixin_39608116的博客

12-09

1344

1、bulk相当于数据库里的bash操作。2、引入批量操作bulk，提高工作效率，你想啊，一批一批添加与一条一条添加，谁快?3、bulk API可以帮助我们同时执行多个请求4、bulk的格式：action：index/create/update/deletemetadata：_index,_type,_idrequest body：_source(删除操作不需要加request body){ a...

参与评论您还未登录，请先登录后发表或查看评论

ElasticSearch _bulk批量插入报错

白羊座的橙子

12-17

1038

一、现象今天在 ElasticSearch 批量插入时： POST /customer/external/_bulk { "index":{"_id":"1"} } { "name":"John" } { "index":{"_id":"2"} } { "name":"tom" } 出现了这样的错误： { "error": { "root_cause": [ ...

springboot使用@RequestBody接收参数报错JSON转换异常

最新发布

money-k的博客

07-15

521

在读取到body之前逐行对请求报文进行读取,这可能会出现请求报文异常带来的读取异常。这里将日志记录调整至afterBodyRead中进行处理问题得到解决！

es bulk java_es v6.8.3 bulk 异常

weixin_33253331的博客

02-23

245

项目启动正常，使用kibana连接es正常，数据入库会时会报如下异常org.elasticsearch.client.transport.NoNodeAvailableException: None of the configured nodes are available: [{#transport#-1}{_X6NAOs9Q_GFms7gODeelQ}{192.168.138.165}{192...

ES5.6.4源码解析--批量索引bulk

qqqq0199181的博客

08-28

1952

引言 ES的批量索引操作，可以把多条索引请求合成一次请求，每个请求可以指定不同的索引。当往ES中索引大量数据的时候，使用批量索引能够大大增加索引的数据。接下来让我们通过阅读批量索引的源码来揭开其神秘的面纱。索引请求的预处理批量索引的入口位于TransportBulkAction#protected void doExecute(Task task, BulkRequest bulkR...

一起来学ES —— Bulk剖析

weixin_34206899的博客

08-25

666

背景 Bulk请求是ES常用的一种multi-document请求,其处理比较复杂，之前一直搞不清请求的处理逻辑，今天就从源码入手，仔细剖析一下其执行逻辑。时序分析简单而言，Bulk的时序如下图所示，Http节点只将包转为TCP,ingest节点进行些预设的前置处理，然后按shard拆分，再把按shard拆开的bulk再发到真实的data节点上，最后...

ES使用Bulk批量添加数据报The number of object passed must be even but was [1]

Everglow101的博客

12-28

1123

7.5.1版本使用Bulk批量添加数据报The number of object passed must be even but was [1], 本人报错原因: 使用的source方法中的参数顺序不一样,如上图, 所以判定的对象长度为1 应该用的source方法的参数是1.source 2.XContentType 后解决 ...

python elasticsearch bulk_关于ElasticSearch Bulk的用法

weixin_39843431的博客

12-09

1103

Background刚接触ElasticSearch不久，公司让我帮忙去导一下数据，刚开始数量并不是很大，我都是用Elasticsearch python的api接口，一条一条数据去往新的index里插. 但是马上又有了千万级别的数据需要操作，如果还是老办法，会特别慢，而且不够稳定。于是去查了一下资料。关于Elasticsearch的python api文档很少，中文的就更少了，官方稳定又不是很详...

es bulk java_Java Elasticsearch Bulk API 批量操作

weixin_29290259的博客

02-16

1284

ES的Bulk API主要用于在单个请求中，批量执行创建、更新、删除文档操作，避免循环发送大量的ES请求。创建BulkRequest对象BulkRequest request = new BulkRequest();添加操作对象支持index/update/delete操作。批量index操作// 通过add方法，添加IndexRequest对象，创建文档，下面插入3个文档// ps: Index...

elasticsearch-bulk-insert-plugin.zip

10-29

Elasticsearch-Bulk-Insert-Plugin 是一个专为Kettle设计的插件，主要用于高效地将大量数据批量插入到Elasticsearch（ES）集群中。Elasticsearch是一种流行且功能强大的分布式搜索引擎，常用于大数据分析、日志分析...

Elasticsearch bulk批量操作

春水初生，春林初盛，春风十里，不如随笔

12-31

653

1、bulk语法每一个操作要两个json串，语法如下： {"action": {"metadata"}} {"data"} 举例，比如你现在要创建一个文档，放bulk里面，看起来会是这样子的： {"index": {"_index": "test_index", "_type", "test_type", "_id": "1"}} {"test_field1": "test1", "test_field2": "test2"} 可以执行的操作类型（1）delete：删除一个文档，只要1个j

Elasticsearch --- （七）并发冲突、锁

weixin_43240792的博客

05-20

538

1、剖析ES并发冲突问题 2、悲观锁和乐观锁两种并发控制方案

Elasticsearch 操作异常总结

hello_yajing的博客

05-14

3622

1.Unexpected end-of-input Unexpected end-of-input: expected close marker for Object (start marker at [Source:org.elasticsearch.common.bytes.BytesReference$MarkSupportingStreamInputWrapper@5dae9215; line: 1, column: 1]) at [Source:org.elasticsearch.co

Unexpected end of input解决方法

热门推荐

hl18730262380的博客

10-12

20万+

Unexpected end of input 可以翻译为 “意外的终止输入” 它通常表示浏览器在读取我们的javascript代码时，碰到了不可预知的错误，导致浏览器无法进行下面的解析一般**“ ”（双引号）， ‘ ’（单引号），{}，[]**未成对输入时会出现这样的错误 ...

ES7.16.2基础操作之锁（十八）

ls_call520的专栏

01-01

757

###########全局锁################ ## 创建全局锁 PUT /fs/lock/1/_create {"name":"lisi","sex":1} ##删除全局锁 DELETE /fs/lock/global ###########document锁################ ##1、document锁：对某个doc加锁 POST /fs/_update/1 { "upsert": {"process_id": 123}, "script": { "so.

Elasticsearch 常见的 8 种错误及最佳实践

hellozhxy的博客

08-05

2250

Elasticsearch 社区有大量关于 Elasticsearch 错误和异常的问题。深挖这些错误背后的原因，把常见的错误积累为自己的实战经验甚至是工具，不仅可以节省我们的开发和运维时间，而且可以帮助确保 Elasticsearch 集群的长期健康运行。常见的异常、原因和常规最佳实践拆解如下，这些最佳实践可以帮助我们更有效地识别、最小化定位和处理异常问题。 1、 Mapper_parsing_exception Elasticsearch 依靠映射（Mapping）定义的数据类型处理数据。

elasticsearch里面bulk的用法

三劫散仙

04-09

5万+

上篇文章介绍了在es里面批量读取数据的方法mget，本篇我们来看下关于批量写入的方法bulk。bulk api可以在单个请求中一次执行多个索引或者删除操作，使用这种方式可以极大的提升索引性能。bulk的语法格式是：action and meta_data \n optional source \n action and meta_data \n optional source \n actio...

七 ES并发控制

一朵的专栏

06-03

1739

当有多个线程同时操作ES数据时，可能造成ES数据错误，这个时候就需要进行并发控制。并发控制策略有两种： 1. 悲观锁当一个线程操作数据时，就会对数据进行加锁，其它线程就不能修改数据，直到该线程完成数据操作并释放锁。 2. 乐观锁乐观锁即无锁机制，可以使用cas方式来实现。 ES采用乐观锁机制。我们可以看到，ES存储的数据还有version版本号，对ES的增、删、改都会涉及到...