记一次ES查询数据突然变为空的问题

最新推荐文章于 2023-10-09 23:30:00 发布
最新推荐文章于 2023-10-09 23:30:00 发布
阅读量3k 收藏 2
点赞数
分类专栏： Elasticsearch系列 文章标签： elasticsearch kibana
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/dailywater/article/details/102908883
版权
本文记录了一次在Elasticsearch 6.3.1环境中，使用Java8客户端和Kibana 6.3.4查询数据时遇到的问题。某个查询功能突然返回空结果，原因是字段payment原本定义为keyword，却意外变为text类型。讨论了text与keyword的区别，并介绍了错误排查过程，包括将查询条件转为小写、改用match查询等。最终解决方案是删除索引并按照预期的mapping重建。提醒开发者在删除索引后要手动重建以避免自动mapping导致的类型错误。
摘要由CSDN通过智能技术生成

基本环境

  • elasticsearch版本：6.3.1
  • 客户端环境：kibana 6.3.4、Java8应用程序模块。
    其中kibana主要用于数据查询诊断和查阅日志，Java8为主要的客户端，数据插入和查询都是由Java实现的。

案例介绍

使用elasticsearch存储订单的主要信息，document内的field，基本上是long或keyword，创建索引的order.json文件如下：

{
   
  "doc": {
   
	"properties": {
   
	  "id": {
   
		"type": "keyword",
		"index": true
	  },
	  "status": {
   
		"type": "byte",
		"index": true
	  },
	  "createTime": {
   
		"type": "long",
		"index": true
	  },
	  "uid": {
   
		"type": "long",
		"index": true
	  },
	  "payment": {
   
		"type": "keyword",
		"index": true
	  }
最低0.47元/天 解锁文章
1黄鹰
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
es-utils：ElasticSearch实用程序
02-05
es-utils：ElasticSearch实用程序
【ES的term查询无返回结果】
weixin_52842903的博客
04-19 2014
`使用term查询搜索文档时，参数正确却无结果返回的情况。提示：以下是本篇文章正文内容，下面案例可供参考# term 查询 POST / sms - logs - index / sms - logs - type / _search {"term" : {"value" : "北京" } } } }此时执行查询结果为：可以看到并未返回结果},"hits" : {所以遇到term查询无返回结果，可先分析该字段索引的映射类型。在kibana中可以使用一下查看字段映射定义。
es查询字段为空的值
f335830104的博客
08-10 8690
1，背景 在写入的时候赋值为空字符串而不是null 查询的是时候使用 { "query":{ "exists":{ "field":"title" } }, "size":1, "from":0 } 使用exists 查询只能查到字段为null 的 没法查到字段为空的 使用script 脚本 查询字段为空的数据 { "query": { "script" : {
【elasticsearch】记录ES查询数据结果为空的问题（单个字搜索可以，词语搜索为空）
No8g攻城狮的博客
09-13 7133
使用存储设备列表的主要信息，document内的field，基本上是integer或keyword，es自动创建的索引如下：{},},},},},"id" : {},},"sn" : {}}}}}而部署在开发环境里的es{},},},}},},},},},"sn" : {}}}}}以上字段，只需要关注即可。因为搜索是根据此字段检索数据的。可以很清楚的看到字段使用了 ik分词器（）。问题虽小，但一定要追溯源头，比如此次测试环境的不规范操作。
es 聚合查询不要hits中的数据
weixin_40583191的博客
11-04 3246
场景： 包含某个字段的所有数据根据企业ID进行分组，查出每个企业包含这个字段的数据有多少。我只想要聚合后的数据，不需要条件查出来的数据。我这里的处理方式就是使用from=0，size=0。这样hits中的数据就不会显示了。 案例： GET index/_search { "query": { "nested": { "path": "paths", "query": { "exists": { "field": "paths.conte
记一次ES数据修复
SiuPang
08-29 2560
先说一下问题引发背景： lz之前未对通过curl对ES进行实操过，由于线上ES中有一条客户信息的某个属性丢失，影响业务功能，于是进行数据恢复。在操作的时候，没有采用复制粘贴指南中的命令，采用手打的方式（建议还是复制粘贴吧），少打个“_update”，瞬间引发血案，数据不见了（注意：不加”_update“，会执行删除操作）。好在当天在查询ES的时候把结果copy了出来（还要谢谢notepad++编...
集群写入_es 7.2 生产集群 index 无数据写入故障定位
loveLifeLoveCoding的博客
07-10 485
Logstash报错： Could not index event to Elasticsearch_懵懂无知的蜗牛的博客-CSDN博客集群写入_es 7.2 生产集群 index 无数据写入故障定位_镝不咸的博客-CSDN博客查看 logstsh 日志报错提示如下Could not index event to Elasticsearch. {:status=>400, :action=>["index", {:_id=>nil, :_index=>"apps_wms-2020.07.16", :rout
es dsl 空值和有值的匹配
u010325193的博客
12-06 3082
非空匹配 返回在原始字段中至少有一个非空值的文档： 比如下面的字段都因为有值而被匹配 { "user": "jane" } { "user": "" } ① { "user": "-" } ② { "user": ["jane"] } { "user": ["jane", null ] }
特殊数据的js四舍五入问题
10-31
例如，当你看到`20572.934999999998`四舍五入后变成`20572.93`，这是因为原始数值在计算机内部的实际表示并不是精确的`20572.934999999998`，而是一个非常接近但略低的值。在进行四舍五入操作时，JavaScript会基于这...
第一次试验问题1
08-08
8086/8088处理器有四个主要的段寄存器：CS（代码段），DS（数据段），SS（堆栈段）和ES（附加段），它们与16位的段偏移量一起构成20位的物理地址。 10. **物理地址计算**: 物理地址 = 段寄存器值 * 16 + 偏移量...
Mastering ElasticSearch.pdf
02-05
本书《Mastering ElasticSearch》旨在帮助读者深入理解ElasticSearch的工作原理，并掌握如何有效地使用它进行数据查询与处理。 #### 二、ElasticSearch的基础概念 1. **文档(Document)**：在ElasticSearch中，数据...
JavaScript 数据类型详解
12-09
在ES5标准中，JavaScript提供了六种原始数据类型（不包括ES6引入的Symbol）：number、string、boolean、null、undefined，以及一种复杂数据类型——Object。 1. Number类型：JavaScript中的数字类型包括整数和...
elasticsearch-analysis-pinyin-6.8.1.zip
11-11
"elasticsearch-analysis-pinyin-6.8.1.zip" 是一个针对 Elasticsearch 的6.8.1版本设计的拼音分词器插件，它旨在解决中文分词问题，尤其是通过拼音来实现搜索。 拼音分词器是中文处理的一种常见策略，它将中文字符...
ES数据库重建索引—Reindex详解
最新发布
lixinkuan的博客
10-09 1573
2、当数据的mapping需要修改，但是大量的数据已经导入到索引中了，重新导入数据到新的索引太耗时；1）用过Scroll接口吧，很慢？1、当你的数据量过大，而你的索引最初创建的分片数量不足，导致数据入库较慢的情况，此时需要扩大分片的数量，此时可以尝试使用Reindex。2）每个Scroll请求，可以分成多个Slice请求，可以理解为切片，各Slice独立并行，利用Scroll重建或者遍历要快很多倍。3）如果这个slices数字很大(例如500)，建议选择一个较低的数字，因为过大的slices 会影响性能。
ElasticSearch更新数据后查不到的问题
程序员青菜学厨记
09-30 1877
ES在进行写操作时，会先在内存中缓存一段数据，然后采取一定的策略，将 这些数据写入磁盘，这个过程称Refresh，每次Refresh都会产生一个新的Lucene段，但段过多又会消耗文件句柄，内存，所以又有一定的策略将这些较小的段合并为大的段，刷新的ES默认采用每隔1秒定时刷新，所以刚写进去的数据立即去查极有可能是查不到。
记录一次es写数据延迟引发的问题
weixin_42264750的博客
03-07 1886
es更新延迟引发的问题及解决
解决elasticsearch更新数据后不能立即刷新的问题
你今天真好看呀
11-10 1万+
1. 问题复现 今天在跟前端进行联调的过程中发现了一个问题，向elasticsearch中新增一条文档数据后，立即请求查询文档列表，发现刚刚新增的文档查不出来，需要等一会后再次请求查询才能查询出来，随后测试了删除文档列表和更新文档列表中的文档这两个接口，出现了同样的问题，即elasticsearch数据更新有延迟。 2. 原因分析 在写操作中，一般会先在内存中缓冲一段数据，再将这些数据写入硬盘，每次写入硬盘的这批数据称为一个分段，如同任何写操作一样。一般情况下，通过操作系统write接口写到磁盘的数据先到达
Elasticsearch索引管理-reindex重建索引
热门推荐
下雨天__的专栏
08-29 2万+
一个field的设置是不能被修改的，如果要修改一个field，那么应该重新按照新的mapping，建立一个index，然后将数据批量查询出来，重新用bulk api写入新index中。 批量查询的时候，建议采用scroll api，并且采用多线程并发的方式来reindex数据，每次scroll就查询指定日期的一段数据，交给一个线程即可。 具体操作步骤： （1）一开始，依靠dynamic ma...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值