Elasticsearch修改索引中字段类型的方法

最新推荐文章于 2024-07-28 17:41:24 发布
最新推荐文章于 2024-07-28 17:41:24 发布
阅读量3.4k 收藏 2
点赞数 1
分类专栏： ElasticSearch 文章标签： elasticsearch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sinat_34241861/article/details/107712097
版权
一、背景介绍

因为我的ES索引中并没有存很多的数据，基本都是测试数据。因此，为了修改字段类型，我选择的方式是直接删除索引并重新创建，然后给新索引添加mapping数据

二、操作步骤
  1. 删除索引：umeapi-logstash
curl -XDELETE -u elastic:changeme http://localhost:9200/umeapi-logstash?pretty
  1. 重建索引
curl -XGET http://localhost:9200/umeapi-logstash?pretty
  1. 创建mapping（ES7 写法）
    将log_operation_datetime字段的类型由原来的 text 改为 keyword
curl -XPOST "http://localhost:9200/umeapi-logstash/_mapping?pretty" -H 'Content-Type: application/json' -d '{"properties":{"@timestamp":{"type":"date"},"@version":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"agent":{"properties":{"ephemeral_id":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"hostname":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"id":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"type":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"version":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}}}},"ecs":{"properties":{"version":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}}}},"host":{"properties":{"architecture":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"containerized":{"type":"boolean"},"hostname":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"id":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"name":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"os":{"properties":{"codename":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"family":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"kernel":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"name":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"platform":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"version":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}}}}}},"input":{"properties":{"type":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}}}},"log":{"properties":{"file":{"properties":{"path":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}}}},"offset":{"type":"long"}}},"log_operation_datetime":{"type":"keyword","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"log_operation_object":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"tags":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"type":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}}}}'
  1. 查看mapping
curl -XGET http://localhost:9200/umeapi-logstash?pretty

运行结果：

{
  "umeapi-logstash" : {
    "aliases" : { },
    "mappings" : {
      "properties" : {
        "@timestamp" : {
          "type" : "date"
        },
        "@version" : {
          "type" : "text",
          "fields" : {
            "keyword" : {
              "type" : "keyword",
              "ignore_above" : 256
            }
          }
        },
        "agent" : {
          "properties" : {
            "ephemeral_id" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            },
            "hostname" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            },
            "id" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            },
            "type" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            },
            "version" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            }
          }
        },
        "ecs" : {
          "properties" : {
            "version" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            }
          }
        },
        "host" : {
          "properties" : {
            "architecture" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            },
            "containerized" : {
              "type" : "boolean"
            },
            "hostname" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            },
            "id" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            },
            "name" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            },
            "os" : {
              "properties" : {
                "codename" : {
                  "type" : "text",
                  "fields" : {
                    "keyword" : {
                      "type" : "keyword",
                      "ignore_above" : 256
                    }
                  }
                },
                "family" : {
                  "type" : "text",
                  "fields" : {
                    "keyword" : {
                      "type" : "keyword",
                      "ignore_above" : 256
                    }
                  }
                },
                "kernel" : {
                  "type" : "text",
                  "fields" : {
                    "keyword" : {
                      "type" : "keyword",
                      "ignore_above" : 256
                    }
                  }
                },
                "name" : {
                  "type" : "text",
                  "fields" : {
                    "keyword" : {
                      "type" : "keyword",
                      "ignore_above" : 256
                    }
                  }
                },
                "platform" : {
                  "type" : "text",
                  "fields" : {
                    "keyword" : {
                      "type" : "keyword",
                      "ignore_above" : 256
                    }
                  }
                },
                "version" : {
                  "type" : "text",
                  "fields" : {
                    "keyword" : {
                      "type" : "keyword",
                      "ignore_above" : 256
                    }
                  }
                }
              }
            }
          }
        },
        "input" : {
          "properties" : {
            "type" : {
              "type" : "text",
              "fields" : {
                "keyword" : {
                  "type" : "keyword",
                  "ignore_above" : 256
                }
              }
            }
          }
        },
        "log" : {
          "properties" : {
            "file" : {
              "properties" : {
                "path" : {
                  "type" : "text",
                  "fields" : {
                    "keyword" : {
                      "type" : "keyword",
                      "ignore_above" : 256
                    }
                  }
                }
              }
            },
            "offset" : {
              "type" : "long"
            }
          }
        },
        "log_operation_datetime" : {
          "type" : "keyword",
          "fields" : {
            "keyword" : {
              "type" : "keyword",
              "ignore_above" : 256
            }
          }
        },
        "log_operation_object" : {
          "type" : "text",
          "fields" : {
            "keyword" : {
              "type" : "keyword",
              "ignore_above" : 256
            }
          }
        },
        "tags" : {
          "type" : "text",
          "fields" : {
            "keyword" : {
              "type" : "keyword",
              "ignore_above" : 256
            }
          }
        },
        "type" : {
          "type" : "text",
          "fields" : {
            "keyword" : {
              "type" : "keyword",
              "ignore_above" : 256
            }
          }
        }
      }
    },
    "settings" : {
      "index" : {
        "creation_date" : "1596162531791",
        "number_of_shards" : "1",
        "number_of_replicas" : "1",
        "uuid" : "doIwb5mGTYuWITpfUezYDA",
        "version" : {
          "created" : "7050199"
        },
        "provided_name" : "umeapi-logstash"
      }
    }
  }
}

好文参考：Elasticsearch怎么修改索引字段类型

小小平不平凡
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Elasticsearch修改字段类型
yonggeit的博客
02-20 2万+
1.设置索引t2为想要的数据类型 2.将t1 reindex到t2 3.数据reindex完成删除t1 4.设置索引t1为想要的数据类型 5.将t2 reindex到t1 PUT t1 { "settings": { "index": { "number_of_shards": "2", "analysis": { "ana.
es修改字段类型
weixin_41228362的博客
07-16 1万+
概述 首先说明es中索引的字段类型是不可修改的，只能是重新创建一个索引并设置好mapping，然后再将老索引的数据复制过去。 操作步骤 1、创建索引，并指定mapping PUT /web-log { "mappings" : { "properties" : { "classMethod" : { "type" : "text", "fields" : { "keyword" : {
ElasticSearch——倒排索引和正向索引
最新发布
yyd686874的博客
07-28 487
正向索引 (forward index) 以文档的ID为关键字，表中记录文档中每个字的位置信息，查找时扫描表中每个文档中字的信息直到找出所有包含查询关键字的文档如果是根据id查询，那么直接走索引，查询速度非常快。但如果是基于某个关键字做模糊查询，只能是逐行扫描数据，流程如下：1）用户搜索数据，条件是name符合 "%线性%"2）逐行获取数据，比如id为109的数据3）判断数据中的name是否符合用户搜索条件4）如果符合则放入结果集，不符合则丢弃。
ElasticSearch中text和keyword类型的区别
热门推荐
ZK教皇的博客
05-15 2万+
    在ES的2.X版本中，对于字符类型的数据，我们都使用string类型作为映射，然后再设置它的分词，例如我们新建了一个名为  zk_test的索引，类型为 info，为其中字符类型的name字段设置索引，设置不分词，Kibanan中操作如下PUT /zk_test/info/_mapping { "info":{ "properties":{ "name":{"typ...
ElasticSearch设置字段的keyword属性
WorldMvp的专栏
04-12 7797
es查询时候，我们经常会遇到这种场景：对text类型的文档进行查询或者聚合，却发现聚合的字段被es分词了。 这个时候，我们就需要对该字段设置一个keyword属性，并将该keyword属性的type设置为keyword。这样，我们在查询或者在聚合时候，通过该属性下的keyword字段，可以实现完全匹配。 示例： 对一个nested对象下的name字段设置keyword属性。 （1）创建映射。 PUT /my_store/_mapping/products?pretty { "propertie.
es修改某个字段的类型
Java_CSDN_W的博客
11-09 1095
如果你有强迫症，也可以把他的别名dws_dp_sd_fcd_pnecc删除，再把新创建的索引dws_dp_sd_fcd_pnecc11这个重复上面1-3步骤，重新创建一个名字为dws_dp_sd_fcd_pnecc的索引，删除的dws_dp_sd_fcd_pnecc11。到此就可以利用别名dws_dp_sd_fcd_pnecc11的别名dws_dp_sd_fcd_pnecc来访问。删除dws_dp_sd_fcd_pnecc11索引的别名dws_dp_sd_fcd_pnecc。
全文检索 — ElasticSearch_04（ES的常用CURL命令、更改索引已有字段的数据类型、查询结果超过10000报500错误）
文泽路小男孩的博客
01-20 2200
文章目录1 基本语法2 常用参数3 常用CURL语句3.1 查看node状态3.2 查看集群健康状况3.3 查看全部索引（排序后）3.4 查看特定索引3.5 pretty，美观3.6 是否存在3.7 查指定的字段值3.8 查指定的字段值，并只显示3个3.9 从第3个开始只显示3个3.10 按时间排序，desc降序，默认为升序3.11 模糊查询3.12 比较大小3.13 是否显示3.14 设置包含的...
ElasticSearch修改索引字段
埃罗芒阿_ 的博客
01-15 672
文章目录一、业务场景二、解决方案1. 新建索引2.执行reindex操作，把旧索引的数据复制到新索引3.删除旧索引4.重命名新索引 一、业务场景 公司之前已经对 标签（tagNames） 进行了分词，现在要对该字段做一个精确匹配。 { "properties": { "tagNames": { "type": "text", "analyzer": "ik_max_word", "search_analyzer
Elasticsearch修改索引字段
sgzsgzsgz的博客
09-18 488
1：首先需要知道的是，因为Elasticsearch底层使用了lucene的原因，不支持对mapping的修改（即字段修改），所以我们想修改mapping，可以通过索引重建的方式 2：该方式是在kibana上的Dev Tools编写lucene语言重建索引 3：假设我现在有如下的索引，但是需要把tag改为nodeId，去掉@version，让timestamp类型改为date且设置为@timestamp的值，还要多一个uuid的字段 { "mapping": { "_doc": {
7.3-elasticsearch索引字段类型详情
红笺小字
05-29 2077
ES字段基础类型详情,binary、date、join、keyword、numeric、range、text、token count
ElasticSearch第八讲 ES索引字段映射类型以及动态映射相关操作
程序员路同学
09-04 1389
ElasticSearch第八讲 ES索引字段映射类型以及动态映射相关操作
Elasticsearch 修改字段类型，索引映射关系，模板属性 Java实现
Darling_Jiang的博客
12-27 1580
es修改字段类型，创建索引、模板
ES修改字段的数据类型
laozaoxiaowanzi的博客
09-18 2482
查看mapping或者在选择字段的时候可以看到字段keyword的数据类型是。无法使用sort进行排序，现需要改成。因此，做以下修改就可以查出来了。将旧索引的数据导入新索引。查询可以看到数据导入成功。
ES 索引mapping之keyword；term查询添加keyword查询；更改mapping keyword类型
weixin_42357472的博客
06-24 6140
参考：https://blog.csdn.net/winterking3/article/details/108254346 https://blog.csdn.net/tclzsn7456/article/details/79956625默认mapping结构一般是： 如果不设置mapping，ES默认把字符串设为text类型，并包含一个keyword子类型。 ***这种结构保存字段会存两份索引(个人理解)，首先第一个type text这个会进行分词保存，再后面fields keyword会进行保存完整
es如何修改es索引字段类型 reindex
yuec1998的博客
09-03 5574
今天因为上线之前，忘记提单先把es的索引新增的几个字段先建好，导致需求上线后，一些触发es推送数据的接口，使得es自动根据数据类型创建索引机制生效，原本我打算增加的mapping字段是数组keyword类型的，但是es自动匹配创建类型为long，导致索引作废，可是这个es索引24小时都有人在使用，如果粗暴删除重建索引，再全量同步数据，会导致一段时间国内外用户查询数据受影响，这个操作估计也会上传比较严重的故障等级，那有什么解决方法吗？–当然 如果你们系统没有使用es别名，那么暂时先按以下方式处理，后面提出了后
elasticsearch7.5.1修改字段的数据类型
liaomingwu的专栏
03-02 1676
elasticsearch7.5.1修改字段的数据类型
Elasticsearch:更改索引中字段的数据类型的方法
智者千虑，必有一失；愚者千虑，必有一得。
08-23 2892
需要将已有索引中的已有字段作为新的查询条件，需求中需要对该字段进行范围查询，当前字段为keyword类型的数字，此时发现查询所得结果与预期不符合。
ES修改文档的字段数据类型
weixin_42411512的博客
04-27 2725
reindex的方式 步骤为: 首先使用get的方式获取原始的索引的mapping 和setting 新建一个index，修改获取的原始mapping的字段类型 put index_name { "mapping":{}, "setting":{} } 3. reindex将原始索引的数据写到新建的索引里面去 post _reindex { "source": { "index": "old_index" }, "dest": { "index":
kibana中ES修改某个字段类型问题
吾林木木的专栏
06-03 1557
近日，发现同步数据到es的时候，有个新建的索引动态适配了mapping，而往往这种会有字段类型不是我们想要的，比如我这就有个tid字段，此字段要在聚合操作中使用，而此时的tid被识别成text类型了，而text不支持聚合，所以要更改字段类型为long或者keyword，注意es 不支持直接更改类型，所以就按以下麻烦的方法处理了下，解决问题。如果删除原索引，不在重新建一下testnameold，而直接执行_reindex，那么原索引的mapping还是原来错误的，这个是我这边遇到的坑。就可以删除工具人索引。
elasticsearch中怎么重新修改索引中字段的类型
04-20
您可以使用Elasticsearch的reindex API来重新索引您的数据。其中涉及到修改字段的类型，您需要使用mapping参数来重新定义索引的映射，即定义您的新字段类型。具体步骤如下： 1. 创建一个新的空索引： POST /new_index 2. 定义索引的映射： PUT /new_index/_mapping { "properties": { "your_field_name": { "type": "your_new_field_type" } } } 3. 使用reindex API将旧索引的数据复制到新索引中： POST _reindex { "source": { "index": "old_index" }, "dest": { "index": "new_index" } } 请注意，此操作可能需要一定的时间，具体取决于您的索引大小和集群负载。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值