Elasticsearch动态映射：自动化的数据结构适应

好奇的菜鸟

于 2024-08-20 00:15:00 发布

阅读量357

点赞数 5

分类专栏： Elasticsearch 文章标签： elasticsearch 自动化数据结构

本文链接：https://blog.csdn.net/qq_29752857/article/details/141330415

版权

Elasticsearch 专栏收录该内容

61 篇文章 0 订阅

订阅专栏

Elasticsearch（简称ES）是一个高度灵活的搜索引擎，它支持各种数据类型，并且能够根据数据内容自动识别和适应数据结构，这一特性被称为动态映射（Dynamic Mapping）。本文将介绍ES的动态映射机制，并结合实际案例进行说明。

动态映射简介

在传统的数据库系统中，数据结构（如表结构）需要事先定义好，而在Elasticsearch中，你可以在不定义映射的情况下直接写入数据。ES会根据数据内容自动识别数据类型，并创建相应的字段映射。这种机制大大简化了数据模型的定义过程，使得ES能够灵活地处理各种结构的数据。

动态映射的工作原理

当数据被写入ES索引时，ES会检查每个字段的数据类型。如果字段类型已经定义，ES会按照定义的类型处理数据；如果字段类型未定义，ES会使用动态映射机制来识别数据类型。动态映射的规则如下：

null：不添加任何字段。
true 或 false：识别为布尔类型字段。
浮点数：识别为浮点类型字段（float）。
整数：识别为长整型字段（long）。
对象：识别为对象类型字段。
数组：根据数组的第一个非空值来确定类型。
字符串：可能是日期（date）、浮点数（float）、长整型（long），或者是带有keyword的fields参数的文本（text）类型字段。

动态映射的示例

示例1：自动识别日期格式

假设我们有一个索引date-test2，我们希望它能够自动识别日期格式。

PUT date-test2
{
  "mappings": {
    "dynamic_date_formats": ["yyyy-MM-dd HH:mm:ss", "yyyy-MM-dd"]
  }
}

接着，我们向该索引添加两条数据，分别使用不同的日期格式：

PUT date-test2/_doc/1
{
  "create_date": "2015-09-02 00:00:00",
  "born": "2020-01-01"
}

当我们查询索引的映射时，可以看到ES自动识别了日期字段，并应用了相应的格式：

GET date-test2/_mapping

示例2：自动添加字段

如果我们向一个未定义映射的索引中添加数据，ES会自动为新字段创建映射。例如，我们向date-test索引添加以下数据：

PUT date-test/_doc/1
{
  "create_date": "2015/09/02 00:00:00"
}

查询映射时，我们可以看到create_date字段被自动识别为日期类型，并应用了混合日期格式：

GET date-test/_mapping

示例3：自定义动态模板

对于对象类型的索引，我们可以使用path_match和path_unmatch来指定字段路径的匹配规则，从而自定义动态映射的类型。例如，我们创建一个dynamic-obj索引，希望所有以name开头的字段都被映射为keyword类型：

PUT dynamic-obj
{
  "mappings": {
    "dynamic_templates": [
      {
        "full_name": {
          "path_match": "name.*",
          "path_unmatch": "*.middle",
          "mapping": {
            "type": "keyword"
          }
        }
      }
    ]
  }
}