elasticsearch(二)-字段属性设置

最新推荐文章于 2023-10-10 21:44:23 发布
最新推荐文章于 2023-10-10 21:44:23 发布
阅读量1k 收藏 1
点赞数
分类专栏： elasticsearch 文章标签： elasticsearch 搜索引擎 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_45731464/article/details/120379358
版权

文章目录

join

DELETE gp-join-001
PUT gp-join-001/
{
  "mappings": {
    "properties": {
      "parentName":{
        "type": "text"
      },
      "join_name":{
        "type": "join",
        "relations":{
          "father":"son"
        }
      }
      
    }
  }
}

GET gp-join-001/_search
GET gp-join-001

PUT gp-join-001/_doc/1?routing=1
{
  "parentName":"gp",
  "join_name":{
    "name":"father"
  }
}

PUT gp-join-001/_doc/2?routing=1
{
  "parentName":"gp-es",
  "join_name":{
    "name":"son",
    "parent":"1"
  }
}


GET gp-join-001/_search
{
  "query": {
    "parent_id":{
      "type":"son",
      "id":1
    }
  }
}

nested 嵌套

  • 解决键值对查询误差
  • 通过内置查询关联合并为一条数据
DELETE gp-nested-001
PUT gp-nested_001
{
  "mappings": {
    "properties": {
      "companyNane":{
        "type": "text"
      },
      "area":{
        "properties": {
          "pro":{
            "type":"keyword"
          },
          "city":{
            "type":"keyword"
          }
        }
      }
    }
  }
}

GET gp-nested_001

POST gp-nested_001/_doc
{
  "companyName":"gp-nested3",
  "area":[
    {
      "pro":"HN3",
      "city":"CS3"
    },
    {
      "pro":"HB",
      "city":"SJZ"
    },
    {
      "pro":"HN",
      "city":"ZZ"
    },
    {
      "pro":"NM",
      "city":"HHHT"
    }
    ]
  
}

GET gp-nested_001/_search

  • 条件搜索 must 相当于 and 整个数组满足查询条件即可
GET gp-nested_001/_search
{
  "query": {
    "bool": {
      "must": [
        {
          "term": {
            "area.pro": {
              "value": "HN2"
            }
          }
        },
        {
          "term": {
            "area.city": {
              "value": "ZZ"
            }
          }
        }
      ]
    }
  }
}

nested

DELETE gp-nested-002
PUT gp-nested_002
{
  "mappings": {
    "properties": {
      "companyNane":{
        "type": "text"
      },
      "area":{
        "type": "nested", 
        "properties": {
          "pro":{
            "type":"keyword"
          },
          "city":{
            "type":"keyword"
          }
        }
      }
    }
  }
}

GET gp-nested_002
GET gp-nested_002/_search


POST gp-nested_002/_doc
{
  "companyName":"gp-nested",
  "area":[
    {
      "pro":"HN",
      "city":"CS"
    },
    {
      "pro":"HB",
      "city":"SJZ"
    },
    {
      "pro":"HN",
      "city":"ZZ"
    },
    {
      "pro":"NM",
      "city":"HHHT"
    }
    ]
  
}
  • 条件搜索 必须严格一致 字段嵌套限制默认50 对象嵌套限制默认1w
  • 更新不友好 慎重使用
GET gp-nested_002/_search
{
  "query": {
    "nested": {
      "path": "area",
      "query": {
        "bool": {
          "must": [
            {
              "term": {
                "area.pro": {
                  "value": "HN2"
                }
              }
            },
            {
              "term": {
                "area.city": {
                  "value": "CS2"
                }
              }
            }
          ]
        }
      }
    }
  }
}

辅助字段类型应用

别名alias 只可查询 不可操作数据

DELETE gp_alias_name_001
PUT gp_alias_name_001
{
  "mappings": {
    "properties": {
      "company1":{
        "type": "text"
      },
      "companyName":{
        "type": "alias",
        "path":"company1"
      }
    }
  }
  
}

怎么更新数据

POST gp_alias_name_001/_doc
{
“company1”:“gp-es222”

}

GET gp_alias_name_001/_search

单值多字段 multi-fileds

DELETE gp_multi_fileds_001

POST gp_multi_fileds_001/_doc
{
  "company1":"gp-es222"
  
}

GET gp_multi_fileds_001
GET gp_multi_fileds_001/_search

copy_to 复制 合并


DELETE gp_copy_to_001
PUT gp_copy_to_001
{
  "mappings": {
    "properties": {
      "company1":{
        "type": "keyword",
        "copy_to": "allFileds"
      },
      "company2":{
        "type": "keyword",
        "copy_to": "allFileds"
      },
      "allFileds":{
        "type": "text"
      }
    }
  }
}

POST gp_copy_to_001/_doc
{
  "company1":"333",
  "company2":"222"
}

GET gp_copy_to_001/_search

GET gp_copy_to_001/_search
{
  "query": {
    "match": {
      "allFileds": "111"
    }
  }
}

数据字段属性

  • index 字段是否被搜索 默认true 不需要检索的字段设置成false 提升性能
DELETE gp-index-001

PUT gp-index-001
{
  
  "mappings": {
    "properties": {
      "indexName":{
        "type": "keyword",
        "index": false
      }
    }
  }
}

POST gp-index-001/_doc
{
  "indexName":"cc"
}

GET gp-index-001
GET gp-index-001/_search
{
  "query": {
    "term": {
      "indexName": {
        "value": "cc"
      }
    }
  }
}

store 是否存储

  • es默认原始数据存储在_source里，其实也可以在Lucene里存储一份，通过此关键字控制，不宜过多 默认false
  • 应用场景: 原始数据_source被禁用，也需要修改原始数据
DELETE gp-store-001

PUT gp-store-001
{
  
  "mappings": {
    "_source": {
      "enabled": false
    }, 
    "properties": {
      "storeName":{
        "type": "keyword",
        "store": true
      }
    }
  }
}

POST gp-store-001/_doc
{
  "storeName":"cc"
}

GET gp-store-001
GET gp-store-001/_search
GET gp-store-001/_search
{
  "query": {
    "term": {
      "storeName": {
        "value": "cc"
      }
    }
  }
}

GET gp-store-001/_search
{
  "stored_fields": ["storeName"]
}

enabled 是否启用 ??? 注意是 索引 还是字段

DELETE gp-enabled-001

PUT gp-enabled-001
{
  "mappings": {
    "_source": {
      "enabled": true
    },
    "properties": {
      "enabledName": {
        "type": "object",
        "enabled": "true"
      }
    }
  }
}

POST gp-enabled-001/_doc
{
  "enabledName": {
    "pro": "HB",
    "city": "CZ",
    "count": "HJ"
  }
}

GET gp-enabled-001
GET gp-enabled-001/_search
GET gp-enabled-001/_search
{
  "query": {
    "term": {
      "enabledName.city": {
        "value": "CZ"
      }
    }
  }
}

doc_value 能否聚合排序

  • doc_value 列式数据存储（聚合能力好） es 默认存储两份数据，一份原始数据，一份列式数据 默认true 但是text类型默认不打开 避免分词的字段做排序

  • 应用领域 基于该字段做聚合分析 基于该字段做排序


DELETE gp_doc_value_001

PUT gp_doc_value_001
{
  "mappings": {
    "_source": {
      "enabled": true
    },
    "properties": {
      "docValueName": {
        "type": "keyword",
        "doc_values": true
      },"docValueAge": {
        "type": "keyword",
        "doc_values": false
      }
    }
  }
}

POST gp_doc_value_001/_doc
{
  "docValueName": "gp21",
  "docValueAge":"333"
  
}

GET gp_doc_value_001
GET gp_doc_value_001/_search
GET gp_doc_value_001/_search
{
  "sort": [
    {
      "docValueName": {
        "order": "desc"
      }
    }
  ]
}

null_value 空值设置

  • 填充值为null时，填充默认值 怪怪的
DELETE gp_null_value_001

PUT gp_null_value_001
{
  "mappings": {
    "_source": {
      "enabled": true
    },
    "properties": {
      "docValueName": {
        "type": "keyword",
        "doc_values": true,
        "null_value": "default"
      },"docValueAge": {
        "type": "keyword",
        "doc_values": true
      }
    }
  }
}

POST gp_null_value_001/_doc
{
  "docValueName": "gp21",
  "docValueAge":"111"
  
}
POST gp_null_value_001/_doc
{
  "docValueName":null,
  "docValueAge":"222"
  
}
POST gp_null_value_001/_doc
{
  "docValueAge":"333"
  
}

GET gp_null_value_001
GET gp_null_value_001/_search
GET gp_null_value_001/_search
{
  "sort": [
    {
      "docValueName": {
        "order": "desc"
      }
    }
  ]
}

properties 子对象控制

  • 如果enabledName中有子对象但是属性不确定 可以使用object
PUT gp-enabled-001
{
  "mappings": {
    "_source": {
      "enabled": true
    },
    "properties": {
      "enabledName": {
        "type": "object",
        "enabled": "true"
      }
    }
  }
}

如果enabledName中有子对象如果属性确定 需要使用properties对应

PUT gp-enabled-001
{
  "mappings": {
    "_source": {
      "enabled": true
    },
    "properties": {
      "enabledName": {
        "properties": {
          "firstName":{
            "type":"keyword"
          },
          "lastName":{
            "type":"keyword"
          }
        }
      }
    }
  }
}

dynamic 子对象动态扩展

  • 是否容许对象下面的属性自由扩展

ignore_above

  • keyword 类型小 字符过长 检索意义不大 索引会被禁用 数据不可被检索 超过设定长度 索引被禁用 默认长度255 最大65535

DELETE gp_ignore_above_001

PUT gp_ignore_above_001
{
  "mappings": {
    "_source": {
      "enabled": true
    },
    "properties": {
      "docValueName": {
        "type": "keyword",
        "doc_values": true,
        "ignore_above": 12
      },"docValueAge": {
        "type": "keyword",
        "doc_values": true
      }
    }
  }
}

POST gp_ignore_above_001/_doc
{
  "docValueName": "gp211233",
  "docValueAge":"333"
  
}

GET gp_ignore_above_001
GET gp_ignore_above_001/_search
GET gp_ignore_above_001/_search
{
  "sort": [
    {
      "docValueName": {
        "order": "desc"
      }
    }
  ]
}

fields 多字段

coerce 数值类型强制约束

  • 默认 false integer 只可存储integer数据

  • 数据类数据并非一直符合标准，有的会带一些格式之类的


DELETE gp_coerce_001

PUT gp_coerce_001
{
  "mappings": {
    "_source": {
      "enabled": true
    },
    "properties": {
      "docValueName": {
        "type": "keyword",
        "doc_values": true,
        "ignore_above": 12
      },"docValueAge": {
        "type": "keyword",
        "doc_values": true
      },"income":{
        "type": "integer",
        "coerce": false
      }
    }
  }
}

POST gp_coerce_001/_doc
{
  "docValueName": "gp211233",
  "docValueAge":"333",
  "income":100
  
}

POST gp_coerce_001/_doc
{
  "docValueName": "gp211233",
  "docValueAge":"333",
  "income":100.12456
  
}

GET gp_coerce_001
GET gp_coerce_001/_search
GET gp_coerce_001/_search
{
  "sort": [
    {
      "docValueName": {
        "order": "desc"
      }
    }
  ]
}

format

  • 设置成支持两种

DELETE gp_format_001

PUT gp_format_001
{
  "mappings": {
    "_source": {
      "enabled": true
    },
    "properties": {
     "createDate":{
        "type": "date", 
        "format": "epoch_millis||basic_date_time"
      }
    }
  }
}

POST gp_format_001/_doc
{
  "createDate": "04/09/2020"
  
}
GET gp_format_001
GET gp_format_001/_search

高级数据字段

analyzer 分词器 指定分词器

similarity 分词关联算法 BM25 TF/IDF Bool

boots 加权 分词加权

norms 分词规范化

normalizer 规整器 keyword 类型 统一大小写处理

fielddata 字段数据

DELETE gp_fielddata_002
PUT gp_fielddata_002
{
  "mappings": {
    "properties": {
      "companyNane":{
        "type": "text"
      },
      "area":{
        "type": "nested", 
        "properties": {
          "pro":{
            "type":"text",
            "fielddata":true
          },
          "city":{
            "type":"keyword"
          }
        }
      }
    }
  }
}

POST gp_fielddata_002/_doc
{
  "companyNane":"gp",
  "area":{
    "pro":"HB",
    "city":"HJ"
  }
}

POST gp_fielddata_002/_doc
{
  "companyNane":"gp1",
  "area":{
    "pro":"HB1",
    "city":"HJ1"
  }
}
POST gp_fielddata_002/_doc
{
  "companyNane":"gp2",
  "area":{
    "pro":"HB2",
    "city":"HJ2"
  }
}


GET gp_fielddata_002 
GET gp_fielddata_002/_search
{
  "sort": [
    {
      "area.pro": {
        "order": "desc"
      }
    }
  ]
}

全局序号

eager_global_ordinals 类似自增id 方便 统计 排序

  • 索引字段与属性都属于静态设置，若后期变更历史数据需要重建索引才能生效
早餐加个蛋
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
elasticsearch中mappings字段的相关设置(索引运维)
white_while的博客
01-27 3015
es mappings解析
Elasticsearch入门必备——ES中的字段类型以及常用属性
hellojoy的博客
07-06 1884
https://www.cnblogs.com/xing901022/p/5471419.html 字段中的索引和存储 其中需要说明的是： index定义字段的分析类型以及检索方式 如果是no，则无法通过检索查询到该字段； 如果设置为not_analyzed则会将整个字段存储为关键词，常用于汉字短语、邮箱等复杂的字符串； 如果设置为analyzed则将会通过默认的standard分析器进行分析，详细的分析规则参考这里 索引index ，这个参数可以控制字段应该怎样建索引，怎样查询。它有以下.
新栋BOOK教你学elasticsearch（二）-字段属性
weixin_34112030的博客
12-27 75
2019独角兽企业重金招聘Python工程师标准>>> ...
elasticsearch-mapping字段重要属性
别抢我蓝buff
03-19 550
1、index定义字段的分析类型以及检索方式，控制字段值是否被索引.他可以设置成 true 或者 false。没有被索引的字段将无法搜索     如果是no，则无法通过检索查询到该字段；     如果设置为not_analyzed则会将整个字段存储为关键词，常用于汉字短语、邮箱等复杂的字符串； ...
elasticsearch-7.4.2-linux-x86_64.tar.gz
06-30
在Linux环境下，可以直接运行`./elasticsearch`命令来启动服务，但在此之前，为了确保服务稳定运行，还需要进行一些必要的环境配置，比如设置合适的堆内存大小（可以通过`ES_JAVA_OPTS`环境变量指定）。 `config`...
最新版windows elasticsearch-analysis-ik-7.13.3.zip
07-20
在使用IK插件进行中文分析时，我们需要配置Elasticsearch的索引映射（Mapping），定义字段的分词器类型。例如，为某个字段指定"analyzer":"ik_max_word"或"analyzer":"ik_smart"，其中ik_max_word适合全文检索，ik_...
elasticsearch-7.8.1+elasticsearch-head
03-01
4. 索引与映射：在Elasticsearch中，索引是数据的容器，映射定义了字段的类型和属性。7.8.1版本可能对映射配置进行了优化，支持更多字段类型和动态模板，使得数据结构更加灵活。 5. 查询与分析：Elasticsearch支持...
elasticsearch-java-demo
12-01
在 Spring Boot 的配置文件（application.properties 或 application.yml）中，设置 Elasticsearch 的连接信息，如节点地址、端口等。 **Elasticsearch-Java-Demo** "elasticsearch-java-demo"这个项目很可能是...
最新版windows elasticsearch-8.1.2-windows-x86_64.zip
04-02
11. **性能调优**：为了优化Elasticsearch的性能，用户需要关注硬件配置（如足够的内存、SSD存储）、索引设置（如分词器、刷新间隔）、数据建模策略（如字段类型选择、映射配置）以及网络架构（如网络带宽和延迟）。...
六、ElasticSearch——映射详解（映射、字段类型、字段属性、多重字段、元字段、动态映射）
m0_38143867的博客
07-25 5241
Mapping 映射是什么 映射定义索引中有什么字段、字段的类型等结构信息。相当于数据库中表结构定义，或 solr中的schema。因为lucene索引文档时需要知道该如何来索引存储文档的字段。 ES中支持手动定义映射，动态映射两种方式。 Create Index with mapping 映射类别 Mapping type 废除说明 ES最先的设计是用索引类比关系型数据库的数据库，用mapp...
如何修改Elasticsearch索引字段类型？
weixin_43100952的博客
03-21 7169
前言 由于团队中的小伙伴，将ElasticSearch的keyword类型字段创建为Text类型，导致其他小伙伴通过match或term查询怎么查也查到，所以需要去修改Elasticsearch索引字段类类型；但是ElasticSearch没有像mysql一样可以直接修改字段数据类型的方法； 一、修改思想如下 1、创建中间索引:data_index_temp， 2、备份数据到中间索引:data_index_temp 3、删除原索引: data_index， 4、重新创建正确数据类型索引：data_index
Elasticsearch：如何修改 nested 字段的值
Elastic 中国社区官方博客
02-15 1822
Nested 类型是数据类型的特殊版本，它允许对象数组以一种可以彼此独立查询的方式进行索引。在内部，嵌套对象将数组中的每个对象索引为单独的隐藏文档，这意味着每个嵌套对象都可以使用独立于其他对象进行查询。每个 nested 对象都被索引为一个单独的 Lucene 文档。有关更多关于 nested 数据类型的文档，我们可以参考之前的文章 “在使用 Elasticsearch 时，为了系统的效率，我们并不建议经常修改文档，但是在有些时候，我们还必须对已经索引过的文档进行修改。
elasticsearch修改字段类型
大数据技术派
07-14 1677
1、原索引 2、创建新索引 3、同步数据 4、删除原索引 5、设置别名 欢迎访问我的个人博客，听听我的故事。
elasticsearch 中关键属性 / 字段 / 基本语法 等说明 ----------持续补充
Sunny__wei的博客
02-15 1849
前提说明：本文基于elasticsearch 6.4.2 所写，可能个版本间会有细微差别 文档、索引、类型 属性 说明 文档 （document） 所要存储的数据信息，比如：存储员工数据， 一个员工数据 即可代表一个文档 索引（index） 文档存储到 Elasticsearch 的行为叫做 索引；一个 索引 类似于传统关系数据库中的一个 数据库 ，是一个存储关系型文档的地方；一个elasticsearch 中可以包含多个索引 类型（type） 指定存储文档的具体类型，可以理解为关系
ES&Elasticsearch-header--菜鸟教程03字段类型和属性
一生懸命頑張ってましょう
04-28 1007
一 基本数据类型 1.text：被全文搜索的字符串，字段内容会被分析，在生成倒排索引之前，字符串会分析器分成词项。该类型不用于排序，很少用于聚合。 2.keyword：用于索引结构化的字段，例如：邮件地址、主机名、状态码和标签。不分词，只能精确搜索，用于过滤、排序、聚合。 3.数值类型 long、integer、short、byte、double、float、half_float、s...
ElasticSearch系列 - SpringBoot整合ES：映射中定义字段的数据类型及属性
你今天真好看呀
03-28 2373
在Elasticsearch中，搜索结果的准确性和召回率是非常重要的指标，它们反映了搜索引擎的性能和效果。以下是这两个指标的定义和解释：准确性：搜索结果的准确性是指搜索引擎返回的结果中有多少是与查询字符串相关的。如果搜索结果中包含大量与查询字符串无关的文档，那么搜索引擎的准确性就会降低。召回率：搜索结果的召回率是指搜索引擎返回的结果中有多少是与查询字符串相关的文档的比例。如果搜索引擎无法找到与查询字符串相关的文档，那么搜索引擎的召回率就会降低。在Elasticsearch中，每个字段都有一个数据类型，用于指
ElasticSearch
热门推荐
会写Bug的攻城狮
02-11 6万+
ElasticSearch 一、字段的类型Field type的详解 下面就是所有的字段类型 字符串类型 text,keyword 整数类型 integer,long,short,byte 浮点类型 double,float,half_float,scaled_float 逻辑类型 boolean 日期类型 date 范围类型 range 二进制类型 binary 复合类型 数组类型 array 对象类型 object 嵌套类型 nested 地理类型 地理坐标类型 geo_point 地理地图 geo_s
Elasticsearch基础篇(四)：Elasticsearch的基础介绍与索引设置
最新发布
后端开发
10-10 1609
这里说到的全文搜索引擎指的是目前广泛应用的主流搜索引擎。它的工作原理是计算机索引程序通过扫描文章中的每一个词，对每一个词建立一个索引，指明该词在文章中出现的次数和位置，当用户查询时，检索程序就根据事先建立的索引进行查找，并将查找的结果反馈给用户的检索方式。这个过程类似于通过字典中的检索字表查字的过程。全文检索的应用场景检索的数据对应是大量的非结构化的文本型数据文件的记录量至少是十万以上级别支持交互式文本的全文检索查询对于检索结果的相关性具有较高的要求，且检索的实时性要求很高。
ElasticSearch字段属性说明官方文档
05-18
Elasticsearch是一个分布式搜索和分析引擎，是一个开源的、RESTful的全文搜索引擎。...总之，Elasticsearch提供了丰富的字段属性设置，可以根据不同的需求来灵活定义字段属性，从而实现更高效的搜索和分析。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值