ElasticSearch 5.5.0学习笔记（一）

已于 2022-03-11 09:53:14 修改
阅读量260 收藏
点赞数
分类专栏： elasticSearch 文章标签： elasticsearch 数据库
于 2021-09-13 19:56:19 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_40675243/article/details/120274117
版权

ElasticSearch 5.5.0学习笔记（一）

1. ES中的基本概念

1.1 接近实体

  • ElasticSearch是一个接近实体的搜索平台，意味着，从索引一个文档直到这个文档能够被搜索到有一个轻微的延迟（通常是1秒内）

1.2 索引（index）

  • 一个索引就是一个拥有几分相似特征的文档集合。一个索引由一个名字来标识，并且当我们要对这个索引中的文档进行索引、搜索、更新和删除的时候，都要使用到这个名字。索引类似于关系型数据库中的Database概念

1.3 类型（type)

  • 在一个索引中，你可以定义一个或多个类型。类型类似于关系型数据库中的表的概念。具有一组共同的字段。
  • 在5版本以前可以在一个索引中定义多个类型，在6版本中也可以使用，在7、8版本中一个索引对应一个类型

1.4 映射（mapping）

  • 映射实际上就是定义的类型中的各个字段，对应关系型数据库中表中的字段类型

1.5 文档（document）

  • 一个文档就是一个可以被索引的基础信息单元，类似表中的一条记录。

2. Kibana索引操作

2.1 创建索引

  • PUT user//创建名为 user 的索引

  • 返回结果：
{
  "acknowledged": true,
  "shards_acknowledged": true
}

2.2 查看所有索引

  • GET _cat/indices?v// 参数v 显示返回的列的表头

  • 返回结果：
health status index   uuid                   pri rep docs.count docs.deleted store.size pri.store.size
yellow open   .kibana E18fY25GSFKZx7MAMKNF8g   1   1          1            0      3.2kb          3.2kb
yellow open   user    xclxPHyWRbGXXWbXdBbIpw   5   1          0            0       810b           810b

2.3 删除索引

  • DELETE user//删除名为 user 的索引

  • 返回结果：
{
  "acknowledged": true
}

  • DELETE /*//删除索引索引

3. Kibana类型操作

3.1 创建类型

  • PUT /user
{
  "mappings": {
    "customer":{
      "properties": {
        "id":{
          "type": "keyword"
        },
        "name":{
         "type": "text"  
        },
        "age":{
        "type": "integer"  
        },
        "bir":{
        "type": "date"  
        }
      }
    }
  }
}

  • mappings: 关键词，表示 类型映射

  • customer： 你要添加的 类型的名称

  • properties：关键词，表示映射字段

  • id、name、age、bir：你要添加的字段名称

  • type：字段类型

    • 常用的有：text、keyword、date、integer、long、double、boolean or ip
  • 返回结果：
{
  "acknowledged": true,
  "shards_acknowledged": true
}

3.2 查看创建的索引及类型映射

  • GET user//查看索引

  • 返回结果：
{
  "user": {
    "aliases": {},
    "mappings": {
      "customer": {
        "properties": {
          "age": {
            "type": "integer"
          },
          "bir": {
            "type": "date"
          },
          "id": {
            "type": "keyword"
          },
          "name": {
            "type": "text"
          }
        }
      }
    },
    "settings": {
      "index": {
        "creation_date": "1631518834326",
        "number_of_shards": "5",
        "number_of_replicas": "1",
        "uuid": "SVkUCauvRyON-KZYs6XIQw",
        "version": {
          "created": "5050099"
        },
        "provided_name": "user"
      }
    }
  }
}

  • GET user/_mapping//只查看其类型映射

  • 返回结果：
{
  "user": {
    "mappings": {
      "customer": {
        "properties": {
          "age": {
            "type": "integer"
          },
          "bir": {
            "type": "date"
          },
          "id": {
            "type": "keyword"
          },
          "name": {
            "type": "text"
          }
        }
      }
    }
  }
}

4. Kibana文档操作

4.1 插入文档

  • # PUT /索引/类型/_id
PUT /user/customer/1
{
  "id":1,
  "name":"hjx",
  "age":24,
  "bir":"2021-09-10"
}

  • 返回结果：
{
  "_index": "user",
  "_type": "customer",
  "_id": "1",
  "_version": 1,
  "result": "created",
  "_shards": {
    "total": 2,
    "successful": 1,
    "failed": 0
  },
  "created": true
}

  • # 自动生成id
POST /user/customer
{
  "name":"zs",
  "age":20,
  "bir":"2021-08-10"
}

  • 返回结果：
{
  "_index": "user",
  "_type": "customer",
  "_id": "AXveKbYSN3SMJmlGOrdz",
  "_version": 1,
  "result": "created",
  "_shards": {
    "total": 2,
    "successful": 1,
    "failed": 0
  },
  "created": true
}

4.2 查询文档

  • GET /user/customer/1 //获取user索引中customer类型中_id为1的文档

  • 返回结果：
{
  "_index": "user",
  "_type": "customer",
  "_id": "1",
  "_version": 1,
  "found": true,
  "_source": {
    "id": 1,
    "name": "hjx",
    "age": 24,
    "bir": "2021-09-10"
  }
}

4.3 删除文档

  • DELETE /user/customer/1 //删除user索引中customer类型中_id为1的文档

  • 返回结果：
{
  "found": true,
  "_index": "user",
  "_type": "customer",
  "_id": "1",
  "_version": 2,
  "result": "deleted",
  "_shards": {
    "total": 2,
    "successful": 1,
    "failed": 0
  }
}

4.4 更新文档

  • POST /user/customer/1/_update
{
  "doc": {
    "name":"ls"
  }
}
doc:关键词，表示文档
更新操作会将数据先查询出来，再根据{}中的映射和值进行相应的更新
如果添加的映射是原先没有的映射，es会自动创建相应的映射

  • 返回结果：
{
  "_index": "user",
  "_type": "customer",
  "_id": "1",
  "_version": 2,
  "result": "noop",
  "_shards": {
    "total": 0,
    "successful": 0,
    "failed": 0
  }
}

4.5 批量操作

  • _bulk

    • PUT /user/customer/_bulk
{"index":{"_id":"5"}}
  {"name":"小明","age":23,"bir":"2011-11-11"}
{"delete":{"_id":"4"}}
{"update":{"_id":"1"}}
  {"doc":{"name":"hjx"}}

    • 返回结果：
{
  "took": 14,
  "errors": false,
  "items": [
    {
      "index": {
        "_index": "user",
        "_type": "customer",
        "_id": "5",
        "_version": 1,
        "result": "created",
        "_shards": {
          "total": 2,
          "successful": 1,
          "failed": 0
        },
        "created": true,
        "status": 201
      }
    },
    {
      "delete": {
        "found": false,
        "_index": "user",
        "_type": "customer",
        "_id": "4",
        "_version": 1,
        "result": "not_found",
        "_shards": {
          "total": 2,
          "successful": 1,
          "failed": 0
        },
        "status": 404
      }
    },
    {
      "update": {
        "_index": "user",
        "_type": "customer",
        "_id": "1",
        "_version": 3,
        "result": "updated",
        "_shards": {
          "total": 2,
          "successful": 1,
          "failed": 0
        },
        "status": 200
      }
    }
  ]
}

    • 上面的代码分别执行了三条指令，插入一条文档、删除一条文档和更新一条文档。

    • 返回结果有三条结果，说明不是原子操作，每条语句互不影响

5 检索

5.1 QueryString查询

  • 通过URL参数的形式进行搜索

  • GET /user/customer/_search?q=*&sort=age:desc&size=2&from=0&_source=name

  • q

    • q表示查询，*匹配所有

  • sort

    • 按照age排序，desc：倒序

  • size

    • 一页数量

  • from

    • 起始页

  • _source

    • 选择返回的结果包含哪些映射，不写默认返回全部的映射

5.2 QueryDSL查询

  • 基于传递JSON作为请求体格式与ES进行交互

  • 查询所有

    • GET /user/customer/_search
{
  "query": {
    "match_all": {}
  }
}

返回结果：
{
  "took": 0,
  "timed_out": false,
  "_shards": {
    "total": 5,
    "successful": 5,
    "failed": 0
  },
  "hits": {
    "total": 3,
    "max_score": 1,
    "hits": [
      {
        "_index": "user",
        "_type": "customer",
        "_id": "5",
        "_score": 1,
        "_source": {
          "name": "小明",
          "age": 23,
          "bir": "2011-11-11"
        }
      },
      {
        "_index": "user",
        "_type": "customer",
        "_id": "AXveKbYSN3SMJmlGOrdz",
        "_score": 1,
        "_source": {
          "name": "zs",
          "age": 20,
          "bir": "2021-08-10"
        }
      },
      {
        "_index": "user",
        "_type": "customer",
        "_id": "1",
        "_score": 1,
        "_source": {
          "id": 1,
          "name": "hjx",
          "age": 24,
          "bir": "2021-09-10"
        }
      }
    ]
  }
}

  • 查询索引并排序

    • GET user/customer/_search
{
  "query": {
    "match_all": {}
  },
  "sort": [
    {
      "age": {
        "order": "desc"
      }
    }
  ]
}
注意的是，如果字段是text类型的话，是不支持排序的
    
返回结果：
{
  "took": 1,
  "timed_out": false,
  "_shards": {
    "total": 5,
    "successful": 5,
    "failed": 0
  },
  "hits": {
    "total": 3,
    "max_score": null,
    "hits": [
      {
        "_index": "user",
        "_type": "customer",
        "_id": "1",
        "_score": null,
        "_source": {
          "id": 1,
          "name": "hjx",
          "age": 24,
          "bir": "2021-09-10"
        },
        "sort": [
          24
        ]
      },
      {
        "_index": "user",
        "_type": "customer",
        "_id": "5",
        "_score": null,
        "_source": {
          "name": "小明",
          "age": 23,
          "bir": "2011-11-11"
        },
        "sort": [
          23
        ]
      },
      {
        "_index": "user",
        "_type": "customer",
        "_id": "AXveKbYSN3SMJmlGOrdz",
        "_score": null,
        "_source": {
          "name": "zs",
          "age": 20,
          "bir": "2021-08-10"
        },
        "sort": [
          20
        ]
      }
    ]
  }
}

  • 查询所有并分页

    • GET /user/customer/_search
{
  "query": {
    "match_all": {}
  },
  "size": 2,
  "from": 0
}

返回结果：
{
  "took": 0,
  "timed_out": false,
  "_shards": {
    "total": 5,
    "successful": 5,
    "failed": 0
  },
  "hits": {
    "total": 3,
    "max_score": 1,
    "hits": [
      {
        "_index": "user",
        "_type": "customer",
        "_id": "5",
        "_score": 1,
        "_source": {
          "name": "小明",
          "age": 23,
          "bir": "2011-11-11"
        }
      },
      {
        "_index": "user",
        "_type": "customer",
        "_id": "AXveKbYSN3SMJmlGOrdz",
        "_score": 1,
        "_source": {
          "name": "zs",
          "age": 20,
          "bir": "2021-08-10"
        }
      }
    ]
  }
}

  • 查询所有并返回指定的映射

    • GET /user/customer/_search
{
  "query": {
    "match_all": {}
  },
  "_source": ["name","age"]
}

返回结果：
{
  "took": 1,
  "timed_out": false,
  "_shards": {
    "total": 5,
    "successful": 5,
    "failed": 0
  },
  "hits": {
    "total": 3,
    "max_score": 1,
    "hits": [
      {
        "_index": "user",
        "_type": "customer",
        "_id": "5",
        "_score": 1,
        "_source": {
          "name": "小明",
          "age": 23
        }
      },
      {
        "_index": "user",
        "_type": "customer",
        "_id": "AXveKbYSN3SMJmlGOrdz",
        "_score": 1,
        "_source": {
          "name": "zs",
          "age": 20
        }
      },
      {
        "_index": "user",
        "_type": "customer",
        "_id": "1",
        "_score": 1,
        "_source": {
          "name": "hjx",
          "age": 24
        }
      }
    ]
  }
}

  • term查询

    • GET /user/customer/_search
{
  "query": {
    "term": {
      "name": {
        "value": "hjx"
      }
    }
  }
}

term 精确查找
name：所要查询的字段
hjx：所要查询字段的值
    
返回结果：
{
  "took": 4,
  "timed_out": false,
  "_shards": {
    "total": 5,
    "successful": 5,
    "failed": 0
  },
  "hits": {
    "total": 1,
    "max_score": 0.2876821,
    "hits": [
      {
        "_index": "user",
        "_type": "customer",
        "_id": "1",
        "_score": 0.2876821,
        "_source": {
          "id": 1,
          "name": "hjx",
          "age": 24,
          "bir": "2021-09-10"
        }
      }
    ]
  }
}
萝卜7
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ES5.5.0查询不稳定情况分析及解决方案
yml_try的博客
09-18 863
问题描述 根据关键字查询数据时，前一次能查到，再次查询时可能查不到（出现在数据刚写入情形下） 使用通用查询接口时，查询条数不稳定（出现在数据刚写入情形下） 总结：数据消费写入到ES后，经过一个刷新周期（大量数据时一般为30s或60s），数据被批量处理生成segment及其索引前缀，对外可以被查询到，但此时查询会出现查询不稳定情况，一般不超过1分钟就可以稳定下来。 原因分析 elasticsearch的索引分片有主分片和副本两种属性，副本的功能为故障转移及负载均衡。 故障转移：主分片所在主机或节点出现故障
ElasticSearch 5.5.0学习笔记（三）-ElasticSearch API
萝卜_7
09-15 222
ElasticSearch 5.5.0学习笔记（三）-ElasticSearch API 1. 依赖引入 <dependencies> <!-- https://mvnrepository.com/artifact/com.alibaba/fastjson --> <dependency> <groupId>com.alibaba</groupId> <artifactId>fast
Elasticsearch5.5冷热数据读写分离
划水的银开的博客
11-29 1296
本文转载于：https://elasticsearch.cn/article/6127，请支持原文作者 Elasticsearch5.5冷热数据读写分离 前言 冷数据索引：查询频率低，基本无写入，一般为当天或最近2天以前的数据索引 热数据索引：查询频率高，写入压力大，一般为当天数据索引 当前系统日志每日写入量约为6T左右，日志数据供全线业务系统查询使用。 查询问题： 高峰时段写入及查询频率都较...
Elasticsearch 5.4 Mapping详解
热门推荐
1.02^365=1377.41
06-12 3万+
前言 一Field datatype字段数据类型 1string类型 2 text类型 3 keyword类型 4 数字类型 5 Object类型 6 date类型 7 Array类型 8 binary类型 9 ip类型 10 range类型 11 nested类型 12token_count类型 13 geo point 类型 二Meta-Fields元数据 1 _all 2 _field_nam
elasticsearch5.5.0基础场景使用，以及大数据搜索及统计技能
hgg923的专栏
07-20 448
一、查看某个字段数据的分词结果 GET /${index}/${type}/${id}/_termvectors?fields=${fields_name} 二、
ElasticSearch5.5.0入门学习.zip
06-12
该项目基于elasticsearch5.5.0,是-某课网瓦力老师的视频-学习笔记
ElasticSearch 学习笔记
01-20
文章目录ElasticSearch 学习笔记基本概念倒排索引timeout 超时Query 与 filter 的区别query全文检索短语检索高亮检索分组检索平均值的检索区间检索批量查询查询排序查询缓存文档替换与删除ES路由查询路由分词Mapping...
ElasticSearch学习笔记
04-11
ElasticSearch学习笔记
spring mvc 集成elasticSearch 5.5.0版本
07-20
spring spingmvc 集成elasticSearch 5.5.x版本 ，基本的增删改查.完成
Elasticsearch入门学习笔记
06-28
Elasticsearch入门学习笔记，适用于未学过Elasticsearch的人群，其中有些内容也是参考官方文档。
logstash-5.5.0,更新ES5.5.0数据重复累计增加。
m0_62866284的博客
06-24 252
1
ElasticSearch5.5.0安装和搭建集群步骤和遇到的坑
qq_39141063的博客
09-19 1799
** ElasticSearch5.5.0安装和搭建集群步骤和遇到的坑 ** 部署环境：CentOS-6.9 JDK：jdk1.8.0_91（必须是1.8以上） 查看jdk版本:java -version 可以开始安装ES啦！！！ 一、首先去官网下载elasticsearch-5.5.0.tar.gz 二、把刚才下载的tar包上传到虚拟机或者服务器上解压（每一个节点都需要解压） 解压命令...
elasticsearch-5.5.0环境搭建（linux）
hgg923的专栏
07-10 4493
1、官网下载资源 elasticsearch-5.5.0.tar.gz kibana-5.5.0-linux-x86_64.tar.gz（暂时没用这个） 2、解压 #tar xzvf elasticsearch-5.5.0.tar.gz 3、用root创建用户《假设用户：xxx》（提醒：es5.x版本不能用root启动）详见此 创建用户: #useradd –d /usr/xxx
Linux下安装ElasticSearch5.5.0 搜索引擎 （实操成功）
蜀山小师叔
08-05 1527
1、下载elasticsearch-5.5.0.zip wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.5.0.zip 2、解压 unzip elasticsearch-5.5.0.zip 3、移动到固定的目录 mv /elasticsearch-5.5.0 /usr/software/e...
《ElasticSearch 5.5.0 +HBASE 集群搭建配置》持续更新。。
qq_37810016的博客
08-27 2337
一、简介 Elasticsearch是一个基于Apache Lucene(TM)的开源搜索引擎。无论在开源还是专有领域，Lucene可以被认为是迄今为止最先进、性能最好的、功能最全的搜索引擎库。 但是，Lucene只是一个库。想要使用它，你必须使用Java来作为开发语言并将其直接集成到你的应用中，更糟糕的是，Lucene非常复杂，你需要深入了解检索的相关知识来理解它是如何工作的。 Elast...
一、CentOS6.5安装ElasticSearch5.5完整纪录与问题总结
KimZing的博客
09-03 5637
前言：网上有很多相关方面的教程，但是却没有系统的体系，最近在学ElasticSearch，所以先整理一份，互相交流学习。 一、用户设置如果已经是普通用户登录可跳过此步骤。 ElasticSearch默认是不能使用root用户进行启动的，所以需要先添加一个普通用户，并使用普通用户身份安装ElasticSearch。 1.添加一个用户，无任何提示则表示成功添加。[root@localhost sof
安装elasticsearch5.5遇到的问题记录
风雨诗轩的博客
08-31 7209
第一个错误是：Exception in thread "main" ception: property [elasticsearch.version] is missing for plugin [head] 原因：elasticsearch5.5跟2.X区别还是很大的，2.X版本可以在命令行直接输入plugin  install  mobz/elasticsearch-head安装head插件
Elasticsearch5.5.2 安装教程
satiling的专栏
03-02 1万+
最近学习Elasticsearch，顺便记录下操作步骤，供日后参考 安装环境 CentOS release 6.6 1、因Elasticsearch是基于java写的，所以它的运行环境中需要java的支持，在Linux下执行命令：java -version，检查Jar包是否安装 安装java版本至少是1.8以上 2、首先准备下载Elasticsearch5.5.2 安装包 wge
elasticsearch-5.5 安装以及基础入门
伍六七的博客
07-11 1545
elasticsearch 说明：本文主要总结自链接[1]，此外安装参考链接[2][3][4] 。 概念 索引（index）   一个索引就是一个拥有几分相似特征的文档的集合。比如说，你可以有一个客户数据的索引，另一个产品目录的索引，还有一个订单数据的索引。一个索引由一个名字来标识（必须全部是小写字母的），并且当我们要对对应于这个索引中的文档进行索引、搜索、更新和删除的时候，都要使用到这个
elasticsearch 学习笔记
最新发布
08-19
elasticsearch 学习笔记包括以下内容: 一、Elasticsearch概述: - Elasticsearch是一种开源的分布式搜索和分析引擎，可以用于快速搜索、分析和存储大量的结构化和非结构化数据。 - Elasticsearch与Solr相比有一些...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值