ElasticSearch 基本使用

最新推荐文章于 2024-03-17 22:28:08 发布
最新推荐文章于 2024-03-17 22:28:08 发布
阅读量1.4k 收藏 4
点赞数 3
分类专栏： ElasticSearch 文章标签： elasticsearch 全文检索 搜索引擎
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43296313/article/details/130017532
版权

文章目录

ElasticSearch 基本使用

系统环境

ElasticSearch：elasticsearch:7.14.1

kibana:7.14.1

服务器：Ubuntu 16.04.6 LTS

一、简介

Elasticsearch 是一个分布式的、开源的搜索分析引擎，支持各种数据类型，包括文本、数字、地理、结构化、非结构化

Elastic Search基于lucene，封装了许多lucene底层功能，提供了分布式的服务、简单易用的restful API接口和许多语言的客户端

Elasticsearch 简称ES, 经常与Logstash 和Kibana 一起使用，江湖人称ELK.

  • 这E 自然指的就是Elasticsearch,简称ES, 具有分布式存储,搜索和分析的功能
  • L 指的就是Logstash,分布式日志收集框架
  • K 指的就是Kibana,可视化分析框架

二、参考文档

docker部署es

REST APIS 参考文档

Java REST Client 参考文档

三、ES核心概念

核心概念

  • 集群（Cluster）：包含一个或多个启动着es实例的机器群。通常一台机器起一个es实例。默认集群名是“elasticsearch”，同一网络，同一集群名下的es实例会自动组成集群

  • 节点（Node）：一个es实例即为一个节点

  • 索引（Index）：即拥有相似文档的集合

  • 类型（Type）：每个索引里都可以有一个或多个type，type是index中的一个逻辑数据分类，一个type下的document，都有相同的field。7.x版本正式被去除

  • 文档（Document）：es中的最小数据单元。一个document就像数据库中的一条记录。通常以json格式显示。多个document存储于一个索引（Index）中

  • 映射（Mapping）：定义索引中的字段的名称，定义字段的数据类型，比如字符串、数字、布尔

数据类型

  • 简单数据类型
    • 字符串：text：会分词，不支持聚合。keyword：不会分词，将全部内容作为一个词条，支持聚合
    • 数值
    • 布尔：boolean
    • 二进制：binary
    • 范围类型：integer_range, float_range, long_range, double_range, date_range
    • 日期：date
  • 复杂数据类型
    • 数组：[ ] Nested: nested (for arrays of JSON objects 数组类型的JSON对象)
    • 对象：{ } Object: object(for single JSON objects 单个JSON对象)

四、REST APIS

索引API

# 创建索引
PUT /my_index_000001

# 添加映射
PUT /my_index_000001/_mapping
{
   "properties":{
     "name":{
       "type":"text"
     },
     "age":{
       "type":"integer"
     }
   }
}

# 更新映射   更新映射也就是只添加字段
PUT /my_index_000001/_mapping
{
   "properties": {
      "name":{
       "type":"text"
      },
      "picture_url": {
			  "type": "keyword",
			  "ignore_above": 500
		  }
    }
}


# 查询所有索引
GET _cat/indices

# 查看一个索引
GET /my_index_000001

# 删除索引
DELETE /my_index_000001

# 创建索引并添加映射
PUT /my_index_000002
{
  "mappings": {
    "properties": {
      "name": {
        "type": "text"
      },
      "age": {
        "type": "integer"
      },
      "birthday":{
        "type": "date",
        "format": "yyyy‐MM‐dd HH:mm:ss||yyyy‐MM‐dd"
      }
    }
  }
}

# 创建多个索引，并添加映射
PUT /my_index_000002，my_index_000003
{
  "mappings": {
    "properties": {
      "name": {
        "type": "text"
      },
      "age": {
        "type": "integer"
      },
      "birthday":{
        "type": "date",
        "format": "yyyy-MM-dd HH:mm:ss||yyyy-MM-dd||epoch_millis"
      }
    }
  }
}

文档API

# 创建索引，并添加映射
# 下边的设置允许birthday字段存储年月日时分秒、年月日及毫秒三种格式
PUT /my_index_000005
{
  "mappings": {
    "properties": {
      "name": {
        "type": "text"
      },
      "age": {
        "type": "integer"
      },
      "birthday":{
        "type": "date",
        "format": "yyyy-MM-dd HH:mm:ss||yyyy-MM-dd||epoch_millis"
      }
    }
  }
}

# 插入一条数据 这里的1是文档id，没有指定id自动生成id
POST /my_index_000005/_doc/1
{
  "name": "test1",
  "age": 16,
  "birthday": "2015-01-01"
}
# 插入一条数据
POST /my_index_000005/_doc/2
{
  "name": "test1",
  "age": 16,
  "birthday": "1420070400001"
}
# 插入一条数据
POST /my_index_000005/_doc/3
{
  "name": "test1",
  "age": 16,
  "birthday": "2015-01-01 13:14:59"
}

# 查询这个索引中的所有文档
GET /my_index_000005/_search
# 根据id查询文档
GET /my_index_000005/_doc/1


# 删除文档
DELETE my_index_000005/_doc/1

# 修改文档
PUT my_index_000005/_doc/2
{
  "name":"李四",
  "age": 18,
  "birthday": "1420070400001"
}

查询文档API

query基本匹配查询关键字说明

关键字说明
match_all查询简单的 匹配所有文档。在没有指定查询方式时，它是默认的查询
match用于全文搜索或者精确查询，如果在一个精确值的字段上使用它， 例如数字、日期、布尔或者一个 not_analyzed 字符串字段，那么它将会精确匹配给定的值
range查询找出那些落在指定区间内的数字或者时间 gt 大于；gte 大于等于；lt 小于；lte 小于等于
term被用于精确值 匹配
termsterms 查询和 term 查询一样，但它允许你指定多值进行匹配
exists查找那些指定字段中有值的文档
missing查找那些指定字段中无值的文档
must多组合查询 必须匹配这些条件才能被包含进来
must_not多组合查询 必须不匹配这些条件才能被包含进来
should多组合查询 如果满足这些语句中的任意语句，将增加 _score ，否则，无任何影响。它们主要用于修正每个文档的相关性得分
filter多组合查询 这些语句对评分没有贡献，只是根据过滤标准来排除或包含文档

环境准备

# 创建索引
PUT xc_course
# 添加映射
PUT /xc_course/_mapping
{
  "properties": {
    "description": {
        "type": "text",
        "analyzer": "ik_max_word",
        "search_analyzer": "ik_smart"
      },
      "name": {
        "type": "text",
        "analyzer": "ik_max_word",
        "search_analyzer": "ik_smart"
      },
      "pic":{
        "type":"text",
        "index":false
      },
      "price": {
        "type": "float"
      },
      "studymodel": {
        "type": "keyword"
      },
      "timestamp": {
        "type": "date",
        "format": "yyyy-MM-dd HH:mm:ss||yyyy-MM-dd||epoch_millis"
      }  
  }
}

POST /xc_course/_doc/1
{
"name": "Bootstrap开发",
"description": "Bootstrap是由Twitter推出的一个前台页面开发框架，是一个非常流行的开发框架，此框架集成了多种页面效果。此开发框架包含了大量的CSS、JS程序代码，可以帮助开发者（尤其是不擅长页面开发的程序人员）轻松的实现一个不受浏览器限制的精美界面效果。",
"studymodel": "201002",
"price":38.6,
"timestamp":"2018-04-25 19:11:35",
"pic":"group1/M00/00/00/wKhlQFs6RCeAY0pHAAJx5ZjNDEM428.jpg"
}

POST /xc_course/_doc/2
{
"name": "java编程基础",
"description": "java语言是世界第一编程语言，在软件开发领域使用人数最多。",
"studymodel": "201001",
"price":68.6,
"timestamp":"2018-03-25 19:11:35",
"pic":"group1/M00/00/00/wKhlQFs6RCeAY0pHAAJx5ZjNDEM428.jpg"
}

POST /xc_course/_doc/3
{
"name": "spring开发基础",
"description": "spring 在java领域非常流行，java程序员都在用。",
"studymodel": "201001",
"price":88.6,
"timestamp":"2018-02-24 19:11:35",
"pic":"group1/M00/00/00/wKhlQFs6RCeAY0pHAAJx5ZjNDEM428.jpg"
}

只查询一条studymodel为201001的数据

POST /xc_course/_search
{
  "query": {
    "match": {
      "studymodel": "201001"
    }
  },
  "size": 1
}

只查询前20条studymodel为201001的数据并以price降序排列

POST /xc_course/_search
{
  "query": {
    "match": {
      "studymodel": "201001"
    }
  },
  "size": 20,
  "sort": [
    {
      "price": {
        "order": "desc"
      }
    }
  ]
}

只查询前20条price大于50小于90的数据并以price降序排列

POST /xc_course/_search
{
  "query": {
    "range": {
      "price": {
        "gte": 50,
        "lte": 90
      }
    }
  },
  "size": 20,
  "sort": [
    {
      "price": {
        "order": "desc"
      }
    }
  ]
}

只查询前20条timestamp为下面具体值的数据并以price降序排列

POST /xc_course/_search
{
  "query": {
    "terms": {
      "timestamp": [
        "2018-02-24 19:11:35",
        "2018-03-25 19:11:35"
      ]
    }
  },
  "size": 20,
  "sort": [
    {
      "price": {
        "order": "desc"
      }
    }
  ]
}

五、SQL REST API

POST /_sql
{
  "query": """
  SELECT * FROM "xc_course" where studymodel = 201001 ORDER BY price DESC LIMIT 5
  """
}

POST /_sql
{
  "query": """
  SELECT * FROM "ks-logstash-log*"
  """,
  "fetch_size":5
}

使用ES查询DSL进行过滤

POST /_sql
{
  "query": "SELECT * FROM xc_course ORDER BY price DESC",
  "filter":{
    "range": {
      "price": {
        "gte": 50,
        "lte": 90
      }
    }
  },
  "fetch_size":5
}


POST /_sql
{
  "query": "SELECT * FROM xc_course ORDER BY price DESC",
  "filter":{
    "terms": {
      "studymodel": ["201001"]
    }
  },
  "fetch_size":5
}

异步运行sql搜索

POST /_sql
{
  "query": """
  SELECT * FROM "ks-logstash-log*"
  """,
  "fetch_size":20,
  "wait_for_completion_timeout": "1s"
}
  • 值为is_partial，true表示搜索结果不完整
  • 值is_running，true表示搜索仍在后台运行
  • 一个id用于搜索
yololee_
关注
  • 3
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
Elastic的使用
weixin_41182157的博客
05-12 1050
Elastic的使用 创建文档 创建一个叫做 twitter 的索引（index），并插入一个文档（document) ，文档id为1 PUT twitter/_doc/1 { “user”: “GB”, “uid”: 1, “city”: “Beijing”, “province”: “Beijing”, “country”: “China” } 结果 { “_index” : “twitter”, //索引 “type” : “doc”, //类型是文档 “_id” : “1”,// “_version
Elastic 之 elasticsearch 基本操作
书启鸿蒙知秋枫
03-21 931
类型（type）--------------------------Table 数据表 [7.x废弃]字段（Field）-------------------------Columns 列。索引（indices）----------------------Databases 数据库。文档（Document）----------------------Row 行。POST /索引库名/_update/id值。
ElasticSearch
qq_40298175的博客
09-17 633
一、搜索引擎介绍 在互联网项目中，涉及到检索的业务需求很多，我们可以通过对数据库的模糊查询实现检索功能，但是针对大数据量的操作，基于数据库的检索就显得力不从心了。所需我们要寻求一种高效的数据检索解决方案。 所谓搜索引擎，就是根据用户需求与一定算法，运用特定策略从互联网检索出指定的信息反馈给用户的一门检索技术。搜索引擎依托于多种技术，如网络爬虫技术、检索排序技术、网页处理技术、大数据处理技术、自然语言处理技术等，为信息检索用户提供快速、高相关性的信息服务。搜索引擎技术的核心模块一般包括爬虫、索引、检索和排
ElasticSearch使用入门
csdncjh的博客
05-22 3212
ES的安装 下载地址：https://www.elastic.co/downloads/past-releases/elasticsearch-2-4-3 »启动 »cd......./elasticsearch-2-4-3 »bin/elasticsearch »bin/elasticsearch-d(后台运行) ES安装验证: http://your ip...
Elastic Search 入门使用说明
编程思维
12-20 1135
ES的安装、配置、与Java项目集成运用
Elasticsearch的基本使用流程
最新发布
07-03
Elasticsearch的基本使用流程
(狂神)ElasticSearch快速入门笔记，ElasticSearch基本操作以及爬虫(Java-ES仿京东实战)
04-18
(狂神)ElasticSearch快速入门笔记，ElasticSearch基本操作以及爬虫(Java-ES仿京东实战),包含了小狂神讲的东西，特别适合新手学习，笔记保存...es基本是开箱即用（解压就可以用！），非常简单。Solr安装略微复杂一点！
Elasticsearch_python使用文档
11-28
以上就是 Elasticsearch Python 客户端的基本使用方法，包括创建 Index、插入、查询和删除数据，以及一些高级查询操作。实际使用中，你还可以根据需求探索更多的搜索、过滤和聚合功能。记住，错误处理是关键，可以...
ElasticSearch官方测试数据
09-14
Elasticsearch（ES）是一种流行的开源全文搜索引擎，它基于Lucene库构建，被广泛用于大数据分析、日志聚合、实时搜索和索引等场景。官方提供的测试数据集是检验Elasticsearch功能、性能和稳定性的关键资源，可以帮助...
easy-ES框架使用，轻松操作查询Elasticsearch
06-01
本文将详细介绍如何使用easy-ES来轻松地进行Elasticsearch的数据操作和查询。 ### 1. easy-ES框架简介 easy-ES框架是为了解决在Java开发中与Elasticsearch交互时的复杂性而诞生的。它提供了一套简洁、直观的API，...
ElasticSearch基本使用
我们仍未知道那天所见花的名字,但是她的香味却留在我心间
08-21 2880
Elaticsearch，简称为es，es是一个，它可以近乎;本身扩展性很好，可以扩展到上百台服务器，处理PB级别的数据。es也使用lava开发并使用Lucene作为其核心来实现所有索引和搜索的功能，但是它的目的是通过简单的来隐藏Lucene的复杂性，从而让全文搜索变得简单。据国际权威的数据库产品评测机构DB Engines的统计，在2016年1月，ElasticSearch已超过Solr等，成为排名第一的搜索引擎类应用。它用于以及将这三者混合使用。
第一章 Elastic入门基础概念以及基本操作
weixin_42862818的博客
03-23 719
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录前言一、基本概念索引（index）文档（doc）集群（cluster）节点（node）分片（shard）段（segment）二、基本操作CRUD基本API总结 前言 这一节主要讲述ES的一些基本概念，例如：索引、文档、集群、节点、分片、段、副本等以及，ES的基本操作包括CRUD和基础API使用 一、基本概念 索引（index） 索引（index）在ES中可以抽象的理解一张表，一类数据的聚集，它通过Mapping来定义数据结构，
ElasticSearch常见用法，看这一篇就够了
学Java，找哪吒
03-17 8046
文末送3本《一本书讲透Elasticsearch：原理、进阶与工程实践》
入门：ElasticSearch(es)的基本命令及使用
肥柯博客
08-21 5406
Elasticsearch分布式全文检索引擎 全文检索（搜索）引擎：汇合了网络爬虫技术、检索排序技术、网页处理技术、大数据处理技术、自然语言处理技术等综合性的**学科** 检索引擎分类：Lucene、Nutch、Solr、Elasticsearch 下面Elasticsearch以7.0+版本做介绍 1、基本概述 Elasticsearch（简写es）， Elasticsearch是一个开源的高扩展的分布式全文检索引擎，它可以近乎实时的存储、检索数据；本身扩展性很好，可以扩展到上百台服务器，处理P
ElasticSearch 最全详细使用教程
qq_40907977的博客
09-06 1万+
一、快速入门 查看集群的健康状况 http://localhost:9200/_cat http://localhost:9200/_cat/health?v 说明：v是用来要求在结果中返回表头 状态值说明 Green - everything is good (cluster is fully functional)，即最佳状态 Yellow - all data is available but some replicas are not yet allocated (cluster is fu
Elasticsearch
ne_123456的博客
08-15 895
Elasticsearch
Elasticsearch 入门及使用
一个摩羯座的程序猿
06-18 1405
一、前言 本文版本说明： ElasticSearch版本：7.7 （目前最新版） Kibana版本：7.7（目前最新版） ElasticSearch在实际生产里通常和LogStash，Kibana，FileBeat一起构成Elastic Stack来使用，它是这些组件里面最核心的一个。因此学好ElasticSearch的必要性不言而喻，但是由于ElasticSearch官方更新太过频繁且文档陈旧，同时在Linux下安装配置的过程较繁杂，不利于入门使用。 为了帮助大家快速入门
Elastic Search (ES)基本使用
lawenliu的专栏
03-22 661
基于kibana的DevTool可以很方便的进行ES的测试。当然，你可以用curl命令或者Postman等工具进行测试。 下面是一些基本的数据操作，可以参考一下。 # 获取ES的基本信息 GET _search { "query": { "match_all": {} } } # 添加数据： # megacorp是index索引名称 # employee是类型 # 1是......
开始使用 Elasticsearch （1）
热门推荐
Elastic 中国社区官方博客
08-14 3万+
在今天的这篇文章中，我们来主要介绍一下如何使用REST接口来对Elasticsearch进行操作。为了完成这项工作，我们必须完成如下的步骤： 安装 Elasticsearch。请参阅文章“如何在Linux，MacOS及Windows上进行安装Elasticsearch”。把Elasticsearch运行起来。 安装Kiban。请参阅文章“如何在Linux，MacOS及Windows上安装Ela................................................
elasticsearch 的基本使用
06-03
Elasticsearch 是一种开源的搜索引擎，它是基于 Lucene 搜索引擎库构建的。它提供了一个分布式、多租户的全文搜索引擎，可以用于存储、搜索和分析海量数据。 以下是 Elasticsearch 的基本使用： 1. 安装 Elasticsearch：可以从官方网站下载 Elasticsearch，然后按照指南进行安装。 2. 运行 Elasticsearch：启动 Elasticsearch，可以在命令行中运行 elasticsearch 命令。 3. 创建索引：在 Elasticsearch 中，数据被组织成一个或多个索引。可以使用 PUT 请求创建索引，例如：`PUT /myindex`。 4. 添加文档：将文档添加到索引中，可以使用 POST 请求，例如：`POST /myindex/_doc`。在请求体中指定文档内容。 5. 查询文档：使用 GET 请求查询文档，例如：`GET /myindex/_search?q=test`。这将返回所有包含 "test" 的文档。 6. 删除文档：使用 DELETE 请求删除文档，例如：`DELETE /myindex/_doc/1`。这将删除索引为 "myindex" 中 ID 为 "1" 的文档。 7. 更新文档：使用 POST 请求更新文档，例如：`POST /myindex/_update/1`。在请求体中指定要更新的字段和值。 8. 聚合查询：可以使用聚合查询对文档进行分组和计算。例如：`GET /myindex/_search?size=0&aggs=group_by_country:terms:field:country`，这将返回按照国家分组并计算数量的结果。 以上是 Elasticsearch 的基本使用，还有很多高级特性可以探索。了解 Elasticsearch 的更多功能和用法，请参阅官方文档。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值