Elasticsearch入门学习

最新推荐文章于 2024-05-07 17:25:42 发布
最新推荐文章于 2024-05-07 17:25:42 发布
阅读量472 收藏
点赞数 1
分类专栏： SpringCloud微服务 文章标签： elasticsearch kibana
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_46146718/article/details/120297827
版权

Elasticsearch

一、安装

安装docker
docker命令安装与启动elasticsearch和kibana集成

docker pull nshou/elasticsearch-kibana
docker run -d -p 9200:9200 -p 9300:9300 -p 5601:5601 --name eskibana  nshou/elasticsearch-kibana

可能出现的问题

#报错
Error response from daemon: Get https://registry-1.docker.io/v2/: dial tcp: lookup registry-1.docker.io on [::1]:53: read udp [::1]:46783->[::1]:53: read: connection refused
#修改配置文件
vi /etc/resolv.conf
#添加
nameserver 8.8.8.8
#docker报错
WARNING: IPv4 forwarding is disabled. Networking will not work.
#追加
net.ipv4.ip_forward=1
#重启网络
systemctl restart network

进入容器修改kibana为中文

docker exec -it e4287ef6a10f /bin/bash
#容器中代码
cd /home/elasticsearch/kibana-7.12.1-linux-x86_64/config/
vim kibana.yml
#最后一行加上这个      i18n.locale: "zh-CN"

验证ES：
打开浏览器，输入IP:端口，比如我的：http://127.0.0.1:9200/
在这里插入图片描述
验证Kibana：
打开浏览器，输入Kibana的IP:端口，比如我的：http://127.0.0.1:5601/
在这里插入图片描述
ElasticSearch Head，它相当于是ES的图形化界面，这个更简单，它是一个浏览器的扩展程序，直接在chrome浏览器扩展程序里下载安装即可
在这里插入图片描述

二、操作索引

1、介绍

ESMySql
字段列
文档一行数据
类型（已废弃）表
索引数据库

分片

  1. 通过分片技术，咱们可以水平拆分数据量，同时它还支持跨碎片（可能在多个节点上）分布和并行操作，从而提高性能/吞吐量；
  2. ES可以完全自动管理分片的分配和文档的聚合来完成搜索请求，并且对用户完全透明；
  3. 主分片数在索引创建时指定，后续只能通过Reindex修改，但是较麻烦，一般不进行修改。
  4. 在创建索引时，只需要咱们定义所需的碎片数量就可以了，其实每个分片都可以看作是一个完全功能性和独立的索引，可以托管在集群中的任何节点上。

副本分片

  1. 当分片或者节点发生故障时提供高可用性。因此，需要注意的是，副本分片永远不会分配到复制它的原始或主分片所在的节点上；
  2. 可以提高扩展搜索量和吞吐量，因为ES允许在所有副本上并行执行搜索；
  3. 默认情况下，ES中的每个索引都分配5个主分片，并为每个主分片分配1个副本分片。主分片在创建索引时指定，不能修改，副本分片可以修改。

2、创建一个空索引（库）

如下代码，咱们创建了一个0副本2分片的ropledata索引，然后咱们可以在Elasticsearch Head里刷新一下，并查看索引的信息：

PUT /ropledata
{
  "settings": { 
    "number_of_shards": "2", 
    "number_of_replicas": "0"
  } 
}

在这里插入图片描述
在这里插入图片描述

3、修改副本（库）

咱们如果对刚才创建的索引副本数量不满意，可以进行修改，注意：分片不允许修改。

PUT ropledata/_settings 
{ 
  "number_of_replicas" : "2" 
}

在这里插入图片描述

4、删除索引（库）

当这个索引不想用了，可以进行删除，执行如下命令即可，执行成功后，刷新ElasticSearch Head可以看到刚才创建的ropledata索引消失了：

DELETE /ropledata

在这里插入图片描述

三、基础使用

1、数据插入数据

插入数据的时候可以指定id，如果不指定的话，ES会自动帮我们生成。我们以指定id为例，如下代码是我们创建了一个mydb1的文档，创建成功后，可以在Elasticsearch Head的数据浏览模块里看到这些数据，代码及演示如下：
格式

PUT /{index}/{type}/{id}
{
  "field": "value",
  ...
}

举例

//指定id为mydb1 
POST /ropledata/_doc/mydb1 
{
  "id":1,
  "name":"渊哥",
  "page":"www.baidu.com",
  "say":"测试罢了" 
}

在这里插入图片描述

2、局部更新

POST /ropledata/_update/mydb1
{
  "doc":
  {
    "say":"奥力给"
  } 
}

这时候我们可以多次去执行上面的局部更新代码，会发现除了第一次执行，后续不管又执行了多少次，_version都不再变化！
在这里插入图片描述

3、删除数据

比如我们想把ropledata索引下的id为mydb1的文档删除，可以使用如下命令：

DELETE /ropledata/_doc/mydb1

在这里插入图片描述
查询或者删除时候用到的ID是创建文档时候指定或者ES自动生成的那个id，而不是文档里面的那个叫id 字段！文档里面的文档字段是可以没有id 的。

4、查询数据

普通查询

GET /ropledata/_doc/mydb1

在这里插入图片描述

5、两种查询模式

Query-string：通过url参数来搜索，被称为查询字符串搜索。

GET /megacorp/employee/_search?q=say:测试

在这里插入图片描述
Query-DSL：使用查询表达式搜索，被称为DSL查询，它支持构建更加复杂和健壮的查询，一般来说我们重点学习这种方法。

GET /megacorp/employee/_search
{
    "query" : {
        "match" : {
            "say" : "测试"
        }
    }
}

在这里插入图片描述

6、复杂搜索

注意这里搜索say是测试，同时年龄大于15。注意下语法bool里面有must，filter类型，当然以后还会学到更多类型，这里先有个意识。

GET /megacorp/employee/_search
{
    "query" : {
        "bool": {
            "must": {
                "match" : {
                    "say" : "测试" 
                }
            },
            "filter": {
                "range" : {
                    "age" : { "gt" : 15 } 
                }
            }
        }
    }
}

在这里插入图片描述

7、全文搜索

比如我搜索员工说的话，注意这里稍有不同，about字段中包含两个单词，搜索的结果并不是完全匹配，是根据单词去做了相关性匹配。

Elasticsearch 默认按照相关性得分排序，即每个文档跟查询的匹配程度。

Elasticsearch中的 相关性 概念非常重要，也是完全区别于传统关系型数据库的一个概念，数据库中的一条记录要么匹配要么不匹配。

GET /megacorp/employee/_search
{
    "query" : {
        "match" : {
            "say" : "love eat"
        }
    }
}

在这里插入图片描述

8、短语搜索

上面如果一个短语包含多个单词，那岂不是不能精确查询了，当然不是，可以使用短语搜索。

GET /megacorp/employee/_search
{
    "query" : {
        "match_phrase" : {
            "say" : "love eat"
        }
    }
}

在这里插入图片描述

9、高亮搜索

GET /megacorp/employee/_search
{
    "query" : {
        "match_phrase" : {
            "say" : "love eat"
        }
    },
    "highlight": {
        "fields" : {
            "say" : {}
        }
    }
}

在这里插入图片描述

10、聚合搜索一

聚合类似于SQL中的GROUP_BY，但功能更强大
开启功能

PUT /megacorp/_mapping
{
  "properties": {
    "interests": { 
      "type":     "text",
      "fielddata": true
    }
  }
}


GET /megacorp/employee/_search
{
  "aggs": {
    "all_interests": {
      "terms": {
        "field": "interests"
      }
    }
  }
}

在这里插入图片描述

11、聚合搜索二

以上是对所有的雇员进行统计，我们也可以其中的一部分雇员进行组合查询统计，比如我们想知道叫em2的雇员最受欢迎的兴趣爱好。

GET /megacorp/employee/_search
{
    "query": {
    "match": {
      "name": "em2"
    }
  },
  "aggs": {
    "all_interests": {
      "terms": {
        "field": "interests"
      }
    }
  }
}

在这里插入图片描述

四、实践

1、依赖

        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-data-elasticsearch</artifactId>
        </dependency>

        <!-- 开启web-->
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-web</artifactId>
        </dependency>
        <!--lombok-->
        <dependency>
            <groupId>org.projectlombok</groupId>
            <artifactId>lombok</artifactId>
            <optional>true</optional>
        </dependency>

2、代码

config

@Configuration
public class ElasticsearchConfig {
    @Bean
    RestHighLevelClient elasticsearchClient() {
        ClientConfiguration configuration = ClientConfiguration.builder()
                .connectedTo("192.168.2.133:9200")
                //.withConnectTimeout(Duration.ofSeconds(5))//指的是建立连接所用的时间，适用于网络状况正常的情况下，两端连接所用的时间。
                //.withSocketTimeout(Duration.ofSeconds(3))//指客户端和服务进行数据交互的时间
                //.useSsl()
                //.withDefaultHeaders(defaultHeaders)
                //.withBasicAuth(username, password)
                // ... other options

                .build();
        RestHighLevelClient client = RestClients.create(configuration).rest();
        return client;
    }
}

存储类

public interface EmployeeRepository extends ElasticsearchRepository<Employee,Integer> {//范型的第二个参数为id的数据类型
}

实体类

@Document(indexName = "employee")
@Setter
@Getter
public class Employee {
    // 必须指定一个id，
    @Id
    private Integer id;
    private Integer age;
    private String name;
    private String say;
    private ArrayList<String> interests;
}
在 5.X 版本中，一个 index 下可以创建多个 type；
在 6.X 版本中，一个 index 下只能存在一个 type；
在 7.X 版本中，直接去除了 type 的概念，就是说 index 不再会有 type。

3、核心数据类型

（1）字符串类型： text, keyword
（2）数字类型：long, integer, short, byte, double, float, half_float, scaled_float
（3）日期：date
（4）日期 纳秒：date_nanos
（5）布尔型：boolean
（6）Binary：binary
（7）Range: integer_range, float_range, long_range, double_range, date_range

#创建索引
PUT employee 
PUT employee
{
    "mappings": {
        "properties": {
            "id": {
                "type": "integer"
            },
            "name": {
                "type": "text",
                "fields": {
                    "keyword": {
                        "type": "keyword",
                        "ignore_above": 256
                    }
                }
            },
            "age": {
                "type": "integer"
            },
            "say": {
                "type": "text",
                "fields": {
                    "keyword": {
                        "type": "keyword",
                        "ignore_above": 256
                    }
                }
            },
            "interests": {
                "type": "text",
                "fields": {
                    "keyword": {
                        "type": "keyword",
                        "ignore_above": 256
                    }
                }
            }
        }
    }
}

4、测试

@SpringBootTest
class MyElasticsearch2ApplicationTests {
    @Autowired
    EmployeeRepository employeeRepository;

    @Test
    void contextLoads() {

        Employee employee=new Employee();
        employee.setAge(19);
        employee.setName("渊哥");
        employee.setSay("i love eat");
        ArrayList<String> strings = new ArrayList<>();
        strings.add("aa");
        strings.add("bb");
        strings.add("cc");
        employee.setInterests(strings);
        employeeRepository.save(employee);

    }

}

因此在索引的时候，我输入的：http://192.168.2.133:9200/employee/_doc/_search

和烨
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
Elasticsearch Configuration
weixin_39150719的博客
07-26 763
======================== Elasticsearch Configuration ========================= NOTE: Elasticsearch comes with reasonable defaults for most settings. Before you set out to tweak and tune the configuration, make sure you understand what are you trying to ac
Springboot配置ElasticSearch
m0_55613022的博客
04-26 1370
搜索功能，如果直接使用MySQL的like查询语句会影响系统的性能，所以使用es会显著的提升性能呢。 创建spriingboot项目，在非关系型数据库中选中es，就会自动导入es的maven相关的包啦。 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-elasticsearch</artifa
ES集群搭建、身份认证配置
最新发布
weiye2012的博客
05-07 849
elasticsearch 默认不允许root用户启动，所以需要创建es用户。
ElasticSearch基础学习（SpringBoot集成ES）
weibingbing_net的专栏
07-08 4873
什么是ElasticSearch？ElasticSearch，简称为ES， ES是一个开源的高扩展的分布式全文搜索引擎。它可以近乎实时的存储、检索数据；本身扩展性很好，可以扩展到上百台服务器，处理PB级别的数据。ES也使用Java开发并使用Lucene作为其核心来实现所有索引和搜索的功能，但是它的目的是通过简单的来隐藏Lucene的复杂性，从而让全文搜索变得简单。ES核心概念知道了ES是什么后，接下来还需要知道ES是如何存储数据，数据结构是什么，又是如何实现搜索的呢？
ES JAVA API Client 使用方法
qq_35515283的博客
10-25 1470
Java Api Client 属于7.15后的新特性，用起来感觉比原来HighLevelRestClient要简化很多，而且更接近dsl语句。 我这里是某个特殊场景要用，资料不太多，只能自己摸索出的一点JAVA API Client使用方法，用作启发，作一些常用的操作应该没啥问题。
ElasticSearch（三）SpringBoot 整合ES
-
05-04 1777
ElasticSearch（三）SpringBoot 整合ES 使用Java API 这种方式，官方已经明确表示在ES 7.0 版本中弃用 TransportClient 客户端，且在8.0 版本中完全移除它。 可以参考：https://blog.csdn.net/jacksonary/article/details/82729556 官方文档：https://www.elastic.co/guide/en/elasticsearch/client/index.html ElasticSearch-Res
Elasticsearch入门学习笔记
06-28
Elasticsearch入门学习笔记，适用于未学过Elasticsearch的人群，其中有些内容也是参考官方文档。
es入门学习
10-15
elasticsearch的框架，同样是以lucene为基础，并且吸收了前两代的教训而开发出的分布式多用户能力的全文搜索引擎，并且elasticsearch是基于RESTful web接口进行发布的，那么这就意味着，我们开发人员操作起来更方便...
Elasticsearch学习总结
01-27
Elasticsearch学习总结 Elasticsearch是一个强大的分布式搜索引擎，它以文档为中心，允许存储和检索整个对象或文档。它的核心特性在于对文档内容进行索引，使得数据可以被快速搜索、排序和过滤。与传统的关系型...
ElasticSearch5.5.0入门学习.zip
06-12
通过深入学习和实践 Elasticsearch 5.5.0，可以充分利用其强大的搜索和分析能力，为业务提供高效、灵活的数据解决方案。结合视频课程，你可以更好地理解和掌握这些概念和技术，逐步成为 Elasticsearch 的专家。
ElasticStack学习之Elasticsearch入门.docx
10-16
ElasticStack学习之Elasticsearch入门
Spring整合Elasticsearch----Elasticsearch客户端
Gabriel Wang的博客
03-11 557
本文演示了支持的Elasticsearch客户端实现的配置和使用。Spring Data Elasticsearch运行在一个连接到单个Elasticsearch节点或集群的Elasticsearch客户端上(由Elasticsearch客户端库提供)。虽然Elasticsearch客户端可以直接与集群一起工作，但使用Spring Data Elasticsearch的应用程序通常使用Elasticsearch操作和Elasticsearch存储库的更高级别抽象。
Elasticsearch Java Client
小城我家
11-24 302
ES提供多种不同的客户端： 1、TransportClient ES提供的传统客户端，官方计划8.0版本删除此客户端 2、RestClient RestClient是官方推荐使用的，它包括两种：Java Low Level REST Client和 Java High Level REST Client。 ES在6.0之后提供 Java High Level REST Client， 两种客户端官方更推荐使用 Java High Level REST Client， 使用时加入对应版本的依赖即可 Sprin
Springboot整合ElasticSearch
H_porridge的博客
03-25 2034
一.项目目录结构 1.pom文件相关的maven依赖 要注意到 elasticsearch版本要和自己下载的版本一致； springboot使用版本为2.5.4 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLo
Springboot快速上手ElasticSearch操作
hello_list的博客
05-22 563
Springboot操作ElasticSearch 通过前面我们安装和简单使用了下ElasticSearch，今天我们试试ElasticSearch的一些基础操作，同时也是常用操作 创建一个spring boot快速项目，选上这几个： 具体依赖 <!-- https://mvnrepository.com/artifact/com.alibaba/fastjson --> <dependency> <groupId>com.alibaba</group
springboot2整合elasticsearch
纵横江湖二十年的博客
12-20 1455
springboot2整合elasticsearch 注：elasticsearch的版本为7.14.1 1，引入依赖 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-elasticsearch</artifactId> </
Ribbon的EurekaRibbonClientConfiguration源码分析
实践求真知
08-01 3534
一 介绍 当同时引入Spring Cloud Ribbon和Spring Cloud Eurek依赖时，会触发Eureka中实现的对Ribbon的自动化配置。Ribbon的自动化配置将会发生变化。 二 EurekaRibbonClientConfiguration源码解读 @Configuration public class EurekaRibbonClientConfiguration...
Spring Boot连接多个Redis库配置方案及代码示例
学亮编程手记
10-16 1337
配置类①： import com.zxl.common.utils.json.FastJsonRedisSerializer; import org.springframework.beans.factory.annotation.Value; import org.springframework.context.annotation.Bean; import org.springframew...
redis报ClassNotFoundException...redis/connection/lettuce/LettuceClientConfiguration$LettuceClientConf
Feify博客
08-15 8822
springboot工程整合redis时因为版本不一致导致如此错误：org/springframework/data/redis/connection/lettuce/LettuceClientConfiguration$LettuceClientConfigurationBuilder得具体解决办法
Elasticsearch入门讲解
03-28
这篇《Elasticsearch入门讲解》是学习Elasticsearch基础知识和实践操作的宝贵资料，适合初学者及希望深入理解Elasticsearch特性的读者。通过这篇教程，读者可以全面了解Elasticsearch的核心概念，并具备使用Elastic...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

和烨

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值