Elasticsearch学习总结一

已于 2022-08-25 09:15:45 修改
阅读量227 收藏
点赞数
分类专栏： 大数据 文章标签： java
于 2022-07-09 19:46:24 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/riju4713/article/details/125697931
版权

全文检索大体分两个过程，索引创建和搜索索引
9300端口为es集群间组件的通信端口,9200端口为浏览器访问的http协议Restful端口

  1. text:文本是可以分词的
  2. keyword:不能分词，必须完整匹配
  3. index:false,不能被索引查询

 ES接入的几种方式：

1.node接入-node client
2.transport接入-transport  client
3.http接入- rest client

 1.创建(order_main)索引

#put请求
127.0.0.1:9200/order_main

2.查看(order_main)索引

#get 请求
127.0.0.1:9200/order_main

3.查看全部索引信息

#get请求查看所有索引信息
127.0.0.1:9200/_cat/indices?v

4.删除指定索引

#delete 方法
127.0.0.1:9200/order_main

 5.创建文档(post)

#方式一
127.0.0.1:9200/order_main/_doc

#方式二 指定id
127.0.0.1:9200/order_main/_doc/1920

#方式三  指定id
127.0.0.1:9200/order_main/_create/2208

{
    "order_id": "1657440571452",
    "address": "北京市海淀区五道口金融大厦",
    "name": "liufeifei",
    "phone": "180",
    "price": 4599
}

 6.根据_id指定查询

127.0.0.1:9200/order_main/_doc/2208

 7.查询所有

127.0.0.1:9200/order_main/_search

8.更新文档

#全量新增(先删除后创建)
127.0.0.1:9200/order_main/_doc/1920
{
    "order_id": "1657440571498",
    "address": "北京市海淀区五道口金融大厦",
    "name": "wuzhaoyang2",
    "phone": "111"
  
}


#局部更新
127.0.0.1:9200/order_main/_update/1920
{
    "doc": {
        "price": 4599
    }
}

 9.条件查询

#根据姓名查询
127.0.0.1:9200/order_main/_search?q=name:lixiuyang

#分页查询
127.0.0.1:9200/order_main/_search?from=1&size=10




#根据body请求体查询
127.0.0.1:9200/order_main/_search
{
    "query": {
        "match": {
            "name": "lixiuyang"
        }
    }
}

#查询所有
{
    "query": {
        "match_all": {
      
        }
    }
}

#分页查询
{
    "query": {
        "match_all": {}
    },
    "from": 0,
    "size": 1
}

#指定字段
{
    "query": {
        "match_all": {
      
        }
    },
    "from":0,
    "size":1,
    "_source":["price"]
}
#根据价格排序
{
    "query": {
        "match_all": {
      
        }
    },
    "from":0,
    "size":10,
    "_source":["price"],
    "sort":{
        "price":{
            "order":"desc"
        }
    }
}

 10.多条件查询

#多个条件查询(and)
127.0.0.1:9200/order_main/_search
{
    "query": {
        "bool": {
            "must":[ {
                "match": {
                    "name": "lixiuyang"
                }
            },
             {
                "match": {
                    "phone": "110"
                }
            }]
        }
    }
}
#多个条件查询(or)
127.0.0.1:9200/order_main/_search
{
    "query": {
        "bool": {
            "should":[ {
                "match": {
                    "name": "lixiuyang"
                }
            },
             {
                "match": {
                    "name": "liufeifei"
                }
            }]
        }
    }
}

#多个条件查询+过滤
127.0.0.1:9200/product/_search
{
    "query": {
        "bool": {
            "should": [
                {
                    "match": {
                        "name": "lixiuyang"
                    }
                },
                {
                    "match": {
                        "name": "liufeifei"
                    }
                }
            ],
            "filter": {
                "range": {
                    "price": {
                        "gt": 2000
                    }
                }
            }
        }
    }
}

11.完全匹配查询（不分词）没有生效 

127.0.0.1:9200/product/_search
{
    "query": {
        "match_phrase": {
           "title":"华为mate40e"
        }
    }
}

12.高亮显示

127.0.0.1:9200/product/_search
{
    "query": {
        "match_phrase": {
           "title":"华为mate40e"
        }
    },
    "highlight":{
        "fields":{
            "title":{}
        }
    }
}

13.聚合操作

127.0.0.1:9200/product/_search
{
    "aggs":{             //聚合操作
        "price_group":{  //任意取名
            "terms":{   //分组
                "field":"price"   //分组字段
            }
        }
    },
    "size":0
}

14.查询mapping信息

127.0.0.1:9200/people/_mapping

 15.维护mapping信息

127.0.0.1:9200/people/_mapping
{
    "properties": {
        "name": {
            "type": "text",
            "index": true
        },
        "sex": {
            "type": "keyword",
            "index": true
        },
        "tel": {
            "type": "keyword",
            "index": false
        }
    }
}
  1. 不需要被索引(查询)的字段就设置  index:false

根据_id查询
GET /eshop_order/order_product/z0tYmHkByZh-k7RqRC3r

搜索全部数据  响应：（默认返回10条数据）
GET /eshop_order/order_product/_search
关键字搜素数据
GET /eshop_order/order_product/_search?q=customer:速递
DSL搜索
Elasticsearch提供丰富且灵活的查询语言叫做DSL查询(Query DSL),它允许你构建更加复杂、强大的查询。
DSL(Domain Specific Language特定领域语言)以JSON请求体的形式出现。
GET /eshop_order/order_product/_search
{
  "query":{
    "match": {
      "customer": "速递"
    }
  }
}

GET /eshop_order/order_product/_search
{
  "query": {
    "bool": {
      "must": [
        {
          "match": {
            "customer": "的"
          }
        }
      ],
      "filter": [
        {
          "range": {
            "id": {
              "gte": 10,
              "lt": 1012
            }
          }
        }
      ]
    }
  }
}

全文搜索（类似模糊搜索）
GET /eshop_order/order_product/_search
{
  "query":{
    "match": {
      "customer": "王者 王富"
    }
  }
}
高亮显示
GET /eshop_order/order_product/_search
{
  "query": {
    "match": {
      "customer": "王者 王富"
    }
  },
  "highlight": {
    "fields": {
      "customer": {}
    }
  }
}
聚合
在Elasticsearch中，支持聚合操作，类似SQL中的group by操作。
GET /eshop_order/order_product/_search
{
  "aggs": {
    "group_id": {
      "terms": {
        "field": "id"
      }
    }
  }
}

可以在查询url后面添加pretty参数，使得返回的json更易查看。
GET /eshop_order/order_product/z0tYmHkByZh-k7RqRC3r?pretty
在响应的数据中，如果我们不需要全部的字段，可以指定某些需要的字段进行返回。
GET /eshop_order/order_product/z0tYmHkByZh-k7RqRC3r?_source=id,customer

如果我们只需要判断文档是否存在，而不是查询文档内容，那么可以这样：
HEAD /eshop_order/order_product/z0tYmHkByZh-k7RqRC3r


批量操作
有些情况下可以通过批量操作以减少网络请求。如：批量查询、批量插入数据。
GET /eshop_order/order_product/_mget
{
  "ids":["1001","1002"]
}

批量新增
POST /eshop_order/order_product/_bulk
{"create":{"_index":"eshop_order","_type":"order_product","_id":2001}}
{"id":2001,"customer":"name1","phone": 20,"orderCode": "202105231008525632"}
{"create":{"_index":"eshop_order","_type":"order_product","_id":2002}}
{"id":2002,"customer":"name2","phone": 20,"orderCode": "202105231008525632"}
{"create":{"_index":"eshop_order","_type":"order_product","_id":2003}}
{"id":2003,"customer":"name3","phone": 20,"orderCode": "202105231008525632"}

创建明确类型的索引：
PUT /order
{
  "settings": {
    "index": {
      "number_of_shards": "2",
      "number_of_replicas": "0"
    }
  },
  "mappings": {
    "properties": {
      "name": {
        "type": "text"
      },
      "age": {
        "type": "integer"
      },
      "mail": {
        "type": "keyword"
      },
      "hobby": {
        "type": "text"
      }
    }
  }
}

查看映射：
GET /order/_mapping


分页查询
GET /order/_search
{
  "size": 2,
  "from": 2,#跳过开始的结果数，默认0
  "query": {
    "match": {
      "hobby": "乒乓球  音乐"
    }
  }
}


cardinality（相当于对工作岗位进行分组并count）
GET employee/_search
{
  "aggs": {
    "job_category_count": {
      "cardinality": {
        "field": "job"
      }
    }
  }
}
 

 kibana安装

  1.修改 config/kibana.yml 文件

# 默认端口
server.port: 5601
# ES 服务器的地址
elasticsearch.hosts: ["http://localhost:9200"]
# 索引名
kibana.index: ".kibana"
# 支持中文
i18n.locale: "zh-CN"

   2. http://localhost:5601 查看效果

慕容潇湘
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Elasticsearch学习总结
01-27
这种理解数据的方式与以往完全不同，这也是Elasticsearch能够执行复杂的全文搜索的原因之一。我们来看一个实际的例子，假设有如下的数据：这里每一行是一个document。每个document都有一个docid。那么给这些document...
ES使用及配置
weixin_45236117的博客
12-28 1302
官网上下载Es，kibana，皆为7.16.2版本 配置文件elasticsearch.yml cluster.name: my-application node.name: node-1 path.data: /usr/local/elasticsearch-7.16.2/data path.logs: /usr/local/elasticsearch-7.16.2/logs network.host: xx.xx.xx.xx http.port: 9200 transport.tcp.port: 930
Elasticsearch 5.x 生产环境和节点配置
it_lihongmin的博客
11-10 5652
Elasticsearch中拥有大量的自定义配置项，除了以下一些官方不能统一进行配置的选项（与环境，使用者情况有关），大多数最好不要自行配置，因为会引起很多不必要的麻烦（不好排查），并且es的很多默认项的已经是比较优的配置（包括性能方面）。 1、elasticsearch.yml 1、cluster.name   配置es的集群名称，默认是elasticsearch，es会自动发现在同一网段
Elasticsearch: 配置文件详解
weixin_30783913的博客
08-31 179
elasticsearch.yml官网：https://www.elastic.co/guide/en/elasticsearch/reference/current/modules.html################################### Cluster #################################### 代表一个集群,集群中有多个节点,其中有一个为...
Elasticsearch简介
Lilopop的博客
02-27 1230
ElasticSearch容器化安装
Elasticsearch的引导性检查(bootstrap check)
大牛之路
03-26 4057
引导性检查主要检查各种Elasticsearch和系统设置，并与操作安全的值进行对比，需要注意的是，如果es处于开发模式时，检查错误es会报warn日志提醒，但如果是正式生产模式的话，那就直接启动不了了。 开发模式和生产模式 一般es通过检查http.host和transport.host来判断是哪个模式，如果这些配置选项被配置成本地地址，例如127.0.0.1,那这个es就无法被外部访问，也无法...
Elasticsearch总结.doc
04-01
Elasticsearch 简介 简单描述Elasticsearch Elasticsearch的特性 分布式、全文检索、近实时搜索和分析、高可用、模式自由、restful 讲述Elasticsearch的架构和Elasticsearch 的核心 概念 二、索引数据 单词 文档...
elasticsearch学习总结.txt
11-09
ES的原理
Elasticsearch参考[7.5] - 设置Elasticsearch（2）
Zephyr的博客
03-20 692
原文链接：https://www.elastic.co/guide/en/elasticsearch/reference/7.5/bootstrap-checks.html 引导检查 总的来说，我们有很多用户遇到意外问题的经验，因为他们没有配置重要的设置。在以前版本的Elasticsearch中，对其中一些设置的错误配置被记录为警告。可以理解，用户有时会错过这些日志消息。为了确保这...
【ElasticSearch】ES简介及安装
weixin_40794189的博客
07-04 321
1、全文检索 1.1、简介 将非结构化数据中的一部分信息提取出来，重新组织，使其变得有一定结构，然后对此有一定结构的数据进行搜索， 从而达到搜索相对较快的目的。这部分从非结构化数据中提取出的然后重新组织的信息，我们称之索引。 例如字典，字典的拼音表和部首检字表就相当于字典的索引，对每一个字的解释是非结构化的， 如果字典没有音节表和部首检字表，在茫茫辞海中找一个字只能顺序扫描。 然而字的某些信息可以提取出来进行结构化处理，比如读音，就比较结构化，分声母和韵母，分别只有几种可以一一列举, 于是将读音拿出来按一定
ElasticSearch介绍
weixin_45600855的博客
09-03 203
ElasticSearch什么是ElasticSearchElasticSearch对比SolrElasticSearch相关概念概述Elasticsearch核心概念索引 index类型 type字段Field映射 mapping文档 document接近实时 NRT集群 cluster节点 node分片和复制 shards&replicasElasticSearch的客户端操作 什么是ElasticSearch Elaticsearch，简称为es， es是一个开源的高扩展的分布式全文检索引擎，
Elasticsearch - 配置详解
热门推荐
上善若水，水善利万物而不争。
11-03 2万+
1.1. 配置详解elasticsearch的config文件夹里面有两个配置文 件：elasticsearch.yml和logging.yml，第一个是es的基本配置文件，第二个是日志配置文件，es也是使用log4j来记录日 志的，所以logging.yml里的设置按普通log4j配置文件来设置就行了。下面主要讲解下elasticsearch.yml这个文件中可配置的 东西。cluster.na
ElasticeSearch用法(使用Transport操作ES服务器),增删改查和批量操作
qq779247257的博客
07-24 1万+
Elasticsearch 大型网站的搜索 百度、淘宝、京东 1、Lucene ​ 单独使用Lucene实现站内搜索需要开发的工作量较大，主要表现在：索引维护、索引性能优化、搜索性能优化等，因此不建议采用。 2、Solr ​ Solr 是Apache下的一个顶级开源项目，采用Java开发，它是基于Lucene的全文搜索服务器。Solr提供了比Lucene更为丰富的查询语言，同时实现了可配置、可扩展...
Elasticsearch之配置详解
Yashon
10-22 1万+
配置详解Cluster 集群名称，默认为elasticsearch： cluster.name: elasticsearch 设置一个节点的并发数量，有两种情况，一种是在初始复苏过程中： cluster.routing.allocation.node_initial_primaries_recoveries: 4 另一种是在添加、删除节点及调整时： cluster.routing.alloc
Elasticsearch 开发模式和生产模式
a807719447的专栏
06-17 696
1.开发者模式 2.生产模式 两者配置区别 系统级设置问题以及日志打印问题，启动引导检查问题
ES集群异常处理和进阶实践
大数据，Linux，服务器，技术、架构，方案
10-11 1727
2.x版本可API动态设置，在ES 5版本之后就不能动态设置这些参数了，通过修改ES主配置文件，然后重启ES生效。ES关于网络的配置参数丰富繁杂（它们都不是可动态更新的），ES双网分离场景的最佳实践是ES集群内部采用万兆-业务网，对外服务则双网都通，有管理及合规要求时按照要求设置单一网络。略微下调主分片个数使其均匀分布（10 -> 8），将索引的副本数从1减为0，相当于写入压力减少一半，至此现场问题解决，没再出现上述报错。如果有集群管理，从集群页面的自定义配置中添加，保存，最后重启ES集群。
Elasticsearch6.2基本概念及核心配置文件详解
这个名字想了很久
04-03 7801
以下内容,都摘自官网6.2 版本文档,有些属性名字和以前都不一样,如果没有找到对应的属性,请阅读官方文档进行查找：官网：https://www.elastic.co/guide/en/elasticsearch/reference/current/_basic_concepts.html基本概念近实时（Near Realtime[NRT]）Elasticsearch是一个接近实时的搜索平台。这意味...
ELK 企业级日志分析系统
weixin_59105297的博客
12-11 237
ELK 企业级日志分析系统
ElasticSearch 一些配置参数
Angus
05-31 1778
1.数据目录和日志目录，生产环境下应与软件分离 1 2 3 4 5 6 7 8 #注意：数据目录可以有多个，可以通过逗号分隔指定多个目录。一个索引数据只会放入一个目录中！！ path.data:/path/to/data1,/path/to/data2 # Path to log files: path.logs:/path/to/logs # Pat...
Elasticsearch的学习
最新发布
08-26
- *2* [ElasticSearch学习总结（基础篇，可学习，可复习）](https://blog.csdn.net/Gaowumao/article/details/124484971)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值