elasticsearch7.6.1笔记

最新推荐文章于 2023-09-08 20:52:05 发布
最新推荐文章于 2023-09-08 20:52:05 发布
阅读量474 收藏 2
点赞数 1
分类专栏： 学习 文章标签： elasticsearch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/bluejiejue/article/details/107314973
版权

前置说明

最近需要接手elasticsearch 6.8版本之前 之前使用过程中发现权限验证属于软件付费功能 6.8 7.X之后安全相关才是免费 找到得7以上得教程 目前b站找到教程如下：
狂神说
本笔记记录学习过程

安装

1、选择下载7.6.1安装链接

java 1.8 可参考我环境部署博文中 java模块
elasticsearch
logstash
kibana
想用docker 像docker低头 后面可能会补充docker安装步骤

2、linux安装

tar xvzf elasticsearch-7.6.1-linux-x86_64.tar.gz
tar xvzf kibana-7.6.1-linux-x86_64.tar.gz
tar xvzf logstash-7.6.1.tar.gz

地方不够 先扩了个容

3、window 安装

下载对应得版本zip elasticsearch,head,kibana包

elasticsearch

直接解压
启动前修改
elasticsearch.yml

#关闭权限验证我猜
xpack.ml.enabled: false
#head跨域解决
http.cors.enabled: true
http.cors.allow-origin: "*"

运行bin目录下得elasticsearch.bat 文件启动
浏览器打开验证是否安装成功
127.0.0.1:9200

head

head依赖python环境（本地已有npm环境安装步骤略）
命令行在head主目录下
npm install 安装报错
npm -g install phantomjs-prebuilt@2.1.16 --ignore-script
head 启动 npm run start
浏览器打开验证是否成功
127.0.0.1:9100

kibana

也是在bin目录下运行bat文件直接执行
默认端口5601

4、docker安装

执行操作扩大空间（不执行会因为空间不够启动不起来）

vi /etc/sysctl.conf 
#加如下内容
vm.max_map_count=655360
#执行
sysctl -p

ulimit -u 65535

执行镜像下载（由于下载总是卡住 所以镜像下载和运行分开执行）

elasticsearch
docker pull elasticsearch:7.6.1
 

 
docker network create somenetwork
## 本地windows安装了 es了 不想端口冲突 就另外指了一个端口
docker run -d --name elasticsearch --net somenetwork -p 19200:9200 -p 19300:9300  -e "discovery.type=single-node" -e "bootstrap.memory_lock=true" -e "http.cors.enabled=true" -e "http.cors.allow-origin=*" -e ES_JAVA_OPTS="-Xms1g -Xmx1g"  elasticsearch:7.6.1

## 添加挂载
mkdir /usr/share/elasticsearch/data

docker run -d --name elasticsearch --net somenetwork -p 19200:9200 -p 19300:9300  -e "discovery.type=single-node" -e "bootstrap.memory_lock=true" -e "http.cors.enabled=true" -e "http.cors.allow-origin=*" -e ES_JAVA_OPTS="-Xms1g -Xmx1g"  -e LANG="C.UTF-8" -v /usr/share/elasticsearch/data  --restart=always  elasticsearch:7.6.1

docker logs elasticsearch

浏览器访问
宿主ip:19200
172.21.40.188:19200
在这里插入图片描述

kibana
docker pull kibana:7.6.1
docker run -d --name kibana --net somenetwork -p 5601:5601 --restart=always  kibana:7.6.1

磁盘空间满了
先参考扩容
画个重点
创建加载点：mkdir /cm 挂载之后， 修改vi /etc/fstab 分区表文件，
在文件最后加上 /dev/sda3 /cm ext3 defaults 0 0 然后保存
不然重启后挂载盘就不见了别问我怎么知道

在参考移动docker路径
重启docker
执行镜像run报错
exec: “docker-proxy”: executable file not found in $PATH
参考错误处理
error: docker-runc not installed on system
参考错误处理

systemctl stop firewalld.service            #停止firewall
systemctl disable firewalld.service

由于我修改了elasticsearch出口端口
需要进入kibana镜像修改kibana配置

docker exec -it kibana /bin/sh
cd /config
vi kibana.yml
#修改端口 修改汉化
server.name: kibana
server.host: "0"
elasticsearch.hosts: [ "http://172.21.40.184:19200" ]
xpack.monitoring.ui.container.elasticsearch.enabled: true

exit

访问对应ip端口
http://172.21.40.184:5601/
可以使用了
重启镜像
分词器安装
找到对应版本分词器地址
ik分词器
进入容器

docker exec -it elasticsearch /bin/sh

./bin/elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.6.1/elasticsearch-analysis-ik-7.6.1.zip

网实在太差 我选择离线安装
传下载好的安装包去虚拟机
进入容器内部

docker exec -it elasticsearch /bin/sh
cd plugins
mkdir ik
exit
docker cp /orcas/software/elasticsearch-analysis-ik-7.1.0.zip es:/usr/share/elasticsearch/plugins/ik/
docker exec -it elasticsearch /bin/sh
cd /plugins/ik/
unzip elasticsearch-analysis-ik-7.1.0.zip 
rm -rf elasticsearch-analysis-ik-7.1.0.zip 
#解决容器乱码问题
cat << EOF > /root/.vimrc
:set encoding=utf-8
:set fileencodings=ucs-bom,utf-8,cp936
:set fileencoding=gb2312
:set termencoding=utf-8
EOF
exit
docker restart elasticsearch

重启docker

打开kibana测试分析器
http://172.21.40.184:5601/app/kibana#/dev_tools/console
在这里插入图片描述

开始学习

分词器简单使用

已ik分词器为例：

GET _analyze
{
  "analyzer": "ik_smart",
  "text": "最少切分"
}
GET _analyze
{
  "analyzer": "ik_max_word",
  "text": "最细力度切分"
}

在这里插入图片描述

ik分词器添加自己的字典

在这里插入图片描述
进入docker镜像

docker exec -it elasticsearch /bin/sh
cd plugins/ik/config/
#创建自己的字典文件
vi my.dic
#保存记得设置文件编码格式不然自定义字典不生效
:set fileencoding=utf-8
#编写自己的字典

在这里插入图片描述

IKAnalyzer.cfg.xml
#吧字典文件配置添加到 ext_dict

在这里插入图片描述
退出镜像重启镜像

exit

在这里插入图片描述
词典生效

基本命令

创建索引

PUT /索引名/类型名/文档id
{ 请求体}

PUT /helo/type1/1
{
  "name":"吴邪",
  "age":3
}

在这里插入图片描述
后期会慢慢废弃类型名 创建提示建议使用语法如下

/{index}/_doc/{id}
/{index}/_doc
/{index}/_create/{id}

基本数据类型

字符串类型 text 、 keyword
数值类型 long, integer, short, byte, double, float, half_float, scaled_float
日期类型 date
te布尔值类型 boolean
二进制类型 binary

设置映射规则 关键字 mappings(设置规则)、properties（设置属性）、type（设置类型）
相当于建表

PUT /hello2
{
  "mappings": {
  
    "properties": {
      "name":{
        "type": "text"
      },
      "age":{
        "type": "long"
      },
      "birthday":{
        "type": "date"
      }
    }
  }
}

在这里插入图片描述

获取信息

获取索引信息： GET 索引（可以查看规则信息）
获取类型信息： GET 索引/类型（默认_doc）
获取某行具体文档数据： GET 索引/类型（默认_doc）/行id

GET hello2

在这里插入图片描述
不指定规则 直接设置数据也根据数据类型创建规则
在这里插入图片描述
在这里插入图片描述

通过_cat 可以获取一些es信息
GET _cat/health
GET _cat/indices?v

修改

修改可以用put 覆盖 返回值可以判断出时新增还是修改 版本号也会有体现 但是未提交字段数据会被清空

在这里插入图片描述

POST /索引/类型/文档id/_update
{“doc”:{“要修改属性”:“要修改值”}}
只修改对应字段 其他字段不影响

POST /hello3/_doc/1/_update
{
 "doc":{ 
   "name":"皮皮俑"
 }
}

在这里插入图片描述

kibana 提示语法过时 我们尝试使用新版语法
/{index}/_update/{id}

POST  /hello3/_update/1
{
 "doc":{ 
   "name":"皮皮俑修改"
 }
}

在这里插入图片描述

删除

删除索引信息： DELETE 索引（可以查看规则信息）
删除类型信息： DELETE 索引/类型（默认_doc）
删除某行具体文档数据： DELETE 索引/类型（默认_doc）/行id

例子：
在这里插入图片描述

查询

先添加部分数据

PUT /els/user/1
{
  "name":"",
  "age":4,
  "desc":""
  "tags":["","",""]
}

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

简单查询

GET /{index}/{type}/{id}（后期会舍弃type类型）
GET /{index}/_doc/{id}
GET /{index}/_search?q=name:{parm}
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

复杂查询

字段匹配 某字段包含某语句的文档会呗查询出来
hit 查询出来的索引和文档信息
默认按照score排序 score 为匹配度
GET /{index}/_search
{
“query”: {
“match”: {
“FIELD”: “TEXT”
}
}
}
与query 并列添加,"_source": “{field}” 代表结果过滤
{
“query”: {
“match”: {
“FIELD”: “TEXT”
}
},
“_source”: “{field}”
}
排序 与query并列添加"sort": [{“FIELD”: {“order”: “desc”}}]
{
“query”: {
“match”: {
“FIELD”: “TEXT”
}
},
“sort”: [{“FIELD”: {“order”: “desc”}}],
“_source”: “{field}”
}
分页 与query并列添加"from": 0, “size”: 20
{
“query”: {
“match”: {
“FIELD”: “TEXT”
}
},
“sort”: [{“FIELD”: {“order”: “desc”}}],
“_source”: “{field}”,
“from”: 0,
“size”: 20
}
and 查询 bool must
GET /{index}/_search
{
“query”: {
“bool”: {
“must”: [
{
“match”: {
“FIELD”: “TEXT”
}
},{
“match”: {
“FIELD”: “TEXT”
}
}
]
}
}
}
or bool shoud
GET /{index}/_search
{
“query”: {
“bool”: {
“shoud”: [
{
“match”: {
“FIELD”: “TEXT”
}
},{
“match”: {
“FIELD”: “TEXT”
}
}
]
}
}
}
not bool must_not
GET /{index}/_search
{
“query”: {
“bool”: {
“must_not”: [
{
“match”: {
“FIELD”: “TEXT”
}
}
}
}
}
过滤器 与 filter 与must shoud must_not并列 可查询区间
,“filter”: {
“range”: {
“FIELD”: {
“gte”: 10,
“lte”: 20
}
}
}

倒排索引精确查询 term
term 直接精确查询
match 使用分词器
text 会被分词器解析 keyword 不会用分词器解析
GET {index}/_search
{
“query”: {
“term”: {
“FIELD”: “test”
}
}
}
如果是test 类型会被解析 如果是keyword类型的字段 不会解析 term 会完全匹配才能查的出来
高亮与query并列 指定高亮字段 可添加前后缀
“highlight”: {
“pre_tags”: “

”,
“post_tags”: “

”,
“fields”: {
“name”: {}
}
}
执行例子
GET /els/_search
{
  "query": {
    "match": {
      "name": "吴邪"
    }
  }
}

在这里插入图片描述

GET /els/_search
{
  "query": {
    "match": {
      "name": "吴邪"
    }
  },
  "_source":["name","desc"]
}

在这里插入图片描述

GET /els/_search
{
  "query": {
    "match": {
      "name": "吴邪"
    }
  },
  "sort": [
    {
      "age": {
        "order": "desc"
      }
    }
  ], 
  "_source":["name","desc"]
}

在这里插入图片描述

GET /els/_search
{
  "query": {
    "match": {
      "name": "吴邪"
    }
  },
  "sort": [
    {
      "age": {
        "order": "desc"
      }
    }
  ], 
  "_source":["name","desc"],
  "from": 0,
  "size": 2
}

在这里插入图片描述

GET /els/_search
{
  "query": {
    "bool": {
      "must": [
        {
          "match": {
            "name": "吴邪"
          }
        },{
          "match": {
            "age": 3
          }
        }
      ]
    }
  }
}

在这里插入图片描述

GET /els/_search
{
  "query": {
    "bool": {
      "must": [
        {
          "match": {
            "name": "吴邪"
          }
        },{
          "match": {
            "age": 66
          }
        }
      ]
    }
  }
}

在这里插入图片描述

GET /els/_search
{
  "query": {
    "bool": {
      "should": [
        {
          "match": {
            "name": "吴邪"
          }
        },{
          "match": {
            "age": 66
          }
        }
      ]
    }
  }
}

在这里插入图片描述

GET /els/_search
{
  "query": {
    "bool": {
      "must_not": [
        {
          "match": {
            "age": 66
          }
        }
      ]
    }
  }
}

在这里插入图片描述

GET /els/_search
{
  "query": {
    "bool": {
      "must": [
        {
          "match": {
            "age": 66
          }
        }
      ],"filter": {
        "range": {
          "age": {
            "gte": 4,
            "lte": 80
          }
        }
      }
    }
  }
}

在这里插入图片描述

GET /els/_search
{
  "query": {
   "match": {
     "tags": "老 叔"
   }
  }
}

在这里插入图片描述

GET /els/_search
{
  "query": {
   "match": {
     "name": "吴"
   }
  },"highlight": {
    "pre_tags": "<p>",
    "post_tags": "</p>", 
    "fields": {
      "name": {}
    }
  }
}

在这里插入图片描述

就这样了 要玩别的去了~

bluejiejue
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
狂神说笔记,个人觉得不赖
08-15
适合Java学者
狂神说Elastic search学习笔记
weixin_48412846的博客
09-08 1083
狂神Elastic search笔记简介安装es安装安装可视化界面下载kibanaes核心概念理解分片（倒排索引）ik分词器插件安装 视频链接： 简介 lucene是一套信息检索工具包！jar包，不包含搜索引擎系统 包含：索引结构，读写索引的工具！排序，搜索规则工具类 lucene和es的关系： es是基于lucene做的一些封装和增强 es是一个开源的高扩展的分布式的全文检索引擎，它可以近乎实时的存储，检索数据，本身扩展性好，可以扩展到上百台服务器，处理pb（大数据时代）级别的数据，它通过简单的REST
ElasticSearch个人学习笔记 狂神说
DAMN WHERE'D YOU FIND THAT
05-03 3098
狂神说 ElasticSearch 学习笔记
ElasticSearch狂神说笔记
weixin_44273367的博客
06-01 630
Elasticsearch，简称为 es，es 是一个基于 json 的开源，高扩展的分布式全文检索引擎，它可以近乎实时的存储检索数据，本身扩展性很好，可以扩展到上百台服务器，处理 pb 级别的数据，es 也使用 java 开发并使用 Lucene 作为其核心来实现所有索引和搜索的功能，但是它的目的是通过简单的来隐藏 Lucene 的复杂性，从而让全文搜索变得简单。
4. ElasticSearch学习笔记
09-14 2700
ElasticSearch学习笔记1. ElasticSearch概述2. ES与Solr的差别2.1. Solr简介2.2. Lucene简介2.3. ES VS Solr3. ElasticSearch 安装4. Kibana安装5. ES核心概念6. IK分词器7. Restful风格说明8. 关于文档的基本操作9. 集成SpringBoot10. 实战：模拟全文搜索-京东搜索 1. ElasticSearch概述 2. ES与Solr的差别 2.1. Solr简介 2.2. Lucene简介
Elasticsearch7.6.1
10-05
Elasticsearch7.6.1，Elasticsearch7.6.1，Elasticsearch7.6.1，Elasticsearch7.6.1，Elasticsearch7.6.1，Elasticsearch7.6.1，Elasticsearch7.6.1，Elasticsearch7.6.1，Elasticsearch7.6.1，Elasticsearch7.6.1，...
ElasticSearch笔记
11-20
ElasticSearch，简称为ES，是一个开源的、高度可扩展的分布式全文检索引擎。它基于 Java 开发，并利用 Lucene 作为其核心，实现了高效索引和搜索功能。ElasticSearch 通过Resultful API简化了与Lucene的交互，隐藏了...
elasticsearch7.6.1整套软件安装包.zip
03-22
Elasticsearch 7.6.1 是一个流行的开源搜索引擎和分析引擎，广泛应用于大数据处理、日志分析、实时搜索和信息检索等场景。这个压缩包“elasticsearch7.6.1整套软件安装包.zip”包含了学习 Elasticsearch 整个技术栈...
Elasticsearch-7.6.1安装包
07-25
**Elasticsearch 7.6.1 安装与配置详解** Elasticsearch 是一个开源的、分布式的全文搜索引擎，以其高效、灵活和强大的搜索功能而广受开发者喜爱。7.6.1 版本是 Elasticsearch 的一个重要版本，它包含了多项优化和...
elasticsearch7.6.1和7.9版本资源下载.zip
01-15
elasticsearch7.6.1和7.9版本资源下载.zip
(狂神)ElasticSearch快速入门笔记，ElasticSearch基本操作以及爬虫(Java-ES仿京东实战)
04-18
(狂神)ElasticSearch快速入门笔记，ElasticSearch基本操作以及爬虫(Java-ES仿京东实战),包含了小狂神讲的东西，特别适合新手学习，笔记保存下来可以多看看。好记性不如烂笔头哦~，ElasticSearch，简称es，es是一个开源的高拓展的分布式全文搜索引擎它可以近乎实时的存储、检索数据；本身拓展性很好，可以拓展到上百台服务器，处理PB级别的数据。es也是用Java开发并使用Lucene作为其核心来实现所有索引和搜索功能，但是它的目的是通过简单的RESTful API来隐藏Lucene的复杂性，从而让全文搜索变得简单。es基本是开箱即用（解压就可以用！），非常简单。Solr安装略微复杂一点！
Elasticsearch笔记
10-30
Elasticsearch笔记
Elasticsearch笔记.pdf
11-01
Elasticsearch笔记.pdf
elasticsearch-analysis-ik-7.6.1.zip
03-19
ElasticSearch-analysis-ik-7.6.1中文分词插件,配合ElasticSearch7.0以上的版本使用
elasticsearch7.6.1-ik分词器
01-18
elasticsearch7.6.1-ik分词器
Docker‘s “executable file not found in $PATH: unknown“ trying to run “cd“
巍巍玮玮的博客
03-07 2767
很熟悉的情况，又是莫名其妙好好的东西突然自己坏了，以前都好好的，最近突然冒出这个问题，在dockers容器外面输命令，容器就会报这个错，从stackoverflow上找到了解决办法 以前用的命令是 docker exec -it container ls 改用这个命令 docker exec -it jwxt_php /bin/sh -c 'ls' -it 去了也行，主要是/bin/bash后面-c接命令 原因如下： 英文原文回答： cdis aspecial built-i...
狂神说-ElasticSearch笔记
Mountain.SY的博客
09-08 199
官网：https://www.elastic.co/cn/downloads/elasticsearch，简称为es，es是一个开源的高扩展的分布式全文检索引擎，它可以近乎实时的存储检索数据;本身扩展性很好，可以扩展到上百台服务器，处理PB级别(大数据时代）的数据。es也使用java开发并使用Lucene作为其核心来实现所有索引和搜索的功能，但是它的目的是通过简单的来隐藏Lucene的复杂性，从而让全文搜索变得简单。
2020-11-24-ElasticSearch7.x学习笔记
qq_40087648的博客
12-04 1607
笔记记录 B站狂神说Java的ElasticSearch课程：https://www.bilibili.com/video/BV17a4y1x7zq 在学习ElasticSearch之前，先简单了解一下Lucene： Doug Cutting开发 是apache软件基金会4 jakarta项目组的一个子项目 是一个开放源代码的全文检索引擎工具包 不是一个完整的全文检索引擎，而是一个全文检索引擎的架构，提供了完整的查询引擎和索引引擎，部分文本分析引擎（英文与德文两种西方语言） 当前以及.
ElasticSearch（狂神说笔记）
weixin_45515047的博客
12-11 2442
ElasticSearch（狂神说笔记） ES安装及head插件安装 声明：JDK 1.8以上，最低要求！ElasticSearch 客户端。界面工具！ Java 开发，ElasticSearch的版本和我们之后对应的Java的核心jar包！版本对应！JDK环境是正常！ 官网：https://www.elastic.co/cn/elasticsearch/ ELK三件客，解压即用‘ 我用的都是 7.6.1的版本 window下安装 解压即用 熟悉目录 bin 启动文件 config 配置文件 log
elasticsearch7.6.1 下载
最新发布
12-25
在下载 Elasticsearch 7.6.1 时，首先需要进入 Elasticsearch 的官方网站或者官方 Github 页面，并找到相应的下载链接。在下载页面上，可以选择适合自己操作系统的版本，比如 Windows、Linux 或者 macOS。在选择完...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值