ES基础篇 Docker安装单节点ES

已于 2023-06-24 00:30:32 修改
阅读量1.4k 收藏 3
点赞数
分类专栏： ES从入门到跑路 文章标签： elasticsearch docker 大数据 es
于 2023-05-26 21:22:53 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u010088278/article/details/130893729
版权
本文介绍了在一个阿里云基础版实例上部署Elasticsearch7.17.1的详细步骤，包括环境配置、Docker镜像、docker-compose.yml的编写和启动，以及解决权限和max_map_count问题。还提及了可选的可视化工具elasticsearch-head和Kibana的使用。
摘要由CSDN通过智能技术生成

文章目录

温故知新，以为师！

前言

最近项目上突然用的ES，记得上次使用还是在上家公司的时候，都过去了两三年了，概念、命令、DSL统统忘了，模模糊糊的记录，让本身一个简单的开发花了很长时间，最后还是在边复习、边实践的基础上做完，有些惭愧了，所以不得不把ES相关知识看一遍，最后发现好多知识点，想想还是踏踏实实写下来，温故知新！！！

环境配置

硬件环境

阿里云乞丐版，程序猿你懂得，舍得花时间，空间换时间，SWAP，将白嫖坚持到底！！！

[root@Genterator ~]# cat /proc/cpuinfo | grep name | cut -f2 -d: | uniq -c
      1  Intel(R) Xeon(R) Platinum 8269CY CPU @ 2.50GHz
      
[root@Genterator ~]# cat /proc/meminfo | grep MemTotal
MemTotal:        1790344 kB

[root@Genterator ~]# free -h
              total        used        free      shared  buff/cache   available
Mem:          1.7Gi       1.4Gi       134Mi       0.0Ki       212Mi       204Mi
Swap:         2.5Gi       114Mi       2.4Gi

软件环境

  • Elasticsearch
    ES选择上根据个人需要把，我选择的7.17.1， 个人建议跟公司一致，或者比公司高几个版本的，因为每个版本都会有一些变动，比如前公司用6版的，里面有doc概念，结果在7版本就取消了，一切根据个人需要吧，如果喜欢尝鲜的，可以使用最新版！
[root@Genterator single]# docker images
REPOSITORY                                      TAG                 IMAGE ID            CREATED             SIZE
docker.elastic.co/elasticsearch/elasticsearch   7.17.1              515ab4fba870        15 months ago       618MB
  • elasticsearch-head
    这个工具看个人吧，图形化界面，建议使用Kibana，这个是ELK之一，也是elastic的又一大利器，咱们后面慢慢说，第一次玩es的建议安装个elasticsearch-head，随便玩玩，大概熟悉一下就ok了
[root@Genterator single]# docker images
REPOSITORY                                      TAG                 IMAGE ID            CREATED             SIZE
mobz/elasticsearch-head                         5                   b19a5c98e43b        6 years ago         824MB

ES部署

创建路径

根据个人爱好吧，我喜欢放到/opt/volume目录下，这个根据自己需要决定

[root@Genterator volume]# mkdir -p /opt/volume/es/single/data
[root@Genterator volume]# mkdir -p /opt/volume/es/single/logs
[root@Genterator volume]# mkdir -p /opt/volume/es/single/plugins

分别对应：

  • 数据文件夹
  • 日志文件夹
  • 插件文件夹

编写docker-compose.yml

version: '3.6'
services:
  elasticsearch:
    image: elasticsearch:7.17.1
    container_name: es
    environment:
      node.name: es-single
      cluster.name: es-cluster
      discovery.type: single-node
      ES_JAVA_OPTS: "-Xms512m -Xmx512m"
      # 开启es跨域
      http.cors.enabled: "true"
      http.cors.allow-origin: "*"
      http.cors.allow-headers: Authorization
      # 安全控制（根据个人需要选择打开或关闭）
      # xpack.security.enabled: "true"
      # xpack.security.transport.ssl.enabled: "true"
      # ELASTIC_PASSWORD: "123456"
    ulimits:
      memlock:
        soft: -1
        hard: -1
    volumes:
      - /opt/volume/es/single/data:/usr/share/elasticsearch/data
      - /opt/volume/es/single/plugins:/usr/share/elasticsearch/plugins
      - /opt/volume/es/single/logs:/usr/share/elasticsearch/logs 
    ports:
      - 9200:9200
      - 9300:9300
    networks:
      - elastic
  elasticsearch-head:
    image: mobz/elasticsearch-head:5
    container_name: es-head
    ports:
      - 9100:9100
    networks:
      - elastic
networks:
  name:
  elastic:
    driver: bridge
    name: elastic
    ipam:
      driver: default
      config:
        - subnet: 172.30.0.0/25
          gateway: 172.30.0.1

说明：

  1. 里面包含es和es-head，根据需要选择
  2. 给es设置了单独的网管，根据需要自行选择

启动命令

[root@Genterator single]# docker-compose up -d

首次启动建议去掉-d， 此为后台启动，第一次启动肯定会遇到各种各样的问题，建议先在控制台打印成功的标志后，再使用-d在后台启动

验证

es验证

访问自己的域名，端口9200，如果自己设置了端口映射，根据自己的设置的进行调整

http://127.0.0.1:9200

成功标志：

{
  "name" : "es-single",
  "cluster_name" : "es-cluster",
  "cluster_uuid" : "_na_",
  "version" : {
    "number" : "7.17.1",
    "build_flavor" : "default",
    "build_type" : "docker",
    "build_hash" : "e5acb99f822233d62d6444ce45a4543dc1c8059a",
    "build_date" : "2022-02-23T22:20:54.153567231Z",
    "build_snapshot" : false,
    "lucene_version" : "8.11.1",
    "minimum_wire_compatibility_version" : "6.8.0",
    "minimum_index_compatibility_version" : "6.0.0-beta1"
  },
  "tagline" : "You Know, for Search"
}
es-head验证

访问自己部署的ip地址和端口，我设置的映射端口为9100:

http://127.0.0.1:9100/

成功标志：
在这里插入图片描述

  1. 输入1处地址，页面返回则表示es-head正常
  2. 输入2处地址（es访问地址），点击连接后3处显示green则表示正常
  3. es-head连接需要跨域，有以下解决方式：
    • 配置文件中添加以下内容来允许跨域访问 Elasticsearch
    - http.cors.enabled=true
- http.cors.allow-origin=*
    在生产环境中，不建议使用 http.cors.allow-origin=* 开启所有来源的跨域请求。您可以根据需要配置具体的允许来源，以增强安全性。
    • 在 es-head 配置文件中，将 es_host 设置为 Elasticsearch 的容器名称或 IP 地址:
      在这里插入图片描述
      至此，单节点ES配置结束！！！

问题总结

我在部署中遇到问题比较少，主要有两方面：

权限问题
[root@Genterator single]# docker-compose up
WARNING: Some networks were defined but are not used by any service: name
Pulling elasticsearch (docker.elastic.co/elasticsearch/elasticsearch:7.17.1)...
7.17.1: Pulling from elasticsearch/elasticsearch
……
elasticsearch    | Exception in thread "main" java.lang.RuntimeException: starting java failed with [1]
elasticsearch    | output:
elasticsearch    | [0.000s][error][logging] Error opening log file 'logs/gc.log': Permission denied
elasticsearch    | [0.000s][error][logging] Initialization of output 'file=logs/gc.log' using options 'filecount=32,filesize=64m' failed.
elasticsearch    | error:
elasticsearch    | Invalid -Xlog option '-Xlog:gc*,gc+age=trace,safepoint:file=logs/gc.log:utctime,pid,tags:filecount=32,filesize=64m', see error log for details.
elasticsearch    | Error: Could not create the Java Virtual Machine.
……

这个主要问题在于我们映射本地数据卷时，只创建了文件夹，没有给予权限

# 给需要写入文件的文件夹赋予权限
[root@Genterator single]# chmod 777 -R /opt/volume/es
最大虚拟内存区数量
elasticsearch    | ERROR: [1] bootstrap checks failed. You must address the points described in the following [1] lines before starting Elasticsearch.
elasticsearch    | bootstrap check failure [1] of [1]: max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]
elasticsearch    | ERROR: Elasticsearch did not exit normally - check the logs at /usr/share/elasticsearch/logs/es-cluster.log

max_map_count文件包含限制一个进程可以拥有的VMA(虚拟内存区域)的数量，默认值是65536。

[root@Genterator single]# cat /proc/sys/vm/max_map_count
65530
[root@Genterator single]# sysctl -w vm.max_map_count=262144
vm.max_map_count = 262144
[root@Genterator single]# cat /proc/sys/vm/max_map_count
262144

后期更新

增加kinbana支持

在上面的docker-compose中增加下列内容，可以替换掉Elasticsearch-head部分，二者选其一即可！

  kibana:
    image: kibana:7.17.1
    container_name: es-kibana
    environment:
      #设置连接到es
      ELASTICSEARCH_URL: http://es:9200
      ELASTICSEARCH_HOSTS: http://es:9200
      #配置访问密码
      ELASTICSEARCH_USERNAME: "elastic"
      ELASTICSEARCH_PASSWORD: "Admin!123"
      #设置中文
      I18N_LOCALE: zh-CN
      I18N_COOKIE_LANG_ENABLED: 'true'
    ulimits:
      memlock:
        soft: -1
        hard: -1
    mem_limit: 1g
    ports:
      - 5601:5601
    networks:
      - elastic

注：
内存不足者，或者丐版阿里云的，一定一定要设置mem_limit，限制内存哦，elastic的三大组件都很消耗内存！！

Genterator
关注
专栏目录
ES单机版Docker安装指导文档
09-26
docker安装es单机版，还有监控工具的安装指导说明，1.虚拟机安装建议centos7.6，5.ES监控软件cerebro安装。
Docker上安装部署Elasticsearch(ES)详细教程
djdjfjf1的博客
12-04 1万+
Docker部署ES,Kibana和IK分词器
ES(Elasticsearch)的docker安装部署教程
qq_33034733的博客
05-24 1万+
需要手动将docker中的es四个目录同步到宿主机上。1.1 拉取docker镜像。1.2 创建es挂载目录。1.4 桥接网络节点配置。3、logstash部署。1.3 开放防火墙端口。1.5 容器实例启动。2、Kibana部署。
docker 安装 ES
最新发布
WYH1233211234567的博客
09-19 794
安装成功后访问9200，出现以下信息代表安装成功。# 打开 config 目录。# 创建 数据 挂载目录。# 创建 配置 挂载目录。# 创建 插件 挂载目录。# 创建 es 目录。# 打开 es 目录。
docker安装ES
菜鸡的博客
10-13 2万+
首先拉取镜像： sudo docker pull elasticsearch:7.12.0 elasticsearch:7.12.0:我安装的版本是7.12.0，可以根据实际的情况安装 创建docker容器挂在的目录： sudo mkdir -p /opt/elasticsearch/config sudo mkdir -p /opt/elasticsearch/data sudo mkdir -p /opt/elasticsearch/plugins 配置文件: echo "http.host: 0
docker容器安装ES
nuc_badaomen的博客
03-28 1259
访问：宿主机ip:9200。
docker简易搭建ElasticSearch集群
热门推荐
做对一件事很重要
10-23 4万+
写在前面：为什么要用ElasticSearch？我们的应用经常需要添加检索功能，开源的Elastic Search是目前全文检索引擎的首选。它可以快速的存储、搜索和分析海量数据。ElasticSearch是一个分布式搜索框架，提供RestfulAPI，底层基于Lucene，采用多shard（分片）的方式保证数据安全，并且提供自动resharding的功能。 Elasticsearch: 权威指南(...
Docker安装Elasticsearch
01-20
1,拉去镜像 docker pull elasticsearch ...docker cp my_es:/usr/share/elasticsearch/config/elasticsearch.yml /usr/share/elasticsearch.yml 4，把创建好的elasticsearch服务停止删除 docker
docker安装Elasticsearch7.6集群并设置密码
01-09
Elasticsearch从6.8开始， 允许免费用户使用X-Pack的安全功能， 以前安装es都是裸奔。接下来记录配置安全认证的方法。 为了简化物理安装过程，我们将使用docker安装我们的服务。 一些基础配置 es需要修改linux的一些...
es docker 部署 elasticsearch.yml
03-19
docker run --name elasticsearch7.16.3 -p 127.0.0.1:9200:9200 -p 127.0.0.1:9300:9300 -e "discovery.type=single-node" -v /Users/xingyue/Home/xingyue/学习/工程化/es/elasticsearch.yml:/usr/share/elastic...
使用Docker搭建单机ES
记录记录记录记录
07-06 1152
根据提示，先输入y，然后输入密码，这里会要求输入多次，主要是需要给好几个系统添加密码，用户默认elastic。如果不需要登录将配置文件中的xpack.security.enabled: true 改为false。ik分词器为常用的中文分词器，如果你不需要用到中文搜索，这步可以跳过。至此，单节点的elasticsearch就部署好了。版本不同的找ES同版本的tag下载。#重新启动Kibana。
docker安装部署Elasticsearch（ES）以及相关配置
liao3399084的博客
01-11 3018
mysql用作持久化存储，ES用作检索基本概念：index库>type表>document文档。
6.1 Elasticsearch（一）Docker搭建ES集群
蟑螂恶霸的博客
10-12 2228
Elasticsearch是一个分布式搜索引擎服务器，搜索引擎有自己专门的搜索引擎服务器，而不是依靠数据库来做，我们搜索内容时，如果使用数据库来做，则需要模糊查询数据库中所有的数据，一条一条的去顺序比对，这种搜索效率是极低的；我们这里介绍Elasticsearch搜索引擎服务器，使用时需要将数据库中的数据同步到Elasticsearch服务器中，通过搜索引擎服务器去做搜索查询，因为其只支持搜索查询，专职于搜索服务的支持，其效率很高；后面我们要使用多个端口，为了避免繁琐的开放端口操作，我们关掉防火墙。
Docker基础：ES详解
ReturnTmp的博客
07-11 1989
测试：curl localhost:9200{ "name" : "56bbec414277", "cluster_name" : "docker-cluster", "cluster_uuid" : "Q94SOO_LRJ-wZ20u_P_M6w", "version" : { "number" : "7.6.2", "build_flavor" : "default", "build_type" : "docker", "build_hash" : "ef
【Hive】（二）Hive 安装部署_tar –zxvf apache-hive-1
2401_84182097的博客
04-17 384
（2）解压apache-hive-1.2.1-bin.tar.gz到/opt/soft/目录下面。（3）修改apache-hive-1.2.1-bin.tar.gz的名称为hive。在hive110目录下新建一个文件夹warehouse。（5）进入conf文件目录下，修改。
Elastic Search 安装部署最全教程（Docker）
忆水思寒的博客
07-28 4104
因为我们还需要部署kibana容器，因此需要让es和kibana容器互联。
Docker安装ES详解(elasticsearch)
cmh1008611的博客
08-26 2720
注:最小安装要使用wget命令 需要先安装wget。:这个命令是使用yum源安装,请确保已安装yum源。注:如果是本地安装的虚拟机,就不需要执行。(1)服务器ip + 9200 结果。(2)服务器ip + 5601 结果。//检查是否安装yum源。的虚拟机,就不需要执行。
docker 安装ES单机
码码哈哈的博客
03-15 3629
1.环境centos8/docker docker pull elasticsearch:7.4.2 2.运行容器 docker run -d --name mkes -p 9200:9200 -p 9300:9300 -e ES_JAVA_OPTS="-Xms512m -Xmx512m" -e “discovery.type=single-node” elasticsearch:7.4.2 3.es配置文件添加跨域信息 1.首先要进入容器操作 docker exec -it mkes /bin/
一键部署与管理Elasticsearch单节点环境
本篇文章主要介绍了如何在本地环境中安装和配置Elasticsearch（简称ES），一个流行的分布式、开源全文搜索引擎和分析引擎，适用于大数据场景。文章分为三个步骤进行详细讲解。 首先，创建网络环境。由于后续会同时...
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值