Linux下安装ElasticSearch

已于 2022-02-17 16:13:56 修改
阅读量4k 收藏 13
点赞数 3
分类专栏： Elasticsearch 文章标签： elasticsearch linux
于 2022-02-17 16:11:07 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/heartsdance/article/details/122984589
版权

Linux下安装ElasticSearch

一、下载 & 安装

  1. 先安装JDK

  2. 下载elasticsearch-7.0.0-linux-x86_64.tar.gz

    https://www.elastic.co/cn/downloads/elasticsearch

  3. 安装

    cd /opt
mkdir elasticsearch
rz
tar -zvxf elasticsearch-7.0.0-linux-x86_64.tar.gz -C elasticsearch/

  4. 配置

    vim config/elasticsearch.yml

    修改/添加以下配置

    #--------------------Cluster ----------------------
cluster.name: my-application #集群的名称，同一个集群该值必须设置成相同的
#-------------------- Node -----------------------
node.name: node-1 #该节点的名字
#-------------------- Paths -----------------------
path.data: /path/to/data #数据存放目录
path.logs: /path/to/logs #日志存放目录
#-------------------- Memory --------------------
bootstrap.memory_lock: true #禁止es内存交换
#-------------------- Network --------------------
network.host: 192.168.6.3 #所在机器IP
transport.tcp.port: 9300 #设置节点之间交互的端口号
http.port: 9200 #http访问端口
#使用head等插件监控集群信息需要打开此配置项
http.cors.enabled: true
http.cors.allow-origin: "*"
http.cors.allow-credentials: true
#-------------------- Discovery -------------------
discovery.zen.ping.unicast.hosts: ["host1", "host2"] #设置集群中的Master节点的初始列表，可以通过这些节点来自动发现其他新加入集群的节点
discovery.seed_hosts: ["192.168.6.3:9300"] #7.0.0版本为此参数改为此项
discovery.zen.minimum_master_nodes: 1 #设置这个参数来保证集群中的节点可以知道其它N个有master资格的节点，默认1
cluster.initial_master_nodes: ["node-1", "node-2"] #7.0.0版本为此参数改为此项

  5. 启动

    elasticsearch-7.0.0/bin/elasticsearch

  6. 启动异常详见ElasticSearsh/安装中遇到的问题及解决方案

二、安装中遇到的问题及解决方案

  1. 启动

    ./bin/elasticsearch

  2. java.lang.RuntimeException: can not run elasticsearch as root

    更换非root用户启动

    adduser elk   # 添加用户
passwd elk  # 给用户赋值
su elk -c './bin/elasticsearch' # 使用新用户启动

  3. java.nio.file.AccessDeniedException: …config/jvm.options

    原因：当前用户没有执行权限

    chown linux用户名 elasticsearch安装目录 -R
# ex: chown elk home/elasticsearch-6.2.4 -R

    同时要赋予用户data目录和logs目录的权限

  4. ERROR: [4] bootstrap checks failed

    (1) max file descriptors [4096] for elasticsearch process is too low, increase to at least [65536]

    原因：每个进程最大同时打开文件数太小

    查看当前每个进程最大同时打开文件数

    ulimit -Sn
ulimit -Hn

    修改配置

    vi /etc/security/limits.conf

    添加如下内容

    * soft nofile 65536
* hard nofile 131072

    用户退出后重新登录生效

    (2) memory locking requested for elasticsearch process but memory is not locked

    原因：锁定内存失败

    vim /etc/security/limits.conf

    添加如下内容

    * soft memlock unlimited
* hard memlock unlimited

    (3) max number of threads [3795] for user [elastic] is too low, increase to at least [4096]

    原因：最大线程个数太低

    vim /etc/security/limits.conf

    添加如下内容

    * soft nproc 2048
* hard nproc 4096

    (4) max virtual memory areas vm.max_map_count [65530] likely too low, increase to at least [262144]

    原因：操作系统的vm.max_map_count参数设置太小

    vim /etc/sysctl.conf

    添加

    vm.max_map_count=262144

    执行此命令使上面的配置生效

    sysctl -p

    或者直接通过命令设置

    sysctl -w vm.max_map_count=262144
sysctl -a | grep "vm.max_map_count" //查看是否修改成功

  5. 启动elasticsearch直接退出，并返回killed

    原因：内存不足， 需要设置es的虚拟机参数

    vim elasticsearch-7.0.0/bin/elasticsearch

    添加以下内容

    ES_JAVA_OPTS="-Xms1g -Xmx1g"

    或者

    vim elasticsearch-7.0.0/config/jvm.options

    添加以下内容

    -Xms1g
-Xmx1g

  6. failed to obtain node locks

    原因：本地最大储存节点数默认限制为1

     vim elasticsearch.yml

    添加以下内容

    node.max_local_storage_nodes: 你的本地储存节点数

  7. 无法通过网页访问

    先尝试本地访问

    curl -get 192.168.6.3:9200

    如果可以访问，关闭防火墙或开放端口即可

    # 关闭防火墙
systemctl stop firewalld.service
# 开启/关闭开机启动防火墙
systemctl enable/disable firewalld
# 开放端口
firewall-cmd --permanent --add-port=9200/tcp --zone=public
firewall-cmd --reload

  8. 启动head

    设置软连接

    cd node-v4.4.7-linux-x64/bin
grunt -> /elasticsearch-head-master/node_modules/grunt/bin/grunt
npm -> ../lib/node_modules/npm/bin/npm-cli.js

    启动

    grunt server &

    软连接用法参见/linux/常用命令

三、使用中遇到的问题及解决方案

  1. The number of object passed must be even but was [1]

    setSource(json) 参数json在高版本不能直接使用String 需要转成Map

  2. Rejecting mapping update to [XXX] as the final mapping would have more than 1 type: [XXX, XX]

    原因：6.0的版本不允许一个index下面有多个type，并且官方说是在接下来的7.0版本中会删掉type

  3. Validation Failed: 1: this action would add [2] total shards, but this cluster currently has [3000]/[3000] maximum shards open

    elasticsearch7默认每个node最多1000个shard，可通过cluster.max_shards_per_node=3000修改。但添加到yml中无效，可暂时通过http请求修改此值，等待官方debug。

    curl -X PUT localhost:9200/_cluster/settings -H "Content-Type: application/json" -d '{ "persistent": { "cluster.max_shards_per_node": "3000" } }'

  4. Fielddata is disabled on text fields by default.

    参考https://www.elastic.co/guide/en/elasticsearch/reference/current/fielddata.html

  5. high disk watermark [0b] exceeded on [O2-Ef7fET9S_MJNAL-q_yA][Desmond Pitt] free: -1b[100%], shards will be relocated away from this node

    es默认的磁盘分配策略问题。

    设置cluster.routing.allocation.disk.threshold_enabled: false

    参考https://www.elastic.co/guide/en/elasticsearch/reference/2.1/disk-allocator.html

  6. [parent] Data too large, data for [<transport_request>] would be larger than

    fielddata的内存被占用完了，其他索引无法分配更多的内存

    设置堆内存./elasticsearch -Xms10g -Xmx10g或export ES_HEAP_SIZE=10g

    参考https://www.elastic.co/guide/cn/elasticsearch/guide/current/heap-sizing.html

    es7修改了这个配置

    export ES_JAVA_OPTS="-Xms10g -Xmx10g"或修改config/jvm.options文件

    参考https://www.elastic.co/guide/en/elasticsearch/reference/current/heap-size.html
    https://www.elastic.co/guide/en/elasticsearch/reference/current/jvm-options.html

  7. 副本shards unassigned

    硬盘容量超过一定百分比

    禁用磁盘分配决策程序

    cluster.routing.allocation.disk.threshold_enabled: false

    参考https://www.elastic.co/guide/en/elasticsearch/reference/current/disk-allocator.html

四、安装head

  1. 安装git

    yum install git

  2. 下载head

    git clone git://github.com/mobz/elasticsearch-head.git

  3. 安装nodejs

    参见Linux/安装nodejs

  4. 启动

    cd elasticsearch-head/
npm install(使用cnpm需要先安装bzip2，yum install bzip2)
npm run start
open http://localhost:9100

    在elasticsearch.yml中添加，然后重启elasticsearch

    http.cors.enabled: true
http.cors.allow-origin: "*"

五、安装kibana

  1. 下载

    https://www.elastic.co/cn/downloads/kibana

  2. 解压

    tar -zxvf kibana-7.0.0-linux-x86_64.tar.gz

  3. 修改配置

    vim config/kibana.yml

    添加以下内容

    server.host: "192.168.6.3"
elasticsearch.hosts: ["http://192.168.6.3:9200"]

  4. 启动

    sh bin/kibana

  5. 访问

    http://localhost:5601

柴狗狗
关注
专栏目录
【ElasticSearch 集群】Linux安装ElasticSearch集群（图文解说详细版）
编码人生
10-02 1532
上次我们讲了linux环境安装ElasticSearch这次我们来将一下ElasticSearch的集群安装安装es的前置条件：这次我们安装的是版本，所以我们安装。
linux上安装elasticsearch
07-01
在linux环境下安装Java，测试成功后安装elasticsearch
Linux安装ElasticSearch
CSDN2022博客之星Top39；华为云博主7&，CSDN、稀土掘金、微信公众号、阿里云开发者社区、腾讯云社区、博客园、知乎、51CTO同名博主WHYBIGDATA；
03-10 9606
Linux安装ElasticSearch
Elasticsearch安装（linux）
最新发布
小小志
09-25 477
在linux系统中安装es
Linux安装elasticsearch
White_Zero的博客
02-13 2674
CentOS/Linux 安装elasticsearch
Linux下安装Elasticsearch
2301_76238237的博客
05-16 1296
自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。深知大多数Java工程师，想要提升技能，往往是自己摸索成长，自己不成体系的自学效果低效漫长且无助。因此收集整理了一份《2024年Java开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。
linux安装Elasticsearch
MellivoraZc
10-19 322
1、简介 Elasticsearch 是一个分布式可扩展的实时搜索和分析引擎,一个建立在全文搜索引擎 Apache Lucene(TM) 基础上的搜索引擎，不仅包括了全文搜索功能，还可以进行以下工作： 分布式实时文件存储，并将每一个字段都编入索引，使其可以被搜索。 实时分析的分布式搜索引擎。 可以扩展到上百台服务器，处理PB级别的结构化或非结构化数据 Elastic官网：开源搜索：Elasticsearch、ELK Stack 和 Kibana 的开发者 | Elastic Ela...
linux系统安装elasticsearch教程_linux 安装es
2401_84182318的博客
04-12 1243
课程，基本涵盖了95%以上大数据开发知识点，真正体系化！**
linux系统安装elasticsearch教程_linux 安装es(2)，2024年最新致Linux运维开发者
fdsgdsgdfw的博客
04-18 884
本书是获得了很多读者好评的Linux经典畅销书**《Linux从入门到精通》的第2版**。如果启动es，会报错，因为ES文件夹里自己携带了 JDK ，但是如果我们的 Linux 下安装了 JDK ，ES 就不会用自己自带的 JDK ，反而会使用我们 Linux 安装的 JDK ，这个时候如果两个jdk的版本不一致，就会造成jdk不能正常运行，报错,需要把配置修改下，注释部分是之前的，下面红框是修改后的 ,我的是我电脑的路口，修复制的时候记得修改路径。最全的Linux教程，Linux从入门到精通。
linux下elasticsearch8.2.2 rpm安装包 linux下elasticsearch8.2.2 rpm安装
07-02
linux下elasticsearch8.2.2 rpm安装包linux下elasticsearch8.2.2 rpm安装包linux下elasticsearch8.2.2 rpm安装包linux下elasticsearch8.2.2 rpm安装包linux下elasticsearch8.2.2 rpm安装包linux下elasticsearch8.2.2...
Linux下安装Elasticsearch(1)
2401_84091321的博客
05-03 1259
上述知识点，囊括了目前互联网企业的主流应用技术以及能让你成为“香饽饽”的高级架构知识，每个笔记里面几乎都带有实战内容。很多人担心学了容易忘，这里教你一个方法，那就是重复学习。打个比方，假如你正在学习 spring 注解，突然发现了一个注解@Aspect，不知道干什么用的，你可能会去查看源码或者通过博客学习，花了半小时终于弄懂了，下次又看到@Aspect 了，你有点郁闷了，上次好像在哪哪哪学习，你快速打开网页花了五分钟又学会了。从半小时和五分钟的对比中可以发现多学一次就离真正掌握知识又近了一步。
linux 安装 elasticSearch
Japhet_jiu的博客
08-10 2619
linux安装es可以分为两种方式安装，容器安装 和 宿主机安装 容器安装 安装docker yum install -y docker 启动docker systemctl start docker 修改镜像（下载速度快一些） vi /etc/docker/daemon.json 修改内容如下 { "registry-mirrors": [ ...
linux安装elasticSearch
Liu_black的博客
08-21 480
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录前言一、elasticSearch 是什么 ？二、安装步骤1.安装前检查linux环境2.下载3.操作步骤4.操作总结 前言 在linux上对elasticSearch进行安装，和在启动过程中碰到的一些问题 一、elasticSearch 是什么 ？ 示例：Elasticsearch 是一个分布式、可扩展、实时的搜索与数据分析引擎。 它能从项目一开始就赋予你的数据以搜索、分析和探索的能力，这是通常没有预料到的。 它存在还因为原始
Linux下安装Elasticsearch，javaswing项目实战源码
m0_63174529的博客
11-13 1269
修改绑定的ip：默认只允许本机访问，修改为0.0.0.0后则可以远程访问 network.host: 0.0.0.0 # 绑定到0.0.0.0，允许任何ip来访问 我们把data和logs目录修改指向了elasticsearch的安装目录。但是这两个目录并不存在，因此我们需要创建出来。 进入elasticsearch的根目录，然后创建： mkdir data mkdir logs 目前我们是做的单机安装，如果要做集群，只需要在这个配置文件中添加其它节点信息即可。 elasticsearch.yml的其
Linux Elasticsearch安装
小兔子乖乖
03-17 266
es安装配置和使用一.前提：把以下列出的文件复制到root目录下的software目录下二.输入`cd /root/software`来到software目录下然后解压文件，输入`tar -xvf hadoop-native-64-2.6.0.tar -C hadoop/lib/`修改elasticsearch. yml修改/etc/sysctl.confvm.max_map_count=655360修改/etc/security/limits. conf创建es用户把es目录及其内容修改为es用户和属组切
Elasticsearch 在linux上安装
YouShengTianYi的博客
07-16 1156
在linux上安装Elasticsearch
在linux上安装elasticsearch简称ES 简单介绍安装步骤
weixin_42981419的博客
09-26 2032
1、简介 Elasticsearch 是一个分布式可扩展的实时搜索和分析引擎,一个建立在全文搜索引擎 Apache Lucene(TM) 基础上的搜索引擎.当然 Elasticsearch 并不仅仅是 Lucene 那么简单，它不仅包括了全文搜索功能，还可以进行以下工作: 分布式实时文件存储，并将每一个字段都编入索引，使其可以被搜索。 实时分析的分布式搜索引擎。 可以扩展到上...
linux下安装elasticsearch
06-06
在Linux下安装Elasticsearch，可以按照以下步骤进行操作： 1. 下载Elasticsearch安装包，可以从官网下载最新版本的安装包。 2. 解压安装包，可以使用命令tar -zxvf elasticsearch-7.10.2-linux-x86_64.tar.gz进行解压。 3. 进入解压后的目录，可以使用命令cd elasticsearch-7.10.2/进入目录。 4. 修改配置文件，可以使用命令vi config/elasticsearch.yml打开配置文件进行修改，如修改监听地址、集群名称等。 5. 启动Elasticsearch，可以使用命令./bin/elasticsearch启动Elasticsearch服务。 6. 验证Elasticsearch是否启动成功，可以使用命令curl http://localhost:920/进行验证，如果返回了Elasticsearch的版本信息，则说明启动成功。 以上就是在Linux下安装Elasticsearch的步骤，希望对您有帮助。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值