Elasticsearch在Linux环境下集群部署

软件安装

下载elasticsearch（Linux）

https://www.elastic.co/cn/downloads/past-releases/elasticsearch-7-8-0

解压软件

# 解压缩
tar -zxvf elasticsearch-7.8.0-linux-x86_64.tar.gz -C /opt/module
# 改名
mv elasticsearch-7.8.0 es-cluster

集群环境部署

创建用户

因为安全问题，Elasticsearch 不允许 root 用户直接运行，所以要创建新用户，在 root 用户中创建新用户。

• 新增es用户

useradd es

• 为 es 用户设置密码

passwd es

• 给新创建的用户添加权限

chown -R es:es /opt/module/es-cluster

修改配置文件

• 修改/opt/module/es/config/elasticsearch.yml 文件，分发文件

#集群名称
cluster.name: cluster-es
#节点名称，每个节点的名称不能重复
node.name: node-1
#ip 地址
network.host: 0.0.0.0 #外网可以访问
#是不是有资格主节点
node.master: true
node.data: true
#一台虚拟机配置集群环境需把端口号修改为不同的
http.port: 9200
# head 插件需要这打开这两个配置
http.cors.allow-origin: "*"
http.cors.enabled: true
http.max_content_length: 200mb
#es7.x 之后新增的配置，初始化一个新的集群时需要此配置来选举 master
cluster.initial_master_nodes: ["node-1"]
#es7.x 之后新增的配置，节点发现  本机则可以填localhost，不是的话需填写ip，这里的端口号填内部节点沟通端口
discovery.seed_hosts: ["localhost:9300","localhost:9301","localhost:9302"]
gateway.recover_after_nodes: 2
network.tcp.keep_alive: true
network.tcp.no_delay: true
transport.tcp.compress: true
#最大集群节点数
node.max_local_storage_nodes: 3
#内部节点之间沟通端口
transport.tcp.port: 9300
#集群内同时启动的数据任务个数，默认是 2 个
cluster.routing.allocation.cluster_concurrent_rebalance: 16
#添加或删除节点及负载均衡时并发恢复的线程个数，默认 4 个
cluster.routing.allocation.node_concurrent_recoveries: 16
#初始化数据恢复时，并发恢复线程的个数，默认 4 个
cluster.routing.allocation.node_initial_primaries_recoveries: 16

• 修改/etc/security/limits.conf ，分发文件

# 在文件末尾中增加下面内容
es soft nofile 65536
es hard nofile 65536

• 修改/etc/security/limits.d/20-nproc.conf，分发文件

# 在文件末尾中增加下面内容
es soft nofile 65536
es hard nofile 65536
* hard nproc 4096
# 注：* 带表 Linux 所有用户名称

• 修改/etc/sysctl.conf

# 在文件中增加下面内容
vm.max_map_count=655360

• 重新加载

sysctl -p

• *注意这里需要删除/opt/module/es/data里的nodes文件
• 如有重要数据，切记备份

rm -rf /opt/module/es/data/nodes

• 其他两台配置同上，需注意端口、节点名称、内部节点端口需不同

启动软件

cd /opt/module/es-cluster
#启动
bin/elasticsearch
#后台启动
bin/elasticsearch -d

测试集群

• 访问http://10.70.20.10:9101/_cat/health?v
  

常见报错

• 如遇报内存不足，修改方式
• 进入jvm.options
  
  修改
  
  原先默认为1g，在这里我改为了256mb
• 如遇报错Exception in thread “main” org.elasticsearch.bootstrap.BootstrapException: java.nio.file.AccessDeniedException: /soft/es/config/elasticsearch.keystore Likely root cause: java.nio.file.AccessDeniedException: /soft/es/config/elasticsearch.keystore
  *原因为这里的权限为root权限
• 解决方案：进入root用户，删除该文件后再次进入新建的用户再次启动，该文件会自动生成。