Centos7单机部署ElasticSearch
引言
Elasticsearch是一种广泛使用的开源搜索引擎,专门为分布式环境设计,但也可以在单机上运行。它使存储、搜索和分析大量数据变得更加容易和高效。此教程将引导你通过在Centos7上单机部署Elasticsearch,涵盖了从系统准备到服务启动的每一个细节。
Elasticsearch概览
Elasticsearch基于Apache Lucene构建,它的设计目标是使全文搜索变得简单。通过JSON over HTTP的接口,你可以存储、搜索和分析大量数据。企业中的许多用例,如日志或事件数据分析、全文搜索、数据可视化等,都可以通过Elasticsearch实现。
CentOS 7简介
CentOS是一个免费的、开源的企业级Linux发行版。CentOS 7提供了一套完整的开源开发工具集,被广泛用于服务器部署。其稳定和兼容性是选择它作为Elasticsearch部署基础的原因。
环境部署
默认centos7系统已经安装过JDK
创建用户
由于安全和权限方面的考虑,Elasticsearch需要以非root用户身份运行。我们首先创建一个名为es
的用户。
useradd es
passwd es
dxzx@2023
上传解压安装包
选择所需要的版本下载安装,这里使用es:7.5.2
将下载好的文件上传到服务器指定位置上,并解压
tar -zxvf elasticsearch-7.5.2-linux-x86_64.tar.gz
递归创建日志和数据路径
Elasticsearch需要特定的目录来存储其日志和数据。以下命令将创建所需目录:
mkdir -p /data/soft/elasticsearch-7.5.2/logs
mkdir -p /data/soft/elasticsearch-7.5.2/data
给用户授权文件夹
现在,我们需要确保新创建的用户有权访问刚才创建的目录。
chown -R es:es /data/soft/elasticsearch-7.5.2
修改Elasticsearch配置文件
Elasticsearch的配置文件包含了许多可以定制的设置,下面是一些主要配置项的解释:
cluster.name
: 你的集群名称。node.name
: 单个节点的名称。path.data
: 数据存储路径。path.logs
: 日志存储路径。network.host
: 绑定的IP地址。http.port
: HTTP服务的端口。discovery.seed_hosts
: 集群中的主节点。
以下是配置文件的路径和内容:
vim /data/soft/elasticsearch-7.5.2/config/elasticsearch.yml
# 配置内容
# 配置跨域设置
http.cors.enabled: true
http.cors.allow-origin: "*"
#配置es的集群名称,默认是elasticsearch,
#es会自动发现在同一网段下的es,
# 如果在同一网段下有多个集群,就可以用这个属性来区分不同的集群。
cluster.name: es
node.name: node1
node.master: true
node.data: true
path.data: /data/soft/elasticsearch-7.5.2/data
path.logs: /data/soft/elasticsearch-7.5.2/logs
network.host: 0.0.0.0
http.port: 9200
transport.tcp.port: 9300
discovery.seed_hosts: ["192.168.1.41:9300"]
cluster.initial_master_nodes: ["192.168.1.41:9300"]
调整操作系统设置
Elasticsearch在运行过程中可能会遇到操作系统限制。以下步骤可以调整这些限制。
-
修改文件描述符限制: Elasticsearch可能会打开许多文件,所以需要增加文件描述符的限制。
vim /etc/security/limits.conf # 文末添加: es soft nofile 65536 es hard nofile 65536
-
设置文件大小参数: 与上一步类似,我们还需要调整其他关于文件大小的参数。
vim /etc/security/limits.d/20-nproc.conf # 末尾添加: es soft nofile 65536 es hard nofile 65536 * hard nproc 4096
-
设置最大内存映射数量: Elasticsearch使用内存映射(mmap)来加快索引和搜索的速度。我们需要增加映射数量的限制。
vim /etc/sysctl.conf # 末尾添加: vm.max_map_count=655360
-
重新加载配置:
sysctl -p
安装和配置插件
ik分词器
下载地址:https://github.com/medcl/elasticsearch-analysis-ik/releases
将解压后文件放入plugins中
/elasticsearch-7.5.2/plugins
启动服务
切换到创建的用户,并进入Elasticsearch的bin目录来启动服务:
su es
cd /data/soft/elasticsearch-7.5.2/bin/
./elasticsearch
验证安装
验证是部署过程的重要步骤,通过以下命令确认Elasticsearch是否正常运行:
curl -X GET "localhost:9200/"
启动成功返回如下:
常见问题和故障排除
在部署和运行Elasticsearch过程中可能会遇到一些问题。以下是一些常见问题和解决方案。
内存错误
如果遇到内存错误,你可能需要调整Elasticsearch的JVM设置。你可以在jvm.options
文件中设置最小和最大内存分配。
权限问题
确保所有Elasticsearch文件和目录的所有权都正确设置,否则Elasticsearch可能无法访问所需的文件。
插件冲突
如果你安装了不兼容的插件,Elasticsearch可能无法启动。确保所有插件都与你的Elasticsearch版本兼容。
总结
通过本教程,你应该了解了如何在CentOS 7上部署Elasticsearch的完整过程,包括准备系统、配置Elasticsearch和启动服务等。Elasticsearch是一个功能强大的工具,通过深入探索和实验,你可以充分利用它的功能。
如果有任何问题或需要进一步的帮助,请访问Elasticsearch官方文档。
Docker方式安装
再额外介绍一个安装方法,这里使用docker-compose 进行安装
docker-compose.yml
version: '3'
services:
elasticsearch:
image: elasticsearch:7.5.1
container_name: elasticsearch
networks:
- net-es
volumes:
- /data2/es:/usr/share/elasticsearch/data
environment:
- discovery.type=single-node
ports:
- "9200:9200"
elastichd:
image: containerize/elastichd:latest
container_name: elasticsearch-hd
networks:
- net-es
ports:
- "9800:9800"
depends_on:
- "elasticsearch"
links:
- "elasticsearch:demo"
#这里要注意,es和eshd要在相同网络才能被links
networks:
net-es:
external: false
后台启动
docker-compose up -d