CentOS 8.1 搭建ELK(7.7.0)环境和采坑过程

本文详细记录了在CentOS 8.1环境下,搭建ELK(Elasticsearch, Kibana, Logstash)7.7.0的过程,包括下载安装包,修改系统配置,安装Elasticsearch与Kibana,配置Logstash并导入测试数据,以及解决过程中遇到的问题。通过Vagrant和Virtual Box创建的CentOS环境中,重点介绍了Elasticsearch的系统配置、Kibana的依赖安装和配置,以及Logstash的测试数据导入。" 95319515,8669574,Python实现网页登录爬虫,"['Python', '爬虫技术']
摘要由CSDN通过智能技术生成

今天接收了一个旧的项目,其中用到了elasticsearch相关内容。所以,在本机搭建了一个elk环境,供自己测试使用。虽然现在的容器化技术已经很成熟,并且elastic官方也支持docker上运行elk相关内容。而且采用docker会更好的屏蔽因为环境问题而引起的一些麻烦。但是,还是想动手做一遍,了解一下内部的一些东西。下面就分享一下采坑过程:

首先说明一下我的环境:

vagrant + virtual box虚拟机环境,系统是 CentOS 8.1 , elk 版本为7.7.0

下载安装包

国内从官方下载安装包速度很慢,即便是踩梯子也是很慢的,所以,在华为云镜像下载相关组件:

华为云镜像地址:https://mirrors.huaweicloud.com 可以搜索相关组件进行下载

elasticsearch : https://mirrors.huaweicloud.com/elasticsearch/7.7.0/

kibana:https://mirrors.huaweicloud.com/kibana/7.7.0/

logstash:https://mirrors.huaweicloud.com/logstash/7.7.0/

解压安装包

解压安装包,过程略。

安装 elasticsearch

elk中除了 logstash 外,其他两个组件都不允许直接用 root 用户运行,所以,创建一个用户运行elk。

groupadd es
useradd es -g es -p password
chown es:es -R elasticsearch-7.7.0 -R

kibana 可以参考上面的命令更改所有者。或者授予相关权限。

修改系统配置

准备运行 elasticsearch,因为es需要对资源的控制有最低要求,所以需要修改系统设置以满足es的运行要求,主要是最大打开文件数,最大文件大小和最大进程数量。可以使用 ulimit -a 查看系统所有相关项配置。

修改 /etc/security/limits.conf 文件

* soft nofile 65536
* hard nofile 131072
* soft nproc 65536
* hard nproc 65536
es hard fsize unlimited
es soft fsize unlimited

这个配置由四个部分组成:<domain>      <type>  <item>        <value>

其中 domain 部分可以是用户名或者用户组,可以使用通配符

type 取值为 hard 和 soft 分别表示硬件和软件限制

item 表示具体的项,

  • 3
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值