ELK的安装配置

ELK的安装配置

1.1 ES简介

ES是一个基于RESTful web接口并且构建在Apache Lucene之上的开源分布式搜索引擎。

特点是：高可用，高扩展，是一种NOSQL的数据存储工具

1.2 ES安装前的准备(elk安装包版本要求一致)

网络配置如下:

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-eYjHS6QJ-1592472753890)(C:\Users\lvcky2333\AppData\Roaming\Typora\typora-user-images\image-20200618160817701.png)]

• vi /etc/sysconfig/network-script/ifcfg-enp0s3
• systemctl restart network
• systemctl stop firewalld

安装包版本:

• elasticsearch-6.2.2.tar.gz
• elasticsearch-head-master.zip
• kibana-6.2.2-linux-x86_64.tar.gz
• logstash-6.2.2.tar.gz
• node-v8.9.1-linux-x64.tar.gz

基本环境变量: jdk1.8

export JAVA_HOME=/opt/java8
export CLASSPATH=.:$JAVA_HOME/rt.jar:$JAVA_HOME/tools.jar:$JAVA_HOME/dt.jar
export JRE_HOME=$JAVA_HOME/jre
export NODE_HOME=/opt/node891
export PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin
export PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin:$NODE_HOME/bin

1.3 ELK的安装

1. 把下载好的安装包，拖拽到/software目录中
   新建文件夹software mkdir software

2. 输入：yum install -y unzip 下载解压缩工具

3. 输入：cd /software 进入安装包目录，输入ll可以查看目录中的文件

4. 输入：tar -zxvf elasticsearch-6.2.2.tar.gz -C /opt

5. 输入：tar -zxvf kibana-6.2.2-linux-x86_64.tar.gz -C/opt

6. 输入：tar -zxvf logstash-6.2.2.tar.gz -C /opt

7. 输入：tar -zxvf node-v8.9.1-linux-x64.tar.gz -C/opt

8. 输入：unzip elasticsearch-head-master.zip

9. 输入 mv elasticsearch-head-master /opt/eshm 把解压的文件夹移动并改名

10. 输入：cd /opt

11. 输入：mv kibana-6.2.2-linux-x86_64/ kibana622

12. 输入：mv logstash-6.2.2/ logstash622

13. 输入：mv node-v8.9.1-linux-x64/ node8

14. 输入: mv elasticsearch-6.2.2/ es622

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Wv2cjEhK-1592472753892)(C:\Users\lvcky2333\AppData\Roaming\Typora\typora-user-images\image-20200618163120758.png)]

15. 增加用户es:useradd es
16. root改变文件所属:chown -R es:es es622

2 ES的配置

1. 输入：vi /etc/hostname 修改主机名[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-LsLji9pi-1592472753893)(C:\Users\lvcky2333\AppData\Roaming\Typora\typora-user-images\image-20200618164020777.png)]

2. 输入：vi /etc/hosts 修改主机列表[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Yd858ohX-1592472753895)(C:\Users\lvcky2333\AppData\Roaming\Typora\typora-user-images\image-20200618164226286.png)]

3. 配置es的参数
   输入：vi /opt/es622/config/elasticsearch.yml，尾行插入

cluster.name: test        //集群名

node.name: test-master      //节点名

node.master: true        //是否是主节点

network.host: 192.168.56.110   //本机地址

discovery.zen.ping.unicast.hosts: ["192.168.56.110"]    //同上

http.cors.enabled: true            

http.cors.allow-origin: "*"

4. 配置系统参数

   1. 输入：vi /etc/sysctl.conf 插入内容：vm.max_map_count=655360
      最好首次也要使用以下命令刷新 sysctl -w vm.max_map_count=655360
   2. 输入：vi /etc/security/limits.conf 插入内容：

* soft nofile 65536
* hard nofile 65536
* soft nproc 4096
* hard nproc 4096

5. 修改es622目录的属组(es不能使用root启动) chown -R bigdata:bigdata es622

6. 输入：su bigdata 切换到普通用户

7. 在/opt目录下输入：./es622/bin/elasticsearch

底部出现 started即是启动成功

8. 在windows界面打开网页，输入http://192.168.56.110:9200/，可以正常出页面，切有节点的信息，即是启动成功

3 Head-master及node的配置

1. 输入：vi /etc/profile 按shift+g定位到底部，然后按o在下一行插入以下内容：

export NODE_HOME=/opt/node8
export PATH=$PATH:$NODE_HOME/bin 
（如之前在java配置过PATH变量则在原先的尾部增加   :$NODE_HOME/bin）

2. 输入：source /etc/profile 激活配置文件，输入node -v 可以查看是否配置成功

3. 输入：cd /opt/eshm

4. 输入：npm install -g grunt-cli --等待的时间比较长，要有点耐心

5. 输入：npm install 出错时需要输入：

npm install phantomjs-prebuilt@2.1.14 --ignore-scripts

6. 输入：vi Gruntfile.js，在以下位置高亮位置增加一行代码：hostname: ‘*’,

7. 输入：vi _site/app.js，找到如下代码，并进行修改：

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-HWNj4Yr7-1592472753897)(file:///C:\Users\LVCKY2~1\AppData\Local\Temp\ksohtml27284\wps2.png)]

8. 输入：npm run start 启动head-master

9. 在windows界面，打开网页，输入：http://192.168.56.110:9100/

4 使用Head-master对ES进行测试

1. 点击索引页签，点击新建索引

2. 点击总览页签，即可查看索引的情况

5 kibana安装，配置和实例

1. 输入：cd /opt/kibana622

2. 输入：vi config/kibana.yml 按shift+g跳转到行末，按o增加以下内容：

server.host: “192.168.56.110”

elasticsearch.url: “http://192.168.56.110:9200”

3. 输入：./bin/kibana 运行kibana

onfig/kibana.yml 按shift+g跳转到行末，按o增加以下内容：

server.host: “192.168.56.110”

elasticsearch.url: “http://192.168.56.110:9200”

3. 输入：./bin/kibana 运行kibana

4. 在windows界面打开网页，输入http://192.168.56.110:5601/