ELK的安装及环境配置

一、ES简介

ES是一个基于RESTful web接口并且构建在Apache Lucene之上的开源分布式搜索引擎。
特点是：高可用，高扩展，是一种NOSQL的数据存储工具

二、ES安装前的准备(elk安装包版本要求一致)

Oracle VM VirtualBox工具下搭建的linux系统
ssh工具：MobaXterm.11.0
下载：
jdk-8u221-linux-x64.tar.gz
elasticsearch-6.2.2.tar.gz
elasticsearch-head-master.zip
kibana-6.2.2-linux-x86_64.tar.gz
logstash-6.2.2.tar.gz
node-v8.9.1-linux-x64.tar.gz

三、ELK的安装

1．准备工作
把下载好的安装包，拖拽到/software目录中。这里的software目录是我新建的，后面会把解压的文件放到opt文件夹中。也可以直接在opt文件夹下操作，直接把压缩包放到opt文件夹下
2．下载解压缩工具(在software目录下)
由于我的压缩包中有zip格式的，所以下载unzip解压工具，输入指令：yum install -y unzip
3．查看文件
输入：cd /software 进入安装包目录，输入ll可以查看目录中的文件

4．解压包
解压文件，把解压好的文件移到opt文件夹中。注意一下这里的压缩包zip格式的只能在本目录下解压后在移动，其它格式的直接在后面写上 -C /opt可直接移动到opt文件夹下
输入：tar -zxf elasticsearch-6.2.2.tar.gz -C /opt
输入：tar -zxf jdk-8u221-linux-x64.tar.gz -C /opt
输入：tar -zxf kibana-6.2.2-linux-x86_64.tar.gz -C/opt
输入：tar -zxf logstash-6.2.2.tar.gz -C /opt
输入：tar -zxf node-v8.9.1-linux-x64.tar.gz -C/opt
输入：unzip elasticsearch-head-master.zip
5．移动和改名
输入 mv elasticsearch-head-master /opt/eshead 把解压的文件夹移动并改名(zip格式)
输入：cd /opt
输入：mv kibana-6.2.2-linux-x86_64/ kibana622
输入：mv logstash-6.2.2/ logstash622
输入：mv node-v8.9.1-linux-x64/ node891
输入：mv jdk1.8.0_221/ java8
输入：mv elasticsearch-6.2.2/ es622

新建es用户：useradd es
chown es:es -R es622/ 递归改权限，把权限赋予用户es，后面用es用户来执行

四、ES的配置

1．修改主机名
输入：vi /etc/hostname
把原来的内容删掉写入新的主机名，我的改为bigdata01。(更改之后不要忘了保存，后面也是)

2．修改主机列表
输入：vi /etc/hosts。在第三行插入数据：ip地址(我的是192.168.56.110) 主机名 。这里加了三个，是为后面的集群准备的，这里不做描述。有兴趣的可自行查阅有关

3．配置es的参数
输入：vi /opt/es622/config/elasticsearch.yml，按shift+g，快速定位到尾行，按o在下一行插入以下内容：

cluster.name: bigdata               --集群名
node.name: master          --节点名
node.master: true               --是否是主节点
network.host: 192.168.56.110     --本机地址
discovery.zen.ping.unicast.hosts: ["192.168.56.110"]      --同上
http.cors.enabled: true                       
http.cors.allow-origin: "*"

4．配置系统参数
（1）输入：vi /etc/sysctl.conf ，插入内容：vm.max_map_count=655360

对当前生效,最好首次也要使用以下命令刷新 sysctlvm.max_map_count=655360

（2）输入：vi /etc/security/limits.conf 在末尾插入内容：

* soft nofile 65536
* hard nofile 65536
* soft nproc 4096
* hard nproc 4096 

5．配置jdk
输入：vi /etc/profile 按shift+g定位到底部，然后按o在下一行插入以下内容：

export PATH USER LOGNAME MAIL HOSTNAME HISTSIZE HISTCONTROL(这行原本就有)
export JAVA_HOME=/opt/java8
export CLASSPATH=.:$JAVA_HOME/rt.jar:$JAVA_HOME/tools.jar:$JAVA_HOME/dt.jar
export JRE_HOME=/opt/java8/jre
export PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin

6．输入su es,进入es用户命令

7．启动
在/opt目录下输入：
source /etc/profile
./es622/bin/elasticsearch
底部出现 started即是启动成功

8．链接网页
在windows界面打开网页，输入http://192.168.56.110:9200/，可以正常出页面，切有节点的信息，即是启动成功

五、Head-master及node的配置

1、输入：vi /etc/profile 按shift+g定位到底部，然后按o在下一行插入以下内容：

export NODE_HOME=/opt/node891
export PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/root/bin(这个PATH命令要在前)
（如之前在java配置过PATH变量则在原先的尾部增:$NODE_HOME/bin）
export PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin:$NODE_HOME/bin

2．输入：source /etc/profile 激活配置文件，输入node -v 可以查看是否配置成功

3．输入：cd /opt/eshead
4．输入：npm install -g grunt-cli --等待的时间比较长，要有点耐心

5．输入：npm install 出错时需要输入：
npm install phantomjs-prebuilt@2.1.14 --ignore-scripts
6．输入：vi Gruntfile.js，
在以下位置高亮位置增加一行代码：hostname: ‘*’,

7．输入：vi _site/app.js，找到如下代码，并进行修改：图中原本是"http://localhost:9200";把它改为你自己的IP地址。

8．输入：npm run start 启动head-master

9．在windows界面，打开网页，输入：http://192.168.56.110:9100/

六、使用Head-master对ES进行测试

1．点击索引页签，点击新建索引

2．点击总览页签，即可查看索引的情况

七、kibana安装

1．输入：cd /opt/kibana622

2．输入：vi config/kibana.yml 按shift+g跳转到行末，按o增加以下内容：

server.host: "192.168.56.110"
elasticsearch.url: "http://192.168.56.110:9200"

3．输入：./bin/kibana 运行kibana

4．在windows界面打开网页，输入http://192.168.56.110:5601/