Linux搭建大数据日志分析ELK环境——图解包教包会

前期准备

搭建Linux系统，博主前面的的文章有详细的搭建过程
下载压缩包：
elasticsearch-6.2.2.tar.gz
elasticsearch-head-master.zip
kibana-6.2.2-linux-x86_64.tar.gz
logstash-6.2.2.tar.gz
node-v8.9.1-linux-x64.tar.gz
jdk-8u221-linux-x64.tar.gz

配置elasticsearch

在根目录下新建目录software，并将6个压缩包拉进software

yum下载unzip解压软件

yum install -y unzip

将6个压缩包分别解压到opt目录下，并重新命名

**tar -zxvf elasticsearch-6.2.2.tar.gz -C /opt**
mv elasticsearch-6.2.2/ ela622
**tar -zxvf jdk-8u221-linux-x64.tar.gz -C /opt**
mv jdk1.8.0_221/ java8
**tar -zxvf kibana-6.2.2-linux-x86_64.tar.gz -C /opt**
mv kibana-6.2.2-linux-x86_64/ kibana622
**tar -zxvf logstash-6.2.2.tar.gz -C /opt**
mv logstash-6.2.2/ logstash622
**tar -zxvf node-v8.9.1-linux-x64.tar.gz  -C /opt**
mv node-v8.9.1-linux-x64/ node8
**unzip elasticsearch-head-master.zip** 
mv elasticsearch-head-master /opt/elhm

Jdk配置环境变量

输入 vi /etc/profile,进入文件编辑模式在下方位置输入

:wq保存退出
source /etc/profile刷新环境变量
输入java -version，若出现java版本情况则配置成功，否则配置失败

新开窗口并创建新用户es，并将elasticsearch的从属权赋给新用户

useradd es
chown es:es -R ela622

修改主机名

vi /etc/hostname
进入文件后删除源文件的内容，并添加主机名

修改主机列表

vi /etc/hosts
进入文件在空白处添加本机地址、主机名和另外两个主机地址、主机名

配置elasticsearch参数

vi /opt/ela622/config/elasticsearch.yml
进入文件后在最后一行下方输入
cluster.name: bigdatat
node.name: master
node.master: true
network.host: 192.168.56.110（为当前主机地址）
discovery.zen.ping.unicast.hosts: [“192.168.56.110”]
http.cors.enabled: true
http.cors.allow-origin: “*”

配置系统参数

vi /etc/sysctl.conf
进入文件后在最后插入：vm.max_map_count=655360
刷新：sysctl -w vm.max_map_count=655360（若刷新失败则重启Linux）


vi /etc/security/limits.conf
进入文件在文件末尾插入
*soft nofile 65536
*hard nofile 65536
*soft nproc 4096
*hard nproc 4096

再次配置环境变量：
在使用root用户打印环境变量：echo $PATH
将生成的环境变量插入环境变量中，并在末尾插入环境变量最后

切换用户执行文件

su es：切换用户
执行文件：./ela622/bin/elasticsearch
使用地址+9200端口号登录出现信息则表示成功

Head-master及node的配置

配置node环境变量

vi /etc/profile插入：export NODE_HOME=/opt/node8，需要放在:$NODE_HOME/bin上面
保存退后刷新环境变量：source /etc/profile
输入检查是否配置成功：node -v

配置head master

cd /opt/elhm：进入head master文件夹
输入npm install -g grunt-cli
等待上面的东西下载完成，输入npm install安装
当出错时输入：npm install phantomjs-prebuilt@2.1.14 --ignore-scripts
安装完成后输入：vi Gruntfile.js
在以下位置增加一行代码：hostname: ‘*’,

connect: {
    server: {
        options: {
            port: 9100,
            hostname: '*',
            base: '.',
            keepalive: true        }
    }

输入：vi _site/app.js，找到如下代码（4360行），并进行修改：

this.base_uri =this.config.base_uri ||this.prefs.get("app-base_uri") || "http://localhost:9200";
修改成为：
this.base_uri =this.config.base_uri ||this.prefs.get("app-base_uri") || "http://192.168.56.110:9200";

启动head-master：npm run start
打开网页输入：地址+端口号9100查看是否成功

使用Head-master对ES进行测试：

点击索引页签，点击新建索引
点击总览页签，即可查看索引的情况

kibana安装

进入kibana文件夹：cd /opt/kibana622
进入kibana：vi config/kibana.yml
在最后插入以下代码

server.host: "192.168.56.110"
elasticsearch.url: "http://192.168.56.110:9200"

运行kibana：./bin/kibana
打开网页输入：http://192.168.56.110:5601/查看配置是否成功