ELK（elasticsearch+logstash+kabana）安装及简单入门

ElasticSearch安装

• 1、下载安装包

https://www.elastic.co/downloads/elasticsearch
wget https://www.elastic.co/downloads/elasticsearch

• 2、解压到文件夹

tar -zxvf elasticsearch-5.2.2.tar.gz -C /bigdata/

• 3、修改配置文件（在安装目录的config目录下）
  编辑配置文件elasticsearch.yml（配置es的相关配置）
  vi /bigdata/elasticsearch-5.2.2/config/elasticsearch.yml 修改

cluster.name: ELK #集群名称，以此作为是否是同意集群的判断 
node.name: es-01 #节点名称，以此作为集群中不同节点的分区条件 
path.data: /data/es/data #数据存储地址 
path.logs: /data/es/logs #日志存储地址 
network.host: 192.168.1.34 #（主机地址）对外发布的网络地址 
http.port: 9200 #ES默认监听的端口 
discovery.zen.ping.unicast.hosts: ["node01"]

编辑配置文件jvm.options（jvm的相关配置）

IMPORTANT: JVM heap size #配置jvm的大小（默认配置是2G）
-Xms2g
-Xmx2g

编辑配置文件log4j2.properties(日志打印输出相关配置，一般不需要修改)
配置文件的参数也可以在启动的时候指定
例如：bin/elasticsearch -Ehttp.port=19200
本地快速启动集群

bin/elasticsearch #默认的配置启动
bin/elasticsearch -Ehttp.port=19200 #修改端口号为19200启动
#看到started说明集群启动成功
输入：http://ip:port 查看Elasticsearch服务状态
查看节点时候组成集群，在浏览器中输入http://ip:port/_cat/nodes
例如：
http:192.168.1.31:9200/_cat/nodes
查看集群相关信息，执行http://ip:port/_cluster/stats
http://192.168.1.31:9200/_cluster/stats

• 4、elasticsearch常用术语
  Document文档数据（就是具体存在ES中的一条数据）
  Index索引（可以理解为mysql中的数据库）
  Type索引中的数据类型（可以理解为mysql中的table）
  Field字段，文档的属性
  Query DSL查询语法

• 5、Elasticsearch中CRUD操作

Create创建文档 
POST /accounts/person/1 { "name":"John"， "lastname":"Doe", "job_description":"Systems asministrator and Linux specialit" } 
#accounts 相当于索引Index 
#person 相当于类型Type 

Read读取文档 GET /accounts/person/1 

update更新文档 POST /accounts/person/1/_update { "name":"John"， "lastname":"Doe", "job_description":"Systems asministrator and Linux specialit" } 

Delete删除文档 DELETE /accounts/person/1

• 6、ElasticSearch 中Query语法

第一种Query String 
GET /accounts/person/_search?q=john 
第二种Query DSL 
GET /accounts/person/_search { "query" :{ "match" :{ "name" : "john" } } }

Kabana安装

• 1、下载kabana

https://www.elastic.co/downloads/kibana

• 2、解压缩

tar -zxvf kibana-6.2.3-darwin-x86_64.tar.gz -C /bigdata/

• 3、修改配置文件安装启动
  修改config/kibana.yml

server.port: 5601 # Kibana对外访问的端口 
server.host: "192.168.1.31" #Kibana对外访问的地址 
elasticsearch.url: "http://192.168.1.31:9200"  #Kibana需要访问的ElasticSearch的地址 

启动服务后，看到server running的时候说明已经跑起来了

• 4、kabana常用功能

Discover数据搜索查看 
Visualize图表制作 
Dashboard仪表盘制作 
Timelion时序数据的高级可视化分析 
DevTools开发者工具（经常会用到） 
Managerment配置管理

LogStash使用

• 1、下载

https://www.elastic.co/downloads/logstash

• 2、解压缩

• 3、准备logstash 配置文件

input { stdin { } }
output {
  elasticsearch { hosts => ["127.0.0.1:9200"] }
  stdout { codec => rubydebug }
}

• 4、启动
  logstash -f logstash.conf