(九) elasticsearch手把手搭建生产环境ELK加kafka实现分布式日志收集集群环境(终结版)

(八) elasticsearch手把手搭建生产环境ELK加kafka实现分布式日志收集总结

前八个博客讲到的都是单机版日志收集.    es,kafak  logstash   都是基于一台机子搭建的.最近跟公司又申请了一台机器用于搭建es和kafak以及logstash的集群.以保证高可用.

 

首先搭建es集群..

因为另一台机子使用了原有机器的镜像 ,所以凡是第一台机器上面搭建过的软件全部都给clone过来了的.所以不用重新进行elk+kafka的搭建.这里提供阿里云的镜像复制方法:

首先实现镜像的快照生成https://help.aliyun.com/document_detail/25460.html?spm=a2c4g.11174283.6.747.367252feeisRyP

然后生成完毕之后,使用自定义镜像创建实例.https://help.aliyun.com/document_detail/25465.html?spm=a2c4g.11186623.2.26.b0801f6eK7ZCsd#task-w5v-sgv-xdb

上面两步完成之后ecs实例的clone就实现了.好了,回归正题

1.修改es的配置文件

vim elasticsearch.yml

要修改的内容如下(两台机器的配置文件都按照如下修改):   

node.name: node-2  #这是第二台机子,第一台命名为node-1

network.host: 116.62.13.26   #这里改成新买的机器的外网ip
discovery.zen.ping.unicast.hosts: ["116.62.13.26", "101.37.32.7"] #这里配置上两台机器的ip

#下面的配置都原封不动,,,,记住,node.master一定要都为true.
http.port: 9200
http.cors.enabled: true
http.c