- 博客(5)
- 资源 (2)
- 收藏
- 关注
原创 基于zookeeper保存文件
用zookeeper保存配置文件的信息,能做到安全和全局调用。package cn.com.paic.zookeeper;import org.apache.zookeeper.*; import org.apache.zookeeper.data.Stat;import java.io.ByteArrayOutputStream; import java.io.FileInputStream; i
2017-12-29 23:27:56 2982
原创 Hadoop3.0安装以及新特性介绍
Apache Hadoop 3.0.0在前一个主要发行版本(hadoop-2.x)中包含了许多重要的增强功能 环境安装: 192.168.18.160 CDH1 192.168.18.161 CDH2 192.168.18.162 CDH3 192.168.18.163 CDH41,java8是必须 所有hadoop 的jar都是利用java8的运行时版本进行编译的。依然在使用java7
2017-12-26 23:56:02 10408 3
原创 FileBeat+kafka进行日志实时传输
前面我们聊到了filebeat+ELK来解决日志的问题,今天我们来聊聊filebeat+kafka解决日志实时传输的问题,首先filebeat只是一个简单的日志接受工具和日志发送工具,我们可以用filebeat部署到logserver上面,在用kafka做消息管道将日志传输出去。今天我们主要讲讲安装 kafka和filebeat的配置我们就不讲解了 如果还是不会的同学可以参考之前的文章1、配
2017-12-25 01:11:51 22746 10
原创 ELK+Filebeat的安装和联调
ELK Stack 简介 ELK 不是一款软件,而是 Elasticsearch、Logstash 和 Kibana 三种软件产品的首字母缩写。这三者都是开源软件,通常配合使用,而且又先后归于 Elastic.co 公司名下,所以被简称为 ELK Stack。根据 Google Trend 的信息显示,ELK Stack 已经成为目前最流行的集中式日志解决方案。 ● Elasticsearc
2017-12-18 00:50:20 2027
原创 azkaban安装
环境 1、centos 6.5 2、java 1.8安装 1、先下载 azkaban https://github.com/azkaban/azkaban 下载源代码 [root@master ~]# git clone https://github.com/azkaban/azkaban.git2、编译开始build azkaban #压缩为zip包: [root@master az
2017-12-12 01:32:09 491
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人