xuexin736的博客

之前装过一次，后来时间长了，再重新装又折腾一些时间，于是记录一下。文章来源：http://www.cnblogs.com/wawahaha/p/3821486.html1.安装GCC：yum -y install gcc-c++2.安装flex：yum -y install flex没有flex，直接安装libpcap会提示”Your operating system’s lex is insuf...

最近频繁的在使用的ES，有时候是在虚拟机上有时候是在正式环境上，在安装的时候总这样那样的启动出错，今天正好有时间整理一下。一、[1] bootstrap checks failed[1]: max number of threads [1024] for user [elasticsearch] is too low, increase to at least [2048]引导检查失败，最大线程...

最新要做一个对Linux系统日志采集的需求，当然除了Linux的系统日志采集外，还需要转发Tomcat日志，或者Nginx日志等。所以就使用了rsyslog这个比较常用并且功能比较强大的工具。版本：Rsyslog V5Logstash 5.2.2一、就不做过多的介绍了直接贴测试通过的rsyslog.conf配置文件该配置文件的目录为：/etc/rsyslog.conf# rsyslog v5 co...

版本为：elasticsearch-5.2.2jdk 1.8相关jar包下面我会都贴上一、首先创建一个maven项目（当然不一定非要maven，但是依赖的jar包比较多，简单粗暴最好是用maven）下面是pom.xml文件<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/X...

一、版本信息jdk: 1.8kafka: kafka_2.11-0.10.2.1Java生产者：import java.util.Properties;import org.apache.kafka.clients.producer.KafkaProducer;import org.apache.kafka.clients.producer.Producer;import org.apac...

前段时间公司需要做一个日志分析的需求，于是开始了对于日志分析这方面的研究。现在系统中集成的是Fluem + elastaticSearch + 还有influxdb，如果基于这些做日志分析的话，就可能需要使用Flume + kafka + elastaticSearch但是我对比了一下Flume和logstash 他们共同的特点是支持的采集方式很全，支持分布式。区别在于Flume作为生产方传输数据...