2016年08月_liukuan73

转载 Logstash处理json格式日志文件的三种方法

http://blog.csdn.net/jiao_fuyou/article/details/49174269假设日志文件中的每一行记录格式为json的，如：{"Method":"JSAPI.JSTicket","Message":"JSTicket:kgt8ON7yVITDhtdwci0qeZg4L-Dj1O5WF42Nog47n_0aGF4WPJDIF2UA9MeS8GzLe

2016-08-27 16:11:55 5491

转载 Filebeat的高级配置-Filebeat部分

http://blog.csdn.net/xiongzhichao/article/details/51783704在Filebeat安装完成准备使用前，最好先对Filebeat进行一些详细的配置再使用，下面来详细讲解一下相关内容。Filebeat的配置文件是/etc/filebeat/filebeat.yml，遵循YAML语法。具体可以配置如下几个项目：FilebeatO

2016-08-26 17:52:07 11760 2

转载关于Logstash中grok插件的正则表达式例子

http://www.cnblogs.com/stozen/p/5638369.html一、前言近期需要对Nginx产生的日志进行采集，问了下度娘，业内最著名的解决方案非ELK(Elasticsearch, Logstash, Kibana)莫属。Logstash负责采集日志，Elasticsearch负责存储、索引日志，Kibana则负责通过Web形式展现日志。

2016-08-25 20:53:19 21060

转载 nginx+Elasticsearch集群反向代理负载均衡

http://www.111cn.net/sys/nginx/80785.htmElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是第二最流行的企业搜索引擎。Elasticsearch是一种

2016-08-25 10:10:20 3959

转载 rsyslog

http://litaotao.blog.51cto.com/6224470/1283871===============================================rsyslog的介绍logrotate日志滚动的介绍rsyslog的存储途径基于web的loganalyzer日志分析工具的搭建=================

2016-08-25 09:22:33 2882

转载 Change Log Rate Limiting In Linux

https://www.rootusers.com/how-to-change-log-rate-limiting-in-linux/By default in Linux there are a few different mechanisms in place that may rate limit logging. These are primarily the systemd

2016-08-24 16:43:48 3672

转载 Kafka设计解析：Kafka High Availability （上）

http://dataunion.org/16063.htmlKafka在0.8以前的版本中，并不提供High Availablity机制，一旦一个或多个Broker宕机，则宕机期间其上所有Partition都无法继续提供服务。若该Broker永远不能再恢复，亦或磁盘故障，则其上数据将丢失。而Kafka的设计目标之一即是提供数据持久化，同时对于分布式系统来说，尤其当集群规模上升到一定程度后

2016-08-24 12:26:27 1838

转载容器的性能监控和日志管理

http://geek.csdn.net/news/detail/85495以性能监控的场景为例，通常的实施方式有在主机上收集数据和在容器内部收集数据两种。若是在主机上收集性能数据，传统的监控工具是以系统进程为对象记录的，由于容器的场景常常会在同一个主机上部署多个独立服务，这些服务对外提供的功能各不相同，可以说是毫不相干的服务类型，但从进程的角度上看却并无差异（例如都是Tomcat进程），

2016-08-16 17:12:07 3673

转载 Zookeeper常用命令

http://blog.csdn.net/xiaolang85/article/details/13021339ZooKeeper服务命令: 在准备好相应的配置之后，可以直接通过zkServer.sh 这个脚本进行服务的相关操作1. 启动ZK服务: sh bin/zkServer.sh start2. 查看ZK服务状态: sh bin/zkServe

2016-08-08 17:00:28 1792

转载 ZOOKEEPER基础知识

搞数据开发的对一些产品非常熟悉，比如：HBaseHadoop…但是对它们背后共同的“男人”没有太多的了解，太不应该了。这篇是一个基础的介绍，看完之后应该会对ZOOKEEPER有大概了解。安装部署在这里下载包，放到你喜欢的目录解压缩：sudo tar -zxvf zookeeper-3.4.7.tar.gz配置信息在conf/zoo.cfg中（可以

2016-08-08 14:09:56 1598

转载 Docker背后的内核知识——Namespace资源隔离

http://www.infoq.com/cn/articles/docker-kernel-knowledge-namespace-resource-isolation?utm_source=tuicoolDocker这么火，喜欢技术的朋友可能也会想，如果要自己实现一个资源隔离的容器，应该从哪些方面下手呢？也许你第一反应可能就是chroot命令，这条命令给用户最直观的感觉就是使用后根目录

2016-08-08 11:11:48 8021

liukuan73的专栏