log collector
文章平均质量分 67
hljlzc2007
大数据玩家
展开
-
日志文件监控利器 - logstash
最近在使用logstash进行日志搜集,很方便的一个开源软件软件,开包即用,使用JRuby来开发的,呵呵,我一看到不是java开发的开源项目,就有一种莫名其妙的抵触情绪,怪哉怪哉,不过我去它们的jira系统,发现里边还是很活跃的,jira地址:https://logstash.jira.com/secure/Dashboard.jspa。在这里先讲一下logstash的用法吧, so easy原创 2013-12-18 12:07:15 · 33469 阅读 · 2 评论 -
日志记录组件
常在服务器端处理用户请求时.特别是针对Web应用程序.当出现异常是可以根据日志操作记录还原异常出现时操作步骤.而记录异常堆栈信息判断问题出现问题位置. 为了跟踪和记录服务器行为.特别是针对出现异常时构建简单、统一的异常处理模式就显得尤为重要.如果有一个基础的架构用来记录服务器端中日志和事件.那么对于调试和在问题的解决就变得更加简单直接.针对日志记录.可能针对大部分开发人员.首先表现明显就是转载 2013-12-18 13:46:24 · 1741 阅读 · 0 评论 -
分布式日志收集系统- Cloudera Flume 介绍
Flume是Cloudera提供的日志收集系统,具有分布式、高可靠、高可用性等特点,对海量日志采集、聚合和传输, Flume支持在日志系统中定制各类数据发送方, 同时,Flume提供对数据进行简单处理,并写到各种数据接受方的能力. Flume 部署结构 flume架构简单,可靠,灵活, 数据流(data flow)是flume中最主要的抽象,data flow描述了数据从转载 2013-12-19 10:33:43 · 8469 阅读 · 0 评论 -
Flume0.9X和1.X的区别
Flume NG (Next Generation) is a huge departure from Flume OG (Original Generation) in its implementation although many of the original concepts are the same. If you're already familiar with Flume, her原创 2013-12-20 11:41:04 · 1286 阅读 · 0 评论 -
Splunk - 海量日志搜索的先驱
在大数据时代,电信、金融、互联网等各行各业都面临大数据的考验。如何在海量、无规则的数据中发现价值,给企业创造长期利润,已经成为当前最热门的话题。2014 SplunkLive在北京举行,主要分享Splunk如何管理大数据,以及其他行业使用Splunk的成功案例。会议的议题主要包括:ü Splunk概览与演示ü 大数据与商业创新ü 浦发银行应用案例ü 中海油应用案例目原创 2014-09-29 14:52:12 · 2957 阅读 · 0 评论