- 博客(3)
- 资源 (1)
- 收藏
- 关注
原创 日志采集——其它
Flume(cloudare 消息流:agent=>collect=>store agent支持file,syslog等,store支持HDFS,file。 它有三种不同消息级别保障:end-to-end(先持久化,再发送),storeOnFailure,best effort(消息发送后不确认) 有管理端可以在线查询agent和collect运行情况,也可以动态配置 S
2015-12-20 14:40:53 1530
原创 日志采集——logstash
logstash消息流采集=》过滤=》输出 Broker,用于进行事件流管理,默认Redis,还支持AMPQ和ZeroMQ。 Indexer,Output配置成ElasticSearch来将JSON推给ElasticSearch。 这些组件都是很独立可以自由搭配的。 LogStash的核心模块: 采集(input),支持文件,stdin,syslog,redis等 过滤
2015-12-20 13:19:49 4377
原创 日志采集——rsyslog
rsyslog是linux下日志采集和传输系统。 可以直接将日志写到数据库中,通过LogAnalyzer和Cacti显示,可以作为其他日志分析系统的输入源。 架构 消息流:输入模块->预处理模块->主队列->过滤模块(解析)->执行队列->输出模块 可以通过指定不同module的方式对输入、过滤、输出进行定制,也可以使用你自己的Module来扩展。 输入模块 支持文
2015-12-19 17:56:16 3869
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人