日志框架
社会波
愿你走出半生,归来仍是少年。
爱编程,更爱生活。
展开
-
Flume从入门到上手
第 1 章 Flume 概述 1.1 Flume 定义 : Flume 是 Cloudera 提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume 基于流式架构,灵活简单。 1.2 Flume架构 1.2.1 Agent Agent 是一个 JVM 进程,它以事件的形式将数据从源头送至目的。 ...原创 2019-09-05 14:20:47 · 223 阅读 · 0 评论 -
Flume实战开发配置
example 1. 实际开发中我们常用的是把Flume采集的日志按照指定的格式传到HDFS上,为我们的离线分析提供数据支撑 我们使用二个主机进行数据的生产与采集,简单的了写了一个脚本, 服务器 hadoop1 #!/bin/bash #打印100次文本到dynamic.log文本中 for((i=1;i<=100;i++)) do echo $i hello,wolrd &...原创 2019-09-17 17:53:06 · 409 阅读 · 0 评论