flume
sq0723
这个作者很懒,什么都没留下…
展开
-
Flume日志收集系统
flume基础知识 1、hdfs数据接入方式:hdfs shell命令、hdfs api、MR等各种分布式计算方式、sqoop–传统数据库与hadoop同步、数据管道方式flume、其他(FTP:hdfs-over-ftp) 2、Flume是什么 Cloudera提供的高可用、高可靠的,分布式海量日志采集聚合和传输系统 支持在日志系统中定制各类数据发送方,用于收集数据 提供对数据进程简单处理,并写...原创 2019-03-18 13:15:07 · 1694 阅读 · 0 评论 -
Flume安装及组件作用配置
1、flume安装 解压,conf目录下拷贝配置,安装目录下测试运行 Tar -zxvf apache-flume-1.8.0.0-bin.tar.gz cp flume-conf.properties.template flume-conf-sequence.properties bin/flume-ng agent -n agent1 -c conf -f conf/flum...原创 2019-09-25 10:51:25 · 504 阅读 · 0 评论