Flume
あずにゃん
日萌社
展开
-
CDH 安装 Flume、Kafka、Kudu
总帖:CDH 6系列(CDH 6.0、CHD6.1等)安装和使用Impala 操作/读写 Kudu,使用druid连接池 Kudu 原理、API使用、代码 Kudu Java API 条件查询 spark读取kudu表导出数据为parquet文件(spark kudu parquet) kudu 导入/导出 数据 Kudu 分页查询的两种方式 Kudu 创建主键=========...原创 2019-04-05 20:20:18 · 1353 阅读 · 0 评论 -
flume 的安装和部署(非CDH)
大数据组件安装(非CDH)和使用 总文章flume 的安装和部署(非CDH): 1.tar -zxvf apache-flume-1.6.0-bin.tar.gz 2.mv apache-flume-1.6.0-bin flume 3.cd /root/flume/conf 4.cp flume-env.sh.template flume-env.s...原创 2019-03-28 13:59:15 · 430 阅读 · 0 评论 -
Flume的使用和配置、底层原理
大数据组件使用 总文章===========Apache Flume============ 1.概述 1.Flume 是 Cloudera 提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的软件。 2.Flume 的核心是把数据从数据源(source)收集过来,再将收集到的数据送到指定的目的地(sink)。 为了保证输送的过程一定...原创 2019-03-28 14:19:12 · 1447 阅读 · 0 评论