stream
吴用之人
这个作者很懒,什么都没留下…
展开
-
spark-stream:二、Flume概述
1、分布式日志手机框架Flume 业务现状分析 Flume概述 Flume架构以及核心组组件 Flume环境实战 Flume实战 2、Flume概述 Fulume是Cloudera提供的一个分布式、高可靠、高可用的服务; 每个技术框架的由来都是为了解决实际问题,那flume设计的目的用于分布式的海量日志的高效收集、聚合、移动的系统 3、组件: source channel sink 4、Flume环境部署 前置条件: java7以上 足够内存 磁盘空间 读写权限 ...原创 2020-06-14 14:48:10 · 121 阅读 · 0 评论 -
spark-stream:一、前置介绍
一、学习路线 1、视频以及网上资料 2、github示例学习 3、官网阅读 4、手动实现代码案例 二、spark版本介绍 maven339,java1.8 三、实时流处理 业务需求分析 统计主站每个(指定)课程访问的ip、地域信息分布 实现步骤 基于Hadoop实现方案 遇到问题如何解决 实时流处理背景 时效性高 数据量大 实时流处理概...原创 2020-06-08 23:25:10 · 130 阅读 · 0 评论