![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
项目
ylqdh
如果对文章有疑问、不同见解的,欢迎留言或邮件交流,邮箱-> ylqdh@yeliqun.xyz
展开
-
Flume+Kafka+SparkStreaming实时统计网站日志 -- 4、SparkStreaming实时统计
日志采集到了Kafka,接下来要使用Spark Streaming,根据不同需求来统计数据。原创 2019-11-26 18:59:34 · 536 阅读 · 0 评论 -
Flume+Kafka+SparkStreaming实时统计网站日志--3、Flume采集数据到Kafka
Flume采集日志数据到Kafka过程中Flume配置文件写法,Kafka topic创建、消费者查看结果原创 2019-11-13 10:01:15 · 807 阅读 · 1 评论 -
Flume+Kafka+SparkStreaming实时统计网站日志--2、项目技术选型和项目架构
一、项目技术选型 基于 Spark实时流统计网站日志–1、项目介绍 ,选择flume、Kafka、Spark Streaming来完成本项目。数据流向图如下: flume_kafka_spark集成数据流向图,红色箭头为数据流向,当数据经过Spark Streaming处理后,存入HBase,然后在web上展示。具体的做法见后...原创 2019-11-12 17:16:24 · 361 阅读 · 0 评论 -
Flume+Kafka+SparkStreaming实时统计网站日志--1.项目介绍
使用Flume+Kafka+Spark Streaming统计主站每个(指定)课程访问的每天的点击量、不同搜索引擎引流的点击量原创 2019-11-12 08:59:35 · 289 阅读 · 0 评论