spark streaming
关注
分享
扫一扫
weixin_SAG
我是一名经验丰富的Java开发工程师，同时也是CSDN社区的活跃成员。在Java开发领域，我拥有扎实的编程基础和丰富的项目经验，擅长运用Java语言进行后端开发、系统架构设计以及数据库管理等工作。
加入CSDN后，我积极参与技术分享和交流，致力于将自己在Java开发方面的经验和心得与广大开发者共同分享。通过撰写技术博客、参与技术问答、发布原创教程等方式，我不断为CSDN社区贡献有价值的内容，并获得了广泛的认可和好评。
未来，我将继续在CSDN平台上深耕细作，与更多志同道合的开发者一起探讨技术难题、分享创新思路，共同推动开发技术的不断发展和进步。
展开
-
分布式发布订阅消息系统Kafka
4-1 -课程目录分布式消息队列KafkaKafka概述 Kafka架构及核心概念 Kafka部署及使用Kafka容错性测试 Kafka API编程 Kafka实战4-2 -Kafka概述官网：http://kafka.apache.org/和信息系统类似信息中间者：生产者和消费者馒头铺：生产者你：消费...原创 2019-08-14 12:09:29 · 444 阅读 · 0 评论 -
第12章 Spark Streaming项目实战
12-1 -课程目录项目实战需求说明互联网访问日志概述功能开发及本地运行生产环境运行12-2 -需求说明今天到现在为止实战课程的访问量今天到现在为止从搜索引擎过来的实战课程的访问量12-3 -用户行为日志介绍为什么要记录用户的访问行为日志网站页面的访问量网站的粘性推荐用户行为日志分析的意义网站的眼睛网站的神...原创 2019-08-14 14:07:29 · 763 阅读 · 0 评论 -
第11章 Spark Streaming整合Flume&Kafka打造通用流处理基础
11-1 -课程目录基于Spark Steaming&Flume&kafka打造通用流处理平台整合日志框架输出到flume整合flume到kafka整合kafka到spark streamingspark streaming对接接收到的数据进行处理11-2 -处理流程画图剖析11-3 -日志产生器开发并结合log4j完成日志的输出模拟日志...原创 2019-08-13 17:26:12 · 193 阅读 · 0 评论 -
第14章 Java拓展
14-1 -课程目录拓展：使用Java开发Spark应用程序使用Java开发Spark Streaming应用程序14-2 -使用Java开发Spark应用程序官网：http://spark.apache.org/docs/latest/sql-programming-guide.html源码地址14-3 -使用Java开发Spark Stream...原创 2019-08-14 14:05:13 · 169 阅读 · 0 评论 -
第13章 可视化实战
13-1 -课程目录课程目录为什么需要可视化SpringBoot构建web项目使用Echarts构建静态数据可视化使用Echarts构建动态数据可视化阿里云DataV数据可视化13-2 -为什么需要可视化13-3 -构建Spring Boot项目springBoot构建web项目查看官网：https://spring.io/projects/spring...原创 2019-08-14 12:10:16 · 256 阅读 · 0 评论 -
第10章 Spark Streaming整合Kafka
10-1 -课程目录实战一、Receiver-based实战二、Direct Approach10-2 -Spark Streaming整合Kafka的版本选择详解参考文档：http://spark.apache.org/docs/latest/streaming-programming-guide.html10-3 -Receiver方式整合之概述参考文档：htt...原创 2019-08-14 12:07:32 · 186 阅读 · 0 评论 -
第9章 Spark Streaming整合Flume
9-1 -课程目录实战1：Flume-style Push-based-Approach实战2：Pull-based Approach using a Custom Sink9-2 -Push方式整合之概述实战1：Flume-style Push-based-Approach参考文档：http://spark.apache.org/docs/latest/streaming-k...原创 2019-08-14 12:07:52 · 134 阅读 · 0 评论 -
第8章 Spark Streaming进阶与案例实战
8-1 -课程目录带状态的算子：updateStateByKey实战：计算到目前为止累计出现的单词写到MySQL中基于Windows统计实战：黑名单过滤实战：Spark Streaming整合Spark SQL实战8-2 -实战之updateStateByKey算子的使用UpdateStateByKey OperationTheupdateStateByKe...原创 2019-08-14 12:08:16 · 215 阅读 · 0 评论 -
第7章 Spark Streaming核心概念与编程
7-1 -课程目录核心概念TransformationOutput Operations案例实战7-2 -核心概念之StreamingContext参考文档：http://spark.apache.org/docs/latest/streaming-programming-guide.html#initializing-streamingcontextIn...原创 2019-08-14 12:08:35 · 192 阅读 · 0 评论 -
第6章 Spark Streaming入门
6-1 -课程目录概述发展史应用场景从词频统计功能着手入门集成Spark生态系统的使用工作原理6-2 -Spark Streaming概述官网：http://spark.apache.org/docs/latest/streaming-programming-guide.htmlSpark Streaming is an extension of the ...原创 2019-08-14 12:09:01 · 173 阅读 · 0 评论 -
第5章 实战环境搭建
5-1 -课程目录实战环境搭建JDK安装 Zookeeper安装Scala安装 Hbase安装Maven安装 Spark安装Maven安装 Spark安装Hadoop安装 IDEA+Maven+Spark Streaming由于JDK和Zookeeper安装已经在之前安装过，所以本次课程不讲解。5-2 -Scala安装1、下载wget https://dow...原创 2019-08-14 12:09:15 · 133 阅读 · 0 评论 -
第13章 可视化实战
13-1 -课程目录课程目录为什么需要可视化SpringBoot构建web项目使用Echarts构建静态数据可视化使用Echarts构建动态数据可视化阿里云DataV数据可视化13-2 -为什么需要可视化13-3 -构建Spring Boot项目springBoot构建web项目查看官网：https://spring.io/projects/spr...原创 2019-08-13 17:25:49 · 140 阅读 · 0 评论