大数据应用技术
文章平均质量分 94
以大数据原理为基础,学习并记录Spark的操作与应用,附带其相同角色的Flink组件相关的学习记录。
「已注销」
这个作者很懒,什么都没留下…
展开
-
Flume 学习笔记(一)使用Flume收集netcat端口通信的信息到本地文件
若发现文章有误,敬请指教,感谢文章目录运行环境一、准备 netcat 工具二、认识 Flume2.1 Flume 概念2.1 Flume 架构三、使用 Flume 收集端口的信息3.1 开启netcat3.2 创建配置文件3.3 启动flume运行环境Vmware 15Flume1.9CentOS7 操作系统一、准备 netcat 工具参考资料Netcat 是一款简单的Unix工具,使用UDP和TCP协议。 它是一个可靠的容易被其他程序所启用的后台操作工具,同时它也被用作网络的.原创 2022-03-19 19:41:37 · 1479 阅读 · 4 评论 -
Spark Scala版本 | 选择题汇总
文章目录选择题总结 (89个题)第1章 大数据技术概述 (10个题)第2章 Scala 语言基础 (20个题)第3章 Spark的设计与运行原理 (10个题)第4章 Spark环境搭建和使用方法 (10个题)第5章 RDD编程 (10个题)第6章 Spark SQL (10个题)第7章 Spark Streaming (11个题)第8章 Spark MLlib (8个题)选择题总结 (89个题)第1章 大数据技术概述 (10个题)1.1 大数据技术及其代表性的软件种类很多,不同的技术有其不同应用场原创 2022-01-03 00:45:21 · 8486 阅读 · 0 评论 -
大数据应用技术 | 使用 Docker搭建 Flink 集群 | FlinkStreaming实时数据流处理程序实现词频统计
大数据应用技术 | 使用 Docker搭建 Flink 集群 | FlinkStreaming实时数据流处理程序实现词频统计原创 2021-12-23 20:24:31 · 2105 阅读 · 0 评论