![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据处理
文章平均质量分 94
白令屿
这个作者很懒,什么都没留下…
展开
-
记录学习Spark+Kafka构建实时分析Dashboard案例中遇到的问题(三)Spark Streaming实时处理数据
目录实验要求Spark和Kafka的组合使用现阶段在学习大数据处理相关的项目,先通过厦门大学林子雨老师的案例教程学习Spark+Kafka构建实时分析Dashboard案例学习Kafka和Spark的处理, 地址:http://dblab.xmu.edu.cn/post/8274/通过博客记录一下学习过程中遇到的各种问题。在本次实验(三)中并没有遇到什么问题,因此主要记录一下实验过程。查看前一步操作:(二)数据处理和Python操作Kafka实验要求所需知识储备训练技能任务清单原创 2021-10-25 17:10:00 · 1649 阅读 · 2 评论 -
kafka命令总结
kafka命令总结开始:cd /usr/local/kafka./bin/zookeeper-server-start.sh config/zookeeper.properties./bin/kafka-server-start.sh config/server.properties创建自定义名称为“wordsendertest”的topiccd /usr/local/kafka./bin/kafka-topics.sh --create --zookeeper localhost:2181原创 2021-10-18 10:43:55 · 263 阅读 · 0 评论 -
记录学习Spark+Kafka构建实时分析Dashboard案例中遇到的问题(二)数据处理和Python操作Kafka
目录实验要求安装配置anaconda+pycharm环境anaconda安装配置pycharm配置anaconda环境数据预处理数据集介绍数据预处理现阶段在学习大数据处理相关的项目,先通过厦门大学林子雨老师的案例教程学习Spark+Kafka构建实时分析Dashboard案例学习Kafka和Spark的处理, 地址:http://dblab.xmu.edu.cn/post/8274/通过博客记录一下学习过程中遇到的各种问题。在本次实验(二)中并没有遇到什么问题,因此主要记录一下实验过程。查看前一步操作原创 2021-10-15 16:19:47 · 1089 阅读 · 0 评论 -
记录学习Spark+Kafka构建实时分析Dashboard案例中遇到的问题(一)安装
目录推荐环境系统和软件安装安装UbuntuHadoop安装Spark安装如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入现阶段在学习大数据处理相关的项目,先通过厦门大学林子雨老师的案例教程学习Spark+Kafka构建实时分析Dashboard案例学习Kafka和Spar原创 2021-10-14 21:28:32 · 1063 阅读 · 0 评论