- 博客(3)
- 收藏
- 关注
原创 Spark Streaming流数据处理入门教程
本文详细介绍了Kafka的安装与测试步骤。首先,通过下载并解压Kafka安装包,设置权限并创建软链接,完成Kafka的安装。接着,启动Zookeeper和Kafka服务,并通过Jps命令检查服务是否成功启动。随后,创建测试主题并查看已有主题列表。最后,通过两个终端窗口分别启动Kafka的生产者和消费者,进行消息收发的测试。测试完成后,可通过快捷键结束客户端,保留服务端窗口。整个过程涵盖了Kafka的基本操作,为后续使用奠定了基础。
2025-05-21 14:30:37
141
原创 Spark RDD 常用操作详解
定义转换函数... return (x, 1) # 返回元组(元素,1)# 应用自定义函数>>> rdd2 = rdd1.map(trans) # 使用函数名而非lambda。
2025-04-13 18:39:45
912
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人