自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(3)
  • 收藏
  • 关注

原创 Spark Streaming流数据处理入门教程

本文详细介绍了Kafka的安装与测试步骤。首先,通过下载并解压Kafka安装包,设置权限并创建软链接,完成Kafka的安装。接着,启动Zookeeper和Kafka服务,并通过Jps命令检查服务是否成功启动。随后,创建测试主题并查看已有主题列表。最后,通过两个终端窗口分别启动Kafka的生产者和消费者,进行消息收发的测试。测试完成后,可通过快捷键结束客户端,保留服务端窗口。整个过程涵盖了Kafka的基本操作,为后续使用奠定了基础。

2025-05-21 14:30:37 141

原创 Spark RDD 常用操作详解

定义转换函数... return (x, 1) # 返回元组(元素,1)# 应用自定义函数>>> rdd2 = rdd1.map(trans) # 使用函数名而非lambda。

2025-04-13 18:39:45 912

原创 Spark大数据环境搭建

大数据环境搭建

2025-03-02 14:39:29 950 1

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除