- 博客(2)
- 收藏
- 关注
原创 spark stream概述
Spark Streaming概述OverviewSpark Streaming 是核心 Spark API 的扩展,它支持实时数据流的可扩展、高吞吐量、容错流处理。数据可以从许多来源(如 Kafka、Kinesis 或 TCP 套接字)获取,并且可以使用复杂的算法进行处理,这些算法由 map、reduce、join 和 window 等高级函数表示。最后,可以将处理后的数据推送到文件系统、数据库和实时仪表板。事实上,你可以在数据流上应用 Spark 的机器学习和图形处理算法。在内部,它的工作原理如
2021-09-29 11:29:12 1083
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人