- 博客(4)
- 收藏
- 关注
RSS订阅翻译 Spark Streaming + Kafka集成指南
本文适用于Kafka broker 0.8.2.1及更高版本。这里会说明如何配置Spark Streaming接收Kafka的数据。有两种方法 - 老方法使用Receiver和Kafka的高层API，新方法不适用Receiver。
2017-06-28 19:56:48
599
翻译 Spark Streaming编程指南（二）
连接初始化StreamingContext离散流DStreams输入DStreams和Receivers
2017-06-27 23:19:25
534
翻译 Spark Streaming编程指南（一）
Spark Streaming是核心Spark API的扩展，对实时数据流地处理具有可扩展，高吞吐量和容错特性。数据可从很多源获取，如Kafka，Flume，Kinesis或者TCP sockets，并且可以使用复杂算法进行处理，用高层函数表示如map，reduce，join和window 。最后，处理结果可以输出到文件系统，数据库或者实时仪表盘。
2017-06-22 14:28:38
433
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人