sparkStreaming
漠小浅
IT
展开
-
sparkStreaming_电商案例
数据生成: package com.java__SparkStreaming; import kafka.javaapi.producer.Producer; import kafka.producer.KeyedMessage; import kafka.producer.ProducerConfig; import java.util.*; /** * Created by Ad原创 2016-07-12 10:02:45 · 2279 阅读 · 0 评论 -
sparkStreaming
速查手册: 1,读取socket端数据 JavaReceiverInputDStream lines = jssc.socketTextStream("master", 9999); 2,监控HDFS文件系统(只能检测文件夹下面新增的文件,对文件内容的追加和删除没有作用) JavaDStream lines = jssc.textFileStream("hdfs://Master:90原创 2016-05-16 18:38:24 · 1933 阅读 · 0 评论