DStream操作实战
码中小白鼠
码中小白鼠
展开
-
SparkStreaming接收socket数据,实现单词计数WordCount
文章目录架构图实现流程注意:执行查看效果 架构图 实现流程 安装并启动生产者 首先在Linux服务器上用YUM安装nc工具,nc命令式netcat命令的简称,都是用来设置路由器。我们可以利用它向某个端口发送数据 yum install -y nc 通过netcat工具向指定的端口发送数据 nc-lk 9999 编写S...原创 2019-07-18 20:39:43 · 1261 阅读 · 0 评论 -
SparkStreaming接受socket数据,实现单词计数累加
文章目录架构图实现流程执行查看效果 SparkStreaming接收socket数据,实现单词计数WordCount 在上面的案例中存在一个问题,每个批次的单词次数都被正确的统计出来,但是结果不能累加!如果需要累加需要使用updat...原创 2019-07-18 21:04:54 · 764 阅读 · 0 评论