spark streaming中的demo运行时遇到的问题
在本地运行spark streaming自带的例子NetworkWordCount.scala,发现setMaster("local")不会打印输出结果,改成setMaster("local[2]")后正常输出结果,今天看了源码之后才明白为什么,因为程序启动后会创建一个receiver,封装在RDD里,一直在Executor中运行,他会占用一条线程一行运行,如果是setMaster("local"
原创
2015-07-15 17:27:50 ·
343 阅读 ·
0 评论