scala
_哲
这个作者很懒,什么都没留下…
展开
-
使用Akka实现一个简易版的spark通信框架
架构图具体代码Master类import akka.actor.{Actor, ActorSystem, Props}import com.typesafe.config.ConfigFactoryimport com.zhe.rpc.{HeartBeat, RegisteredMessage, WorkerInfo}import scala.concurrent.duration...原创 2018-11-02 23:00:25 · 171 阅读 · 0 评论 -
对比scala和java编写的spark wordcount程序
使用scala编写spark wordcount程序import org.apache.spark.{SparkConf, SparkContext}object WordCount { def main(args: Array[String]): Unit = { //设置spark的配置文件信息 val sparkConf: SparkConf = new Spa...原创 2018-11-04 22:51:56 · 288 阅读 · 0 评论