Soul Joy Hub

但行好事,莫问前程。

深入理解Spark 2.1 Core (二):DAG调度器的原理与源码分析

上一篇《深入理解Spark 2.0 (一):RDD实现及源码分析 》的5.2 Spark任务调度器我们省略过去了,这篇我们就来讲讲Spark的调度器。 概述 上一篇《深入理解Spark(一):RDD实现及源码分析 》提到: 定义RDD之后,程序员就可以在动作(注:即action操作...

2016-12-28 22:11:02

阅读数 9041

评论数 3

深入理解Spark 2.1 Core (一):RDD的原理与源码分析

本文链接:http://blog.csdn.net/u011239443/article/details/53894611 该论文来自Berkeley实验室,英文标题为:Resilient Distributed Datasets: A Fault-Tolerant Abstraction fo...

2016-12-27 12:57:57

阅读数 19550

评论数 2

Java NIO 实现 EchoServer EchoClient

阻塞模式EchoServer采用阻塞模式,用线程池中的工作线程处理每个客户连接。 EchoClient也采用阻塞模式,单线程。serverpackage com.test.socket.nio.echo;import java.io.BufferedReader; import java.io....

2016-12-21 18:50:49

阅读数 2016

评论数 0

基于Spark的大数据精准营销中搜狗搜索引擎的用户画像挖掘

转载请注明:转载 from http://blog.csdn.net/u011239443/article/details/53735609 from CCF举办的“大数据精准营销中搜狗用户画像挖掘”竞赛 1. 选题背景与意义 1.1 用户画像与精准营销 “用户画像”是近几...

2016-12-19 16:17:06

阅读数 17218

评论数 23

Scala——Traits

类似于Java中的接口,trait被用于通过所支持的方法特例化来定义对象。如Java 8中一样,Scala允许trait被部分实现。和class相比,trait可以没有构造函数。如:trait Similarity { def isSimilar(x: Any): Boolean def ...

2016-12-06 13:30:33

阅读数 751

评论数 0

提示
确定要删除当前文章?
取消 删除