2018年02月_SuPhoebe

转载 Java中的抽象类

抽象类的基本概念普通类是一个完善的功能类，可以直接产生实例化对象，并且在普通类中可以包含有构造方法、普通方法、static方法、常量和变量等内容。而抽象类是指在普通类的结构里面增加抽象方法的组成部分。那么什么叫抽象方法呢？在所有的普通方法上面都会有一个“{}”，这个表示方法体，有方法体的方法一定可以被对象直接使用。而抽象方法，是指没有方法体的方法，同时抽象方法还必须使用关键字abstrac...

2018-02-23 01:14:40 433

转载多线程、同步异步及阻塞和非阻塞

多线程、同步异步及阻塞和非阻塞进程和线程的概念进程：运行中的应用程序称为进程，拥有系统资源（cpu、内存）线程：进程中的一段代码，一个进程中可以有多段代码。本身不拥有资源（共享所在进程的资源）；在java中，程序入口被自动创建为主线程，在主线程中可以创建多个子线程。区别：是否占有资源问题创建或撤销一个进程所需要的开销比创建或撤销一个线程所需要的开销大。进程为重量...

2018-02-23 00:38:48 3186

转载 C++内存分配方式详解(堆、栈、自由存储区、全局/静态存储区和常量存储区)

一、数据结构中的栈和堆虽说我们经常把堆栈放在一起称呼，但是不可否认的是，堆栈实际上是两种数据结构：堆和栈。堆和栈都是一种数据项按序排列的数据结构。栈：就像装数据的桶或箱子，它是一种具有后进先出性质的数据结构。堆：一种经过排序的树形数据结构，每个结点都有一个值。通常我们所说的堆的数据结构，是指二叉堆。堆的特点是根结点的值最小（或最大），且根结点的两个子树也是一个堆。由于堆的这个特性，...

2018-02-20 00:20:43 17482 8

原创 Java中可变参数方法

Java中可变参数方法J2SE 1.5中提供了Varargs机制，允许直接定义能和多个实参相匹配的形参。从而，可以用一种更简单的方式，来传递个数可变的实参。Varargs的含义大体说来，“Varargs”是“variable number of arguments”的意思。有时候也被简单的称为“variable arguments”，不过因为这一种叫法没有说明是什么东西可变，所以意义稍...

2018-02-18 09:51:38 15441 2

原创 Scala中的文件操作

Scala中的文件操作文件读取在Scala中，如果只是简单的读取文件内容，可以有两种方法，第一是使用Java的API，第二种就是使用scala.io.Source模块。读取行import scala.io.Source;object Demo extends App { val filename = "/Users/Phoebe/Documents/haha...

2018-02-18 08:38:40 1722

原创 Scala中的Option

Scala中的Option避免null使用大多数语言都有一个特殊的关键字或者对象来表示一个对象引用的是“无”，在Java，它是null。写Java程序的时候，经常会碰到没有有意义的东西可以返回，我们返回null。在Java 里，null 是一个关键字，不是一个对象，所以对它调用任何方法都是非法的。因此调用方必须检查返回值，不然会有NullPointerException的异常。...

2018-02-13 05:20:36 3089

原创 Spark中的RDD基本操作

Spark中的RDD基本操作前言RDD是spark特有的数据模型，谈到RDD就会提到什么弹性分布式数据集，什么有向无环图。这些知识点在别的地方介绍得非常多，本文就不去讲这些了。在阅读本文时候，大家可以就把RDD当作一个数组，或者一个Scala的collection对象，这样的理解对我们学习RDD的API是非常有帮助的。RDD的创建Spark里的计算都是操作RDD进行，那...

2018-02-11 05:32:59 9318 2

原创 Spark中的cache和persist

Spark中cache和persist的作用以及存储级别前言Spark开发高性能的大数据计算作业并不是那么简单。如果没有对Spark作业进行合理的调优，Spark作业的执行速度可能会很慢，这样就完全体现不出Spark作为一种快速大数据计算引擎的优势来。因此，想要用好Spark，就必须对其进行合理的性能优化。有一些代码开发基本的原则，避免创建重复的RDD，尽可能复用同一个RDD，如下...

2018-02-08 11:51:05 5788

原创 Scala中的yield

Scala中的yield简介对于for循环的每次迭代，yield都会生成一个将被记住的值。就像有一个你看不见的缓冲区，for循环的每一次迭代都会将另一个新的值添加到该缓冲区。当for循环结束运行时，它将返回所有已赋值的集合。返回的集合的类型与迭代产生的类型相同，因此Map会生成Map，List将生成List，等等。另外请注意，最初的集合没有改变。for / yield构造根据

2018-02-07 05:07:00 1207

原创 scala中的隐式转换与隐式参数

scala中的隐式转换与隐式参数简介在scala语言中，隐式转换是无处不在的，它们存在固有的隐式转换，不需要人工进行干预。这是我们之前说的Scala类的继承情况，虚线标注出了Scala帮我们实现的隐式转化。例如Float在必要情况下自动转换为Double类型在 scala中的泛型编程的视图界定中我们也提到，视图界定可以跨越类层次结构进行，它背后的实现原理就是隐式转换。例

2018-02-04 10:15:40 370

原创 scala中的集合与集合操作

scala中的集合Scala的集合类可以从三个维度进行切分：可变与不可变集合（Immutable and mutable collections）静态与延迟加载集合（Eager and delayed evaluation )串行与并行计算集合（Sequential and parallel evaluation ）可变与不可变集合[1]可变集合可以在适当的地方被更新或扩

2018-02-04 01:05:28 3327

原创 Scala中的模式匹配

Scala中的模式匹配前言模式匹配是一种scala中的一种函数式编程概念，也常常用于OOP中的一些多态实现，跟java、C++中的switch case或者正则表达式神似，但是试用范围更广。大家需要记住的是：Scala的模式匹配发生在但绝不仅限于发生在match case语句块中，这是Scala模式匹配之所以重要且有用的一个关键因素！match表达式match表达式始

2018-02-03 01:50:10 871

转载 Java中的String、StringBuffer和StringBuilder

Java中的String、StringBuffer和StringBuilder线程安全就是多线程访问时，采用了加锁机制，当一个线程访问该类的某个数据时，进行保护，其他线程不能进行访问直到该线程读取完，其他线程才可使用。不会出现数据不一致或者数据污染。线程不安全就是不提供数据访问保护，有可能出现多个线程先后更改数据造成所得到的数据是脏数据。java.lang.String不可变

2018-02-02 08:42:51 233

原创 scala中的classOf、isInstanceOf、asInstanceOf

scala中的classOf、isInstanceOf、asInstanceOfScala的三个预定义(predefined)方法，我们经常用到。object PredefineTest{ def main(args: Array[String]): Unit = { val c : Char = 97.asInstanceOf[Char] "hello

2018-02-01 12:57:35 7060

原创 Scala和Java中的Infinity和NaN

Scala和Java中的Infinity和NaNInfinityi == i + 1，一个数字永远不会等于它自己加1？Java强制要求使用IEEE 754浮点数算术运算，它可以让你用一个double或float来表示无穷大。正如我们在学校里面学到的，无穷大加1还是无穷大。你可以用任何被计算为无穷大的浮点算术表达式来初始化i，例如：double i = 1.0 / 0.0

2018-02-01 10:31:13 5971

翻译 scala中的类型擦除的问题

Overcoming type erasure in Scala原文来自Overcoming type erasure in Scala。本文旨在展示一些技术来解决由Scala泛型编程中的类型擦除引起的一些常见问题。介绍Scala有一个非常强大的类型系统，Scala是强类型语言。存在类型，结构类型，嵌套类型，路径依赖类型，抽象和具体类型成员，类型边界（(upper, lower,

2018-02-01 00:26:43 3052

Mr.Phoebe的专栏