- 博客(6)
- 收藏
- 关注
转载 设计模式 (1)
设计模式概述什么是设计模式?一个模式有四个基本要素:模式名称:助记名问题:描述在何时使用设计模式解决方案:描述合计的组成成分,它们的相互关系、各自的职责和协作方式效果:设计模式应用的效果及使用模式应权衡的问题常见设计模式常见设计模式有如下23种:Abstract Factory提供一个创建一系列相关或相互依赖对象的接口,...
2015-09-23 18:05:00 107
转载 Discretized Streams: An Efficient and Fault-Tolerant Model for Stream Processing on Large Clusters
阅读笔记概述:本文同样发表于2012年。提出了一种称为离散化数据流(Discretized Streams,D-Streams)的编程模型。该模型提供了一种高级函数式API,具有高度的一致性和强大的容错能力。基于Spark分布式计算框架,进行扩展实现了一个D-Stream的原型,称为Spark Streaming。研究背景:许多大数据应用要求...
2015-05-28 17:48:00 254
转载 Spark: Cluster Computing with Working Sets
阅读笔记概述:本文发表于2010年,早于同一作者2年后发表的《Resilient Distributed Datasets: A Fault-Tolerant Abstraction for In-Memory Cluster Computing》。文章介绍了基于RDD的分布式计算模型以及早期Spark的实现。研究背景:Mapreduce及其变种...
2015-05-28 11:47:00 464
转载 Resilient Distributed Datasets: A Fault-Tolerant Abstraction for In-Memory Cluster Computing
阅读笔记提出问题:数据的重用在很多迭代的机器学习算法和图算法中都很常见,如网页排名、K-means聚类、逻辑回归等。另一个数据重用的典型场景是交互式数据挖掘,用户在同一数据集上运行多重即席查询。尽管现有框架为处理机群的计算资源提供了大量抽象,对于复杂计算中包含大量数据重用的这类应用,执行效率仍然很低。现有框架唯一重用数据的方式就是将它写入到外部稳定的分...
2015-05-27 14:13:00 224
转载 Java编程思想 (2)
访问权限控制访问权限控制:Java提供了访问权限控制修饰词控制访问权限。权限从大到小依次为public,protected,包访问权限(没有关键词),private。包:库单元包内含有一组类,它们在单一的名字空间之下被组织在一起。编写一个Java源代码文件时,此文件通常被成为编译单元。每个编译单元内可以有一个public类,该类名称必须与文件名相同。...
2014-12-22 14:16:00 77
转载 Java编程思想 (1)
Java与Internet客户/服务器系统核心思想:系统具有一个中央信息存储池,用来存储某种数据。它通常存在于数据库中,根据需要将它分发给某些人员或机器集群。信息存储池、用于分发信息的软件和信息与软件所驻留的机器或机群总称为服务器。主流在用户机器上的软件与服务器进行通信,疑惑去信息处理信息。然后将它们显示在成为客户机的用户机器上。为了将响应...
2014-12-15 11:44:00 137
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人