- 博客(6)
- 资源 (31)
- 收藏
- 关注
RSS订阅原创 2.eureka源码分析-eureka-server的启动与初始化
本文来自http://raksmart.idcspy.com/781 感谢原作者如何解决源码包安装时的依赖性问题自动解决依赖性故障手工解决依赖性问题Rpm软件包和共享库依赖性本教程可以找到解决linux版本中出现诸如：“libc.so.6 is needed by XXX”问题的答案，如果还是没有解决看上面的相关文章推荐在CentOS上的Canon LBP290
2016-03-31 20:20:59
9507
原创 1.eureka源码分析：eureka server的启动入口
rpm -ivh mysql-community-server-5.7.10-1.el5.i686.rpmwarning: mysql-community-server-5.7.10-1.el5.i686.rpm: Header V3 DSA/SHA1 Signature, key ID 5072e1f5: NOKEYerror: Failed dependencies:解决
2016-03-31 19:17:37
2827
原创 spark源码学习（十二）--- checkpoint机制分析
checkpoint原理：上篇cacheManager源码分析文章中提到，当RDD使用cache机制从内存中读取数据，如果数据没有读到，会使用checkpoint机制读取数据。此时如果没有checkpoint机制，那么就需要找到父RDD重新计算数据了，因此checkpoint是个很重要的容错机制。checkpoint就是对于一个RDD chain，如果中间某些中间结果RDD，后面需要反复使
2016-03-03 21:33:00
1421
原创 spark源码学习（十一）---cacheManager分析
cacheManager的分析要从RDD说起，当读取数据的时候，调用RDD的iterator方法的时候，如果storeRageLevel不是none，那么说明之前进行过RDD的持久化，就不需要从从父RDD执行以获取数据，优先使用cacheManager获取持久化的数据。 final def iterator(split: Partition, context: TaskContext): I
2016-03-03 20:08:56
885
原创 spark源码学习（十）--- blockManager分析
blockManager主要原理：blockmanager位于org.apache.spark.storage中，包含四个重要的组件：DiskStore，MemoryStore，Blocktransferservice，ConnectionManager。其中，diskStore负责对磁盘上的数据读写；memoryStore负责内存数据的读写，connectionManager负责到远程节点的
2016-03-03 11:56:41
4959
原创 spark源码学习（九）--- shuffle过程源码分析
shuffle过程是spark运算的重要过程，也是spark调优的关键地方之一，在spark中的reduceByKey，groupByKey，sortByKey，countByKey，join，cogroup等操作时，都会触发shuffle过程。shuffle过程发生在shuffleMapTask与resultTask之间，当shuffleMapTask的输出数据先放到内存bucket中，buck
2016-03-02 21:20:01
914
C primer plus编程练习答案 C primer plus答案
2009-12-31
在Linux世界驰骋系列教程 linux电子书
2009-12-26
CISSP学习指南 cissp
2009-12-26
J2EE架构师手册.chm（英文的）
2009-12-26
IPV6详解 tcp ip IPv6、ICMPv6
2009-07-18
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人