- 博客(2)
- 收藏
- 关注
原创 初识spark
#何为spark 大规模数据处理和统一分析引擎 快速通用集群计算平台 快速通用的内存并行计算框架 用于开发大型,低延迟的数据分析应用程序 扩展了mapreduce计算模型 支持交互式查询和流处理 主要特点是内存计算,及时依靠磁盘进行复杂运算。 #为什么要学习spark 基于mapreduce的引擎往往都将运算中间结果存储在磁盘,以达到存储和容错的效果,磁盘读取的速度慢,spark正是弥补这些不足 ...
2019-10-10 10:06:27
81
原创 设计模式体验
#工厂模式 ##对客户端隐藏创建逻辑,使用一个共同的接口来指向新创建的对象 #抽象工厂模式 ##在工厂模式基础上,将创建对象改为工厂对象 #单例模式 ##一个单一的类,该类负责创建唯一的一个对象,并提供访问访问该对象的方式,可以直接访问。 ###单例模式首先要确保线程安全,其次在保证按需创建,也就是延迟创建,最后在考虑高效性。 ####最推荐的模式:枚举模式,枚举的底层代码使用了classload...
2019-10-09 23:38:50
95
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人