- 博客(1)
- 资源 (3)
- 收藏
- 关注
原创 Spark安装 测试
Spark与Mapreduce对比 MapReduce Spark 数据存储结构:磁盘hdfs文件系统的split 使用内存构建弹性分布式数据集RDD, 对数据进行运算和cache 编程范式: Map + Reduce DAG(有向无环图): Transformation + action 计算中间数据落磁盘, io及序列化、 反序列化代价大 计算中间数据在内存中维护,
2017-02-15 12:10:07 823 1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人