scofielong的专栏

前言 spark作为大数据计算引擎，为大数据的计算提供了一套新的底层模型；从存储角度，它借助内存作为首选方式，比hadoop快百倍。记录下一些重点感悟。 几大特点 快 - 100*hadoop运行 易用 - 搭好框架之后，支持Java, Scala, Python, R, and SQL. 通用 - sql、流式计算、复杂分析 灵活运行 - hadoop集群，mesos、k8s等有广泛集成 使用体验 在接触spark之前，对hadoop、hive有一定了解，hadoop的编程模式还是以java