- 博客(2)
- 收藏
- 关注
RSS订阅原创 spark快速大数据分析（2）
spark下载与入门spark shell其他shell工具只能使用单机的硬盘和内存来操作数据，而spark shell可以用来与分布式存储在许多机器的内存或者硬盘上的数据进行交互，并且处理过程的分发由spark自动控制完成。spark支持许多语言版本，此处交互式shell部分只考虑Python版本（PySpark Shell）和Scala版本（Spark-sehll）。进入PySpark She...
2018-04-07 23:19:32
419
原创 spark快速大数据分析
序spark是一个通用计算框架。spark是一个大一统的软件栈。spark是大数据处理引擎。—————————前言spark主要有三个优点：spark好用，高级API剥离了对集群本身的关注，可以专注于计算本身。spark很快，支持交互式使用和复杂算法。spark是通用引擎，可以用于各种运算：sql查询、文本处理、机器学习（MLib机器学习库）等。—————————spark数据分析导论spark是...
2018-04-06 23:15:00
770
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人