Spark学习
Lynqwest
这个作者很懒,什么都没留下…
展开
-
spark学习——(一)spark简介
一、关于SparkSpark最初由美国加州伯克利大学(UCBerkeley)的AMP(Algorithms, Machines and People)实验室于2009年开发,是基于内存计算的大数据并行计算框架,可用于构建大型的、低延迟的数据分析应用程序。Spark在诞生之初属于研究性项目,其诸多核心理念均源自学术研究论文。2013年,Spark加入Apache孵化器项目后,开始获得迅猛的发展,如今...原创 2018-05-03 15:12:28 · 1454 阅读 · 0 评论 -
spark学习——(二)spark基础环境配置-linux(1)
1. JDK的安装1. 下载jdk安装包 jdk-8u171-linux-i586.tar.gz2. 建立一个新文件夹JDK,执行,解压文件linuxr@ubuntu:/$tar -zxvf jdk-8u171-linux-i586.tar.gz3. 设置环境变量linuxr@ubuntu:/$vim /etc/profile在后面添加:export JAVA_HOME=/home/linuxr/...原创 2018-05-10 16:57:34 · 382 阅读 · 0 评论