大数据
feat_ct
菜鸟先飞
展开
-
Hadoop和Spark的区别介绍
目的首先需要明确一点,hadoophe spark 这二者都是大数据框架,即便如此二者各自存在的目的是不同的。Hadoop是一个分布式的数据基础设施,它是将庞大的数据集分派到由若干台计算机组成的集群中的多个节点进行存储。Spark是一个专门用来对那些分布式存储的大数据进行处理的工具,spark本身并不会进行分布式数据的存储。两者的部署Hadoop的框架最核心的设计就是:HDFS和Ma...转载 2019-05-12 21:36:03 · 1976 阅读 · 0 评论 -
大数据学习路(一)——环境配置
此文章仅做个人学习记录与参考,如有错误,欢迎指正一、JDK安装1.下载地址:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html同意许可后,勾选自己所需的版本即可。我这里选择的是64位的mac os版本。下载完成后,点击安装即可。2.环境变量配置2.1编辑当前用户下的...原创 2019-06-26 00:03:14 · 160 阅读 · 0 评论
分享