![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
山鬼谣me
我的这一生
展开
-
Spark 和 Hadoop 本地【window】环境搭建
环境 Spark:2.3.1 Hadoop:2.7.6 java:1.8 前言 最近主要是在学习Spark,根据官网的文档,想本地跑个小程序看看效果; https://spark.apache.org/docs/latest/quick-start.html#self-contained-applications 具体想执行的官方代码如下: /* SimpleApp.java ...原创 2018-06-20 13:13:13 · 1728 阅读 · 0 评论 -
大数据技术原理与应用 【笔记】
环境 看视频: http://study.163.com/course/courseMain.htm?courseId=1002887002 前言 个人笔记 视频笔记 正文 大数据 思路的转变: 全样而非抽样 效率而非精确 相关而非因果 核心技术 分布式存储 和 分布式处理 云计算 解决了:分布式存储 、 分布式处理、虚拟化和多租户; Hadoop YARN 简称“样...原创 2018-06-27 18:09:15 · 1060 阅读 · 0 评论