大数据基础知识（待续）

最近要参与大数据治理项目，但大数据相关知识是零，因此从头开始了解学习。本人学习目的是用于测试，因此jindui

看了一些材料，整理链接到这里，方便大家了解，也作为一个学习经历，便于以后查阅。

Hadoop

第一步还是了解Hadoop，这块最基本的可以看百度百科，知道个大概，如果进一步去看的话，可以看看慕课网/极客学院等初级的学习教程，个人一些陌生领域的新知识，有时候会到这类网站上去看，做基本了解还行，深入学习就不建议了。推荐这个链接：http://www.imooc.com/learn/391，架构方面也可以看官方材料，http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_design.html，有条件和兴趣，可以把官方材料都学习一下。

第二步了解MR，MapReduce，MR对Hadoop来说是至关重要的，关于这个概念的理解，可以参考这位知友的回答https://www.zhihu.com/question/23345991，当然慕课网上也有,可以花五分钟看一下，http://www.imooc.com/video/8033

基于此，基本对hadoop有基本了解了，包括功能、架构等。

当然hadoop通常不会单独存在，一般都是和其他软件同时使用的。以下还有几个建议了解学习的

spark

spark是一个非常看重速度的大数据处理平台，基本概念这里可以看到http://www.infoq.com/cn/articles/apache-spark-introduction

spark和hadoop的技术对比可以参考这里，https://www.zhihu.com/question/26568496