编程小白养成手记

大数据理论知识Hadoop大数据的四大特征：海量数据、价值密度低、数据类型多样、数据更新快。hadoop生态圈：HDFS、 MapReduce、 HBASE、 HIVE、 ZOOKEEPER、 PIG、 SQOOP、 Flume、 MAHOUT、 YARNhadoop启动后6个进程：Namenode、 SecondaryNamenode、 DataNode、 ResourceManager、 NodeManager、 jps。Hadoop高可靠，高容错，运行在Linux上。DataNode负责存储

博主安装的hadoop是3.1.3这里是按照厦门大学那个博客安装的，在安装与启动过程中，费了不少事，特此记录一下问题。安装的连接：安装环境：http://dblab.xmu.edu.cn/blog/install-hadoop/分布式搭建：http://dblab.xmu.edu.cn/blog/install-hadoop-cluster/需要注意的是文中所讲的是hadoop2版本，其中集群搭建修改的五个配置文件中的 slaves文件，在hadoop3中已改名成 wordks 目录在/usr/lo