hadoop
ratnik
这个作者很懒,什么都没留下…
展开
-
Hadoop1.x与Hadoop2.x的区别
hadoop1.x的架构模型: hdfs部分:典型的主从架构,没有主备的概念 namenode:集群当中的主节点,主要用于维护集群当中的元数据信息,以及接受用户的请求,处理用户的请求 secondaryNamenode:主要是辅助namenode管理元数据信息的 datanode:集群当中的从节点,主要用于存储数据文件系统: 分盘 文件夹 文件...原创 2018-11-11 23:05:29 · 515 阅读 · 0 评论 -
hadoop 的六个配置文件的作用
core-site.xml:核心配置文件,主要定义了我们的集群是分布式,还是本机运行hdfs-site.xml: 分布式文件系统的核心配置 决定了我们数据存放在哪个路径,数据的副本,数据的block块大小等等hadoop-env.sh : 配置我们jdk的home路径mapred-site.xml : 定义了我们关于mapreduce运行的一些参数yarn-site.xml : 定...原创 2018-11-11 23:41:29 · 1882 阅读 · 0 评论