2022大数据学习笔记1.4

本文详细介绍了Hadoop的三种部署模式:独立模式、伪分布式模式和完全分布式模式,并重点讲解了完全分布式模式的集群规划,包括集群拓扑结构和角色分配。此外,还详细阐述了JDK的安装配置过程,包括下载、上传、解压和配置环境变量,并指导如何将JDK分发到其他节点以及同步环境配置文件。
摘要由CSDN通过智能技术生成

一、Hadoop的部署模式


1、独立模式


在独立模式下,所有程序都在单个JVM上执行,调试Hadoop集群的MapReduce程序也非常方便。一般情况下,该模式常用于学习或开发阶段进行调试程序。


2、伪分布式模式


在伪分布式模式下, Hadoop程序的守护进程都运行在一台节点上,该模式主要用于调试Hadoop分布式程序的代码,以及程序执行是否正确。伪分布式模式是完全分布式模式的一个特例。


3、 完全分布式模式


在完全分布式模式下,Hadoop的守护进程分别运行在由多个主机搭建的集群上,不同节点担任不同的角色,在实际工作应用开发中,通常使用该模式构建企业级Hadoop系统。


 二、集群规划


1、集群拓扑结构


一个主节点,两个从节点


 2、角色分配


节点    角色
master    NameNode, DataNode
slave1    DataNode
slave2    DataNode


三、jdk的安装和环境配置 


1、下载路径


链接:https://www.oracle.com/webapps/redirect/signon?nexturl=https://download.oracle.com/otn/java/jdk/8u341-b10/424b9da4b48848379167015dcc250d8d/jdk-8u341-linux-i586.tar.gz 
或者百度网盘提取:链接: https://pan.baidu.com/s/1o1EXc0xjtMiJ49Zw

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值