Hadoop操作模式

本文介绍了在Linux环境下,Hadoop的三种操作模式:独立模式、模拟分布式模式和完全分布式模式。对于每种模式,详细阐述了配置步骤,包括IP地址修改、DNS设置、Java安装、Hadoop配置文件的编辑等。此外,还提到了启动Hadoop、验证集群应用程序及解决SSH连接问题的过程。
摘要由CSDN通过智能技术生成

下载 Hadoop 以后,可以操作Hadoop集群以以下三个支持模式之一:

下载Hadoop在系统中,默认情况下之后,它会被配置在一个独立的模式,用于运行Java程序。

模拟分布式模式:
这是在单台机器的分布式模拟。Hadoop守护每个进程,如: hdfs, yarn, MapReduce 等,都将作为一个独立的java程序运行。这种模式对开发非常有用。

完全分布式模式:
这种模式是完全分布式的最小两台或多台计算机的集群。

搭建伪分布式:

修改IP地址

vi /etc/sysconfig/network-scripts/ifconfig-eth0  // 打开网卡配置文件

onboot=yes  //改为 yes

bootproto=static  //这里要改为静态

IPADDR=192.168.83.xxx   //修改 IP 

netmask=255.255.255.0  //子网掩码

gateway=192.168.83.2  //这里写自己的网关 

修改dns

vi /etc/resolv.conf

nameserver 8.8.8.8

重启IP服务

service network restart   //重启防火墙

关闭防火墙

service iptables stop     //关闭防火墙

chkconfig iptables off    //开启禁止开发防火墙

修改映射关系

vi /etc/hosts   //修改主机名

vi /etc/sysconfig/network

NETWORKING=yes
 
HOSTNAME=虚拟机名

安装Java

tar -zxvf jar         //包名     可以看见解压状态

vi /etc/profile.d/java.sh    //配置环境变量

JAVA_HOME=/soft/jdk

PATH=$PATH:$JAVA_HOME/bin

CLASSPATH=$CLASSPATH
  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

এ᭄゛涂涂

你的鼓励将是我创作的最大动力!

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值