hadoop高可用集群搭建（超详细）

最新推荐文章于 2024-03-18 22:54:58 发布
最新推荐文章于 2024-03-18 22:54:58 发布
阅读量642 收藏 1
点赞数
分类专栏： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_23873703/article/details/89244792
版权

一，搭建centos6.10集群

1，软件准备

centos6.10下载：https://mirrors.aliyun.com/centos/6/isos/x86_64/CentOS-6.10-x86_64-bin-DVD1.iso（阿里云镜像站）
vm:自行百度

2，准备Linux环境

2.1，点击VMware快捷方式，右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段：192.168.1.0 子网掩码：255.255.255.0 -> apply -> ok
      回到windows --> 打开网络和共享中心 -> 更改适配器设置 -> 右键VMnet1 -> 属性 -> 双击IPv4 -> 设置windows的IP：192.168.1.100 子网掩码：255.255.255.0 -> 点击确定
      在虚拟软件上 --My Computer -> 选中虚拟机 -> 右键 -> settings -> network adapter -> host only -> ok    
2.2，修改主机名
       vim /etc/sysconfig/network
     
      NETWORKING=yes
      HOSTNAME=itcast    ###
      
2.3，修改IP
      两种方式：
      第一种：通过Linux图形界面进行修改（强烈推荐）
           进入Linux图形界面 -> 右键点击右上方的两个小电脑 -> 点击Edit connections -> 选中当前网络System eth0 -> 点击edit按钮 -> 选择IPv4 -> method选择为manual -> 点击add按钮 -> 添加IP：192.168.1.101 子网掩码：255.255.255.0 网关：192.168.1.1 -> apply

      第二种：修改配置文件方式（屌丝程序猿专用）
           vim /etc/sysconfig/network-scripts/ifcfg-eth0
          
           DEVICE="eth0"
           BOOTPROTO="static"               ###
           HWADDR="00:0C:29:3C:BF:E7"
           IPV6INIT="yes"
           NM_CONTROLLED="yes"
           ONBOOT="yes"
           TYPE="Ethernet"
           UUID="ce22eeca-ecde-4536-8cc2-ef0dc36d4a8c"
           IPADDR="192.168.1.101"           ###
           NETMASK="255.255.255.0"          ###
           GATEWAY="192.168.1.1"            ###
          
 2.4，修改主机名和IP的映射关系
      vim /etc/hosts
          
      192.168.1.101     itcast

 2.5，关闭防火墙
      #查看防火墙状态
      service iptables status
      #关闭防火墙
      service iptables stop
      #查看防火墙开机启动状态
      chkconfig iptables --list
      #关闭防火墙开机启动
      chkconfig iptables off

 2.6，重启Linux
      reboot          
 2.7，配置ssh免登陆
     #生成ssh免登陆密钥
     #进入到我的home目录
     cd ~/.ssh	
     ssh-keygen -t rsa （四个回车）
     执行完这个命令后，会生成两个文件id_rsa（私钥）、id_rsa.pub（公钥）
     将公钥拷贝到要免登陆的机器上
     ssh-copy-id localhost
 2.8，安装JDK
     2.8.1，上传alt+p 后出现sftp窗口，然后put d:\xxx\yy\ll\jdk-7u_65-i585.tar.gz	    
     2.8.2，解压jdk
          #创建文件夹
          mkdir /home/hadoop/app
          #解压
          tar -zxvf jdk-7u55-linux-i586.tar.gz -C /home/hadoop/app	         
     2.8.3，将java添加到环境变量中
          vim /etc/profile
          #在文件最后添加
          export JAVA_HOME=/home/hadoop/app/jdk-7u_65-i585
          export PATH=$PATH:$JAVA_HOME/bin	    
          #刷新配置
          source /etc/profile

3，配置Hadoop集群

集群规划：
主机名 IP 安装的软件 运行的进程
weekend01 192.168.1.201 jdk、hadoop NameNode、DFSZKFailoverController(zkfc)
weekend02 192.168.1.202 jdk、hadoop NameNode、DFSZKFailoverController(zkfc)
weekend03 192.168.1.203 jdk、hadoop ResourceManager
weekend04 192.168.1.204 jdk、hadoop ResourceManager
weekend05 192.168.1.205 jdk、hadoop、zookeeper DataNode、NodeManager、JournalNode、QuorumPeerMain
weekend06 192.168.1.206 jdk、hadoop、zookeeper DataNode、NodeManager、JournalNode、QuorumPeerMain
weekend07 192.168.1.207 jdk、hadoop、zookeeper DataNode、NodeManager、JournalNode、QuorumPeerMain

主机名 IP 安装的软件 运行的进程
weekend01 192.168.1.201 jdk、hadoop NameNode，DFSZKFailoverController(zkfc)
weekend02 192.168.1.202 jdk、hadoop NameNode、DFSZKFailoverController(zkfc)
weekend03 192.168.1.203 jdk、hadoop ResourceManager
weekend04 192.168.1.204 jdk、hadoop ResourceManager
weekend05 192.168.1.205 jdk、hadoop、zookeeper DataNode、NodeManager、JournalNode、QuorumPeerMain
weekend06 192.168.1.206 jdk、hadoop、zookeeper DataNode、NodeManager、JournalNode、QuorumPeerMain
weekend07 192.168.1.207 jdk、hadoop、zookeeper DataNode、NodeManager、JournalNode、QuorumPeerMain

说明：
1.在hadoop2.0中通常由两个NameNode组成，一个处于active状态，另一个处于standby状态。Active NameNode对外提供服务，而Standby NameNode则不对外提供服务，仅同步active namenode的状态，以便能够在它失败时快速进行切换。
hadoop2.0官方提供了两种HDFS HA的解决方案，一种是NFS，另一种是QJM。这里我们使用简单的QJM。在该方案中，主备NameNode之间通过一组JournalNode同步元数据信息，一条数据只要成功写入多数JournalNode即认为写入成功。通常配置奇数个JournalNode
这里还配置了一个zookeeper集群，用于ZKFC（DFSZKFailoverController）故障转移，当Active NameNode挂掉了，会自动切换Standby NameNode为standby状态
2.hadoop-2.2.0中依然存在一个问题，就是ResourceManager只有一个，存在单点故障，hadoop-2.4.1解决了这个问题，有两个ResourceManager，一个是Active，一个是Standby，状态由zookeeper进行协调
安装步骤：
1.安装配置zooekeeper集群（在weekend05上）
1.1解压
tar -zxvf zookeeper-3.4.5.tar.gz -C /weekend/
1.2修改配置
cd /weekend/zookeeper-3.4.5/conf/
cp zoo_sample.cfg zoo.cfg
vim zoo.cfg
修改：dataDir=/weekend/zookeeper-3.4.5/tmp
在最后添加：
server.1=weekend05:2888:3888
server.2=weekend06:2888:3888
server.3=weekend07:2888:3888
保存退出
然后创建一个tmp文件夹
mkdir /weekend/zookeeper-3.4.5/tmp
再创建一个空文件
touch /weekend/zookeeper-3.4.5/tmp/myid
最后向该文件写入ID
echo 1 > /weekend/zookeeper-3.4.5/tmp/myid
1.3将配置好的zookeeper拷贝到其他节点(首先分别在weekend06、weekend07根目录下创建一个weekend目录：mkdir /weekend)
scp -r /weekend/zookeeper-3.4.5/ weekend06:/weekend/
scp -r /weekend/zookeeper-3.4.5/ weekend07:/weekend/

           注意：修改weekend06、weekend07对应/weekend/zookeeper-3.4.5/tmp/myid内容
           weekend06：
                echo 2 > /weekend/zookeeper-3.4.5/tmp/myid
           weekend07：
                echo 3 > /weekend/zookeeper-3.4.5/tmp/myid

 2.安装配置hadoop集群（在weekend01上操作）
      2.1解压
           tar -zxvf hadoop-2.4.1.tar.gz -C /weekend/
      2.2配置HDFS（hadoop2.0所有的配置文件都在$HADOOP_HOME/etc/hadoop目录下）
           #将hadoop添加到环境变量中
           vim /etc/profile
           export JAVA_HOME=/usr/java/jdk1.7.0_55
           export HADOOP_HOME=/weekend/hadoop-2.4.1
           export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin
          
           #hadoop2.0的配置文件全部在$HADOOP_HOME/etc/hadoop下
           cd /home/hadoop/app/hadoop-2.4.1/etc/hadoop
          
           2.2.1修改hadoo-env.sh
                export JAVA_HOME=/home/hadoop/app/jdk1.7.0_55
               
           2.2.2修改core-site.xml
                <configuration>
                     <!-- 指定hdfs的nameservice为ns1 -->
                     <property>
                          <name>fs.h</name>
                          <value>hdfs://ns1</value>
                     </property>
                     <!-- 指定hadoop临时目录 -->
                     <property>
                          <name>hadoop.tmp.dir</name>
                          <value>/home/hadoop/app/hadoop-2.4.1/tmp</value>
                     </property>
                    
                     <!-- 指定zookeeper地址 -->
                     <property>
                          <name>ha.zookeeper.quorum</name>
                          <value>weekend05:2181,weekend06:2181,weekend07:2181</value>
                     </property>
                </configuration>
               
           2.2.3修改hdfs-site.xml
                <configuration>
                     <!--指定hdfs的nameservice为ns1，需要和core-site.xml中的保持一致 -->
                     <property>
                          <name>dfs.nameservices</name>
                          <value>ns1</value>
                     </property>
                     <!-- ns1下面有两个NameNode，分别是nn1，nn2 -->
                     <property>
                          <name>dfs.ha.namenodes.ns1</name>
                          <value>nn1,nn2</value>
                     </property>
                     <!-- nn1的RPC通信地址 -->
                     <property>
                          <name>dfs.namenode.rpc-address.ns1.nn1</name>
                          <value>weekend01:9000</value>
                     </property>
                     <!-- nn1的http通信地址 -->
                     <property>
                          <name>dfs.namenode.http-address.ns1.nn1</name>
                          <value>weekend01:50070</value>
                     </property>
                     <!-- nn2的RPC通信地址 -->
                     <property>
                          <name>dfs.namenode.rpc-address.ns1.nn2</name>
                          <value>weekend02:9000</value>
                     </property>
                     <!-- nn2的http通信地址 -->
                     <property>
                          <name>dfs.namenode.http-address.ns1.nn2</name>
                          <value>weekend02:50070</value>
                     </property>
                     <!-- 指定NameNode的元数据在JournalNode上的存放位置 -->
                     <property>
                          <name>dfs.namenode.shared.edits.dir</name>
                          <value>qjournal://weekend05:8485;weekend06:8485;weekend07:8485/ns1</value>
                     </property>
                     <!-- 指定JournalNode在本地磁盘存放数据的位置 -->
                     <property>
                          <name>dfs.journalnode.edits.dir</name>
                          <value>/home/hadoop/app/hadoop-2.4.1/journaldata</value>
                     </property>
                     <!-- 开启NameNode失败自动切换 -->
                     <property>
                          <name>dfs.ha.automatic-failover.enabled</name>
                          <value>true</value>
                     </property>
                     <!-- 配置失败自动切换实现方式 -->
                     <property>
                          <name>dfs.client.failover.proxy.provider.ns1</name>
                          <value>org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider</value>
                     </property>
                     <!-- 配置隔离机制方法，多个机制用换行分割，即每个机制暂用一行-->
                     <property>
                          <name>dfs.ha.fencing.methods</name>
                          <value>
                               sshfence
                               shell(/bin/true)
                          </value>
                     </property>
                     <!-- 使用sshfence隔离机制时需要ssh免登陆 -->
                     <property>
                          <name>dfs.ha.fencing.ssh.private-key-files</name>
                          <value>/home/hadoop/.ssh/id_rsa</value>
                     </property>
                     <!-- 配置sshfence隔离机制超时时间 -->
                     <property>
                          <name>dfs.ha.fencing.ssh.connect-timeout</name>
                          <value>30000</value>
                     </property>
                </configuration>
          
           2.2.4修改mapred-site.xml
                <configuration>
                     <!-- 指定mr框架为yarn方式 -->
                     <property>
                          <name>mapreduce.framework.name</name>
                          <value>yarn</value>
                     </property>
                </configuration>    
          
           2.2.5修改yarn-site.xml
                <configuration>
                          <!-- 开启RM高可用 -->
                          <property>
                             <name>yarn.resourcemanager.ha.enabled</name>
                             <value>true</value>
                          </property>
                          <!-- 指定RM的cluster id -->
                          <property>
                             <name>yarn.resourcemanager.cluster-id</name>
                             <value>yrc</value>
                          </property>
                          <!-- 指定RM的名字 -->
                          <property>
                             <name>yarn.resourcemanager.ha.rm-ids</name>
                             <value>rm1,rm2</value>
                          </property>
                          <!-- 分别指定RM的地址 -->
                          <property>
                             <name>yarn.resourcemanager.hostname.rm1</name>
                             <value>weekend03</value>
                          </property>
                          <property>
                             <name>yarn.resourcemanager.hostname.rm2</name>
                             <value>weekend04</value>
                          </property>
                          <!-- 指定zk集群地址 -->
                          <property>
                             <name>yarn.resourcemanager.zk-address</name>
                             <value>weekend05:2181,weekend06:2181,weekend07:2181</value>
                          </property>
                          <property>
                             <name>yarn.nodemanager.aux-services</name>
                             <value>mapreduce_shuffle</value>
                          </property>
                </configuration>
          
               
           2.2.6修改slaves(slaves是指定子节点的位置，因为要在weekend01上启动HDFS、在weekend03启动yarn，所以weekend01上的slaves文件指定的是datanode的位置，weekend03上的slaves文件指定的是nodemanager的位置)
                weekend05
                weekend06
                weekend07

           2.2.7配置免密码登陆
                #首先要配置weekend01到weekend02、weekend03、weekend04、weekend05、weekend06、weekend07的免密码登陆
                #在weekend01上生产一对钥匙
                ssh-keygen -t rsa
                #将公钥拷贝到其他节点，包括自己
                ssh-coyp-id weekend01
                ssh-coyp-id weekend02
                ssh-coyp-id weekend03
                ssh-coyp-id weekend04
                ssh-coyp-id weekend05
                ssh-coyp-id weekend06
                ssh-coyp-id weekend07
                #配置weekend03到weekend04、weekend05、weekend06、weekend07的免密码登陆
                #在weekend03上生产一对钥匙
                ssh-keygen -t rsa
                #将公钥拷贝到其他节点
                ssh-coyp-id weekend04
                ssh-coyp-id weekend05
                ssh-coyp-id weekend06
                ssh-coyp-id weekend07
                #注意：两个namenode之间要配置ssh免密码登陆，别忘了配置weekend02到weekend01的免登陆
                在weekend02上生产一对钥匙
                ssh-keygen -t rsa
                ssh-coyp-id -i weekend01                   
     
      2.4将配置好的hadoop拷贝到其他节点
           scp -r /weekend/ weekend02:/
           scp -r /weekend/ weekend03:/
           scp -r /weekend/hadoop-2.4.1/ hadoop@weekend04:/weekend/
           scp -r /weekend/hadoop-2.4.1/ hadoop@weekend05:/weekend/
           scp -r /weekend/hadoop-2.4.1/ hadoop@weekend06:/weekend/
           scp -r /weekend/hadoop-2.4.1/ hadoop@weekend07:/weekend/
      ###注意：严格按照下面的步骤
      2.5启动zookeeper集群（分别在weekend05、weekend06、weekend07上启动zk）
           cd /home/hadoop/app/zookeeper-3.4.5/bin/
           ./zkServer.sh start
           #查看状态：一个leader，两个follower
           ./zkServer.sh status
          
      2.6启动journalnode（分别在在weekend05、weekend06、weekend07上执行）
           cd /home/hadoop/app/hadoop-2.4.1
           sbin/hadoop-daemon.sh start journalnode
           #运行jps命令检验，weekend05、weekend06、weekend07上多了JournalNode进程
     
      2.7格式化HDFS
           #在weekend01上执行命令:
           hdfs namenode -format
           #格式化后会在根据core-site.xml中的hadoop.tmp.dir配置生成个文件，这里我配置的是/weekend/hadoop-2.4.1/tmp，然后将/weekend/hadoop-2.4.1/tmp拷贝到weekend02的/weekend/hadoop-2.4.1/下。
           scp -r tmp/ weekend02:/home/hadoop/app/hadoop-2.4.1/
           ##也可以这样，建议hdfs namenode -bootstrapStandby
     
      2.8格式化ZKFC(在weekend01上执行即可)
           hdfs zkfc -formatZK
     
      2.9启动HDFS(在weekend01上执行)
           sbin/start-dfs.sh

      2.10启动YARN(#####注意#####：是在weekend03上执行start-yarn.sh，把namenode和resourcemanager分开是因为性能问题，因为他们都要占用大量资源，所以把他们分开了，他们分开了就要分别在不同的机器上启动)
           sbin/start-yarn.sh

     
 到此，hadoop-2.4.1配置完毕，可以统计浏览器访问:
      http://192.168.1.201:50070
      NameNode 'weekend01:9000' (active)
      http://192.168.1.202:50070
      NameNode 'weekend02:9000' (standby)

 验证HDFS HA
      首先向hdfs上传一个文件
      hadoop fs -put /etc/profile /profile
      hadoop fs -ls /
      然后再kill掉active的NameNode
      kill -9 <pid of NN>
      通过浏览器访问：http://192.168.1.202:50070
      NameNode 'weekend02:9000' (active)
      这个时候weekend02上的NameNode变成了active
      在执行命令：
      hadoop fs -ls /
      -rw-r--r--   3 root supergroup       1926 2014-02-06 15:36 /profile
      刚才上传的文件依然存在！！！
      手动启动那个挂掉的NameNode
      sbin/hadoop-daemon.sh start namenode
      通过浏览器访问：http://192.168.1.201:50070
      NameNode 'weekend01:9000' (standby)

 验证YARN：
      运行一下hadoop提供的demo中的WordCount程序：
      hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.4.1.jar wordcount /profile /out

 OK，大功告成！！！

测试集群工作状态的一些指令 ：
bin/hdfs dfsadmin -report 查看hdfs的各节点状态信息

bin/hdfs haadmin -getServiceState nn1 获取一个namenode节点的HA状态

sbin/hadoop-daemon.sh start namenode 单独启动一个namenode进程

./hadoop-daemon.sh start zkfc 单独启动一个zkfc进程

如果只有3台主机，可以按照如下规划来部署安装
weekend01 zookeeper journalnode namenode zkfc resourcemanager datanode
weekend02 zookeeper journalnode namenode zkfc resourcemanager datanode
weekend03 zookeeper journalnode datanode

一个向往阿里的小小白
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【Hadoop】HA高可用搭建保姆级教程（大二学长的万字笔记）_hadoop的高可用搭建
2401_84166396的博客
05-03 881
注意要将 zoo_sample.cfg 文件改名为 zoo.cfg，这个文件在 zookeeper 目录的 conf 目录下。不需要启动Zookeeper的节点，不需要配置进来。ZKFailOverController是Hadoop中通过ZK实现FC（故障转移）功能的一个实用工具。
hadoop 集群配置（高可用）
Qinsurpass的博客
06-08 1321
hadoop集群高可用配置三台虚拟机先配置jdk和zookeeper配置hadoop 配置三台虚拟机 192.168.199.161 pass1 192.168.199.162 pass2 192.168.199.163 pass3 先配置jdk和zookeeper 见  jdk、zookeeper环境配置 配置hadoop 解压hadoop安装包 [root@pass1 install]# tar -zxvf ./hadoop-2.6.0-cdh5.14.2.tar.gz -C ../
Hadoop完全分布集群搭建及高可用搭建
L2385766210的博客
10-23 1184
配置文件路径在hadoop中etc文件夹。修改core-site.xml文件。修改mapred-site.xml。修改mapred-stie.xml。修改yarn-site.xml文件。6、格式化ZKFC，启动ZKFC。修改hadoop-env.sh。修改hdfs-site.xml。修改yarn-site.xml。修改core-site.xml。修改hdfs-site.xml。4、启动JournalNode。8、启动副节点namenode。5、格式化namenode。7、启动namenode。
七、Hadoop系统应用之搭建Hadoop高可用集群（超详细步骤指导操作，WIN10，VMware Workstation 15.5 PRO，CentOS-6.7）
weixin_42051846的博客
12-16 2328
Hadoop系统应用实验之搭建Hadoop高可用集群，熟悉Hadoop高可用集群的搭建过程，WIN10系统，虚拟机软件VMware Workstation 15.5 PRO，Linux版本CentOS-6.7，超详细步骤配图详解，对新手友好。
【Hadoop】HA高可用搭建保姆级教程（大二学长的万字笔记）
你不来，再美的天地，都狼藉 ~
05-29 8872
Hadoop HA高可用搭建保姆级教程，来自正在学习大数据导论的大二学长的万字笔记，干得不能再干的干货分享！
Hadoop之Ha高可用搭建教程
最新发布
weixin_74865657的博客
03-18 1654
随着大数据技术的不断发展，Hadoop作为开源的大数据处理框架，已经广泛应用于各种场景中。然而，在大型生产环境中，Hadoop集群的稳定性和可用性显得尤为重要。为了保障Hadoop集群的高可用性（HA），我们需要采用一系列的技术和策略。本文将重点介绍Hadoop集群的HA高可用方案。Hadoop集群的HA高可用主要指的是在集群中的关键组件出现故障时，能够自动切换到其他节点继续提供服务，从而确保整个集群的稳定运行。Hadoop集群的HA高可用方案是保障集群稳定性和可用性的重要手段。
HADOOP 高可用搭建
m0_60458199的博客
11-04 3019
首先先说一下大概的步骤，就用四台为例，简单适合新手操作。 流程是：创建虚拟机，配置好；搭建linux系统；安装jdk（因为后面好多都依赖jkd）；免密登录ssh；安装zookeeper；最后就是搭建高可用了。不熟练的小伙伴可以先试试单机模式。 这是我的四台机子加一个单机模式 。 1.创建虚拟机就不多说了，一直下一步下一步，重复四次创建4个。当然有疑问的可以私聊我，我帮你解决。创建好后就是修改配置 首先输入vi /etc/sysconfig/network-scripts/ifcfg-ens33，
hadoop集群搭建详细过程
cuicui_ruirui的博客
04-04 268
所需软件:VMwareiso镜像 (centOS6.5镜像文件：链接：https://pan.baidu.com/s/19uUX_M-jE6xI8kBwxhydSA 密码：xs54 )linux客户端操作软件 (Xshell5+Xftp)(https://pan.baidu.com/s/1NqtNSvcNR5TlkF6UQ4BPZg密码：h8f1 )jdk1.8安装rpm包(同一使用...
基于 ZooKeeper 搭建 Hadoop 高可用集群 的教程图解
09-29
Hadoop 高可用 (High Availability) 分为 HDFS 高可用和 YARN 高可用，两者的实现基本类似，但 HDFS NameNode 对数据存储及其一致性的要求比 YARN ResourceManger 高得多，所以它的实现也更加复杂，下面给大家详细...
hadoop高可用集群搭建手册.docx
04-17
Hadoop高可用集群搭建手册 本文档主要介绍了Hadoop 2.6高可用集群的搭建过程，包括集群规划、搭建准备、集群搭建和配置等步骤。下面是从中提取的知识点： 1. 集群规划 在规划Hadoop集群时，需要考虑到集群的拓扑...
Hadoop高可用集群搭建
07-24
Hadoop高可用集群搭建
基于Zookeeper搭建Hadoop高可用集群
06-15
基于 Zookeeper 搭建 Hadoop 高可用集群 基于 Zookeeper 搭建 Hadoop 高可用集群是指使用 Zookeeper 实现 Hadoop 集群的高可用性，确保 Hadoop 集群的可靠性和稳定性。高可用性是指系统在面临故障或错误时仍能继续...
Hadoop高可用集群搭建步骤
weixin_51104731的博客
07-27 1810
搭建hadoo高可用集群的详细步骤
hadoop集群HA高可用搭建
weixin_64378412的博客
06-18 1613
在整个项目中我觉得最难的应该是HA，当然这是对于第一次配置HA高可用的我来说，因为我根据不同的博客配置了几次，要么就是两个Standby 状态的NameNode，要么就是一个Active状态的NameNode，一个Standby 状态的NameNode。但是当你kill 掉Active节点的NameNode，你就会发现，Standby 状态的NameNode没有成功切换为Active。我在配置了几次后，通过查看日志文件，发现拒绝连接，经过仔细阅读。问题出现在无法进行 fence。
Hadoop高可靠集群搭建步骤（手把手教学）【超级详细】
小伍的博客
01-06 2794
Hadoop高可靠集群搭建步骤（手把手教学）【超级详细】
大数据技术之Hadoop学习(六)——高可用集群搭建
weixin_63507910的博客
01-10 1831
hadoop高可用集群的认识与搭建
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值