hadoop测试

1.配置免密码登录
  (1)hdfs:     master01->master02,master04,master05,master06上的免登录
     生成秘钥
     master01: ssh-keygen -t rsa(4个回车)
               将公钥发到免登陆机器   测试登录      
               ssh-copy-id master01   ssh master01
               ssh-copy-id master02   ssh master02
               ssh-copy-id master04   ssh master04
               ssh-copy-id master05   ssh master05
               ssh-copy-id master06   ssh master06
     在master01停止HDFS: ./stop-dfs.sh
  (2)ResourceManager:   master03->master04,master05,master06上的免登录
     生成秘钥
     master03: ssh-keygen -t rsa(4个回车)
               将公钥发到免登陆机器   测试登录 
               ssh-copy-id master03   ssh master03     
               ssh-copy-id master04   ssh master04
               ssh-copy-id master05   ssh master05
               ssh-copy-id master06   ssh master06s
     在master01停止YARN: ./stop-yarn.sh 
2.测试是否成功 
   (1)启动HDFS 首先启动ZK 
                    cd /master/zookeeper-3.4.5/bin
                     ./zkServer.sh start
                     ./zkServer.sh status
                     ./zkCli.sh  
               再启动 ./start-dfs.sh
   (2)启动YARN cd /master/hadoop-2.2.0/sbin  ./start-yarn.sh
   (3)上传数据  在03上 hadoop fs -put /root/install.log /log
      杀死01(在Hadoop-2.2.0)    kill -9  7151(NameNode前面的数字)
      在访问02(active)        有刚才上传的数据
      在启动01 hadoop-daemon.sh start namenode
      在访问01(standby)
      杀死02(在Hadoop-2.2.0) kill -9  6681(NameNode前面的数字)
      刷新01(active)
      在启动02(standby) hadoop-daemon.sh start namenode
3.点击file无法显示
  在Windows下配置 
  C盘Windows System32 drivers etc host文件中
  最后加 192.168.196.3 master01
         192.168.196.4 master02
         192.168.196.5 master03
         192.168.196.6 master04
         192.168.196.7 master05
         192.168.196.8 master06
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值