hadoop部署异常

异常:

java.io.IOException: File /home/pplive/data/hadoop/tmp/mapred/system/jobtracker.info could only be replicated to 0 nodes, instead of 1
        at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.getAdditionalBlock(FSNamesystem.java:1490)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.addBlock(NameNode.java:653)
        at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
        at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:39)
        at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:25)
        at java.lang.reflect.Method.invoke(Method.java:597)
        at org.apache.hadoop.ipc.RPC$Server.call(RPC.java:557)
        at org.apache.hadoop.ipc.Server$Handler$1.run(Server.java:1434)
        at org.apache.hadoop.ipc.Server$Handler$1.run(Server.java:1430)
        at java.security.AccessController.doPrivileged(Native Method)
        at javax.security.auth.Subject.doAs(Subject.java:396)
        at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1127)
        at org.apache.hadoop.ipc.Server$Handler.run(Server.java:1428)

 

fix:

格式化datanode:hadoop namenode –format

datanode:/etc/init.d/iptables stop

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
在使用Ambari来部署Hadoop集群时,以下是Hadoop组件启动的一般顺序: 1. ZooKeeper:ZooKeeper是一个分布式协调服务,在Hadoop集群中用于管理和协调其他组件。首先,启动ZooKeeper服务。 2. HDFS(Hadoop Distributed File System):HDFS是Hadoop的分布式文件系统。按照以下顺序启动HDFS组件: - NameNode:启动NameNode服务,它是HDFS的主节点,负责管理文件系统的命名空间和元数据。 - SecondaryNameNode(可选):如果使用SecondaryNameNode组件,启动SecondaryNameNode服务,它负责定期合并NameNode的编辑日志并创建检查点。 - DataNode:启动DataNode服务,DataNode是HDFS的数据节点,负责存储实际的文件数据。 3. YARN(Yet Another Resource Negotiator):YARN是Hadoop的资源管理器,用于管理集群资源和任务调度。按照以下顺序启动YARN组件: - ResourceManager:启动ResourceManager服务,它是YARN的主节点,负责整个集群的资源管理和作业调度。 - NodeManager:启动NodeManager服务,NodeManager运行在每个节点上,负责管理该节点上的资源和任务。 4. MapReduce历史服务器(可选):如果使用MapReduce历史服务器组件,可以启动它来查看旧的MapReduce作业历史信息。 5. Hive Metastore服务(可选):如果使用Hive,启动Hive Metastore服务,它是Hive的元数据存储。 6. Spark历史服务器(可选):如果使用Spark,可以启动Spark历史服务器来查看Spark应用程序的历史信息。 请注意,以上是一般情况下的启动顺序,并且可能会因特定的配置或需求而有所不同。在启动之前,请确保相关的配置文件已正确设置,并且网络连接正常。启动过程中,可以查看Ambari界面或相应的日志文件来检查是否有任何错误或异常情况。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值