配置集群出现的问题最佳解决方案

<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://s250/</value>
    </property>
</configuration>


<configuration>
    <property>
        <name>dfs.replication</name>
        <value>3</value>
    </property>
</configuration>


<configuration>
    <property>
        <name>yarn.resourcemanager.hostname</name>
        <value>s250</value>
    </property>

    <property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
    </property>
</configuration>

----------------------------------------------------------

scp -r full centos@s251:/soft/hadoop/etc
scp -r full centos@s252:/soft/hadoop/etc
scp -r full centos@s253:/soft/hadoop/etc

----------------------------------------------------------

sudo rm -rf /tmp/*
ls /tmp
sudo rm -rf /soft/hadoop/logs/*
ls /soft/hadoop/logs

---------------------------------------------------------

hadoop namenode -format


---------------------------------------------------------

如果突然想起来,自己没有停止进程就开始删除数据。。
就不要启动,先查看一下进程:netstat -anop
找到里面被占用的端口:50070 50075 50090 50010 8020

找到占用的进程,强制结束:
kill -9 1868
    1682


----------------------------------------------------------
如果连接不全,查看信息
/etc/resolv.conf
/etc/hosts
/etc/hostname
/etc/sysconfig/network-scripts/ifcfg-ens33(如果发现有多个ifcfg开头的文件,全部干掉)


----------------------------------------------------------
一、出现问题:启动进程之后只有一个JPS进程:

1.代码没有格式化:解决方案:hadoop namenode -format

2.查看配置的4个xml【core-site.xml,hdfs-site.xml,mapred-site.xml,yarn-site.xml】文件是否有错误单词

3.主机名包含符号,解决方案:不要给主机名添加任何符号,主机名字命名最佳方式(字母+数字)


二、出现进程没有缺失,配置文件都正确,但是web页面死活打不开。
    
    物理机与虚拟机之间网络不通。(物理主机ping不通虚拟机或者虚拟机ping不通物理机)
    解决方案:
        1.查看windows网络适配器查看是否存在VM1,VM8两个适配器
        解决方案:从群里下载VMware清理工具,先卸载掉VMware,然后清理所有垃圾,再次安装OK
        
        2.什么都能ping的通,就是百度ping不通
        解决方案:
            1.查看/etc/resolv.conf是否配置了nameserver【如果配置了看2】
            2.在/etc/resolv.conf添加google公共DNS,
                nameserver 8.8.8.8
                nameserver 114.114.114.114

三、偷别人的镜像解决
        1.查看虚拟机VM8的IP段
        2.配置hosts和hostname
        3./etc/resolv.conf
        4./etc/sysconfig/network-scripts/ifcfg-ens33【如果有多个ifcfg开头的文件,全部干掉】

四、瞎搞(进程都有,但是web打不开)
        
        
 

转载于:https://my.oschina.net/u/4065881/blog/3029508

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值