配置Hadpoop中遇到的问题及解决办法

配置中遇到的问题:

注意:每当修改配置文件后都要删除数据文件(rm -r hadoop/tmp/dfs/*),若不知道路径查看hdfs-site.xml配置文件,下面是我的配置文件的路径
vim /usr/local/hadoop/etc/hadoop/hdfs-site.xml
image.png
删除后再重新格式后再启动
1,若遇到
WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using builtin-java classes where applicable这样报错则
vi ~/.bashrc
添加:
export JAVA_LIBRARY_PATH=$HADOOP_HOME/lib/native
2,报错:
localhost: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password).
Starting datanodes则是ssh免密登录设置失败。
3,若jps命令无法执行则是java环境没有配置好,删除java后用上面安装的java的步骤重新安装并配置环境。
4,若启动hadoop后没有namenode,则可能
主机名称问题
编辑以下文件查看主机名称是否是 localhost,如果不是则修改。一般只改第一个就可以解决问题
vim /etc/hostname
HOSTS
vim /etc/hosts
如果有 localhost.localdomain(如下) 把它修改为 localhost
127.0.0.1 localhost localhost.localdomain
还有一种可能,就是把储存临时文件的文件夹删了,只需把临时文件删了,别删文件夹,重新初始化既可。储存临时文件的路径在配置文件core-site.xml中的
image.png
5,格式化时最后显示:Shutting down NameNode at *
image.png
然后启动hadoop后输入jps若节点都有则不用管。
image.png

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

虚无-缥缈

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值