ubuntu18用虚拟机配置伪分布式Spark

参考:https://blog.csdn.net/Flamewaker/article/details/88085451
因为在实验室的系统装的是ubuntu,所以在ubuntu上下载vmware workstation进行虚拟机配置,参考的博客写的非常好,这里就写一下中间遇到的坑。

1.ssh配置时将密钥发给其他节点时permission denied(publickey,password)
这是由于ssh配置文件中拒绝root用密码登录
解决方法:
#sudo vim /etc/ssh/sshd_config

找到并用#注释掉这行:PermitRootLogin prohibit-password

新建一行 添加:PermitRootLogin yes

加入PasswordAuthentication yes

重启服务

#sudo service ssh restart

解读一下这两句话吧!

PermitRootLogin yes

允许root登录,设为yes。

PermitRootLogin prohibit-password

允许root登录,但是禁止root用密码登录

很明显这行是需要被注释掉的!!

2.关于没有datanode的问题,除了文中所述,可以考虑把hadoop文件夹中的hdfs/data/current/VERSION中的clusterID拷贝到slaver节点,另外在查看jps的时候进入root

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值