Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)

Ubuntu18.04 下 hadoop的安装与配置(伪分布式环境)

参考链接:https://www.cnblogs.com/87hbteo/p/7606012.html
一、准备
1.1创建hadoop用户
在这里插入图片描述1.2 安装SSH,设置SSH无密码登陆
在这里插入图片描述

输入完 $ ssh-keygen -t rsa 语句以后,需要连续敲击三次回车,如下图:
在这里插入图片描述其中,第一次回车是让KEY存于默认位置,以方便后续的命令输入。第二次和第三次是确定passphrase,相关性不大。两次回车输入完毕以后,如果出现类似于下图所示的输出,即成功:
在这里插入图片描述
之后再输入:
在这里插入图片描述在这里插入图片描述
2.安装jdk 1.8
首先在oracle官网下载jdk1.7 http://www.oracle.com/technetwork/java/javase/downloads/index.html 接下来进行安装与环境变量配置,根据个人电脑系统选择对应版本,我选的是jdk-8u221-linux-x64.tar.gz

在这里插入图片描述注:其中如果权限不够,无法在相关目录下创建jvm文件夹,那么可以使用 $ sudo -i 语句进入root账户来创建文件夹。
在这里插入图片描述
另外推荐使用vim来编辑环境变量,即最后一句使用指令
在这里插入图片描述如果没有vim,可以使用:
在这里插入图片描述来进行下载。
在这里插入图片描述在.bashrc文件添加如下指令:
在这里插入图片描述
在文件修改完毕以后,输入代码:
在这里插入图片描述如果出现如下图所示的内容,即为安装成功
在这里插入图片描述如果打开 http://localhost:50070失败,需要./sbin/stop-all.sh 关闭所有服务,然后编辑hdfs-site.xml(路径 /usr/local/hadoop/etc/hadoop)

最后发现可能是namenode初始化默认端口失效,于是决定手动修改配置文件设置默认端口
1.hdfs-site.xml 添加如下:
在这里插入图片描述

然后重新格式化namenode(./bin/hdfs namenode -format)
启动hadoop(./sbin/start-all.sh)。最终访问正常

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值