Linux环境下Hadoop开发环境的安装

@[TOC]实验内容
#1)JAVA jdk8.0环境安装与配置;
##2)SSH环境安装与配置
###3)Hadoop伪分布式模式安装与配置

一、 实验过程(步骤、记录、数据、程序等)

参照实验指导书和大数据软件安装和编程实践指南网站,在Linux系统下完成JAVA环境、SSH以及Hadoop平台的安装和配置任务,并在下方描述和记录安装过程,提供JAVA、SSH及Hadoop安装配置完成后正常运行的界面截图证明。

1.我的用户名一开始就是hadoop,所以不必再ubuntu里面去创建hadoop用户。
![在这里插入图片描述](https://img-blog.csdnimg.cn/20200410220933792.png

2.更新apt
在这里插入图片描述

  1. 安装vim在这里插入图片描述

4.安装SSH
5.配置SSH无密码登陆在这里插入图片描述
再输入ssh ,下图得到了验证无密码登录成功:

在这里插入图片描述

6.安装java环境:
在这里插入图片描述在这里插入图片描述

在这里插入图片描述

7.安装hodoop2

安装包在下载里面:

在这里插入图片描述

在这里插入图片描述

8.Hodoop单机配置(非分布式):
在这里插入图片描述

在这里插入图片描述

删除./output
在这里插入图片描述

9.hodoopwei伪分布式布置:

修改配置文件 core-site.xml (通过 gedit 编辑会比较方便: gedit
./etc/hadoop/core-site.xml:

同样的,修改配置文件 hdfs-site.xml:

在这里插入图片描述
这里配置文件里的内容,可参考http://dblab.xmu.edu.cn/blog/install-hadoop/(比较简单)

配置完成后,执行 NameNode 的格式化:

成功的话,会看到 “successfully formatted” 和 “Exitting with status 0” 的提示,若为
“Exitting with status 1” 则是出错。

下图运行,可以以发现运行成功了:
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
注意打开是在Ubuntu里面的浏览器里面打开

实验中遇到的问题和解决办法,实验总结:
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

解决:参考了博客:

https://blog.csdn.net/fcb_campnou/article/details/44851691

依次执行以下命令行:
在这里插入图片描述

得到了解决。
在这里插入图片描述

安装SSH时又遇到了问题:

参考了网址:

https://www.360kuai.com/pc/923c5f98e3bb34546?cota=4&kuai_so=1&tj_url=so_rec&sign=360_a9931de8&refer_scene=so_1

在这里插入图片描述

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值