Hadoop安装 & Hadoop运行模式

先前需要准备工作,新建俩个文件夹用于存放软件包和安装软件
使用Linux命令创建

mkdir /tools  用于存放软件包
mkdir /training  用于安装软件

1、 安装jdk

当是不是刚装的虚拟机的时候,在虚拟机下面可能已经安装过了jdk,可以使用 java -version命令查看虚拟机中是否含有jdk
可在jdk官网上下载安装包,甲骨文官网下载链接地址在这个网站下面下载一个linux操作系统的jdk文件,如下图

在这里插入图片描述
上传jdk的.gz文件到tools文件夹下,使用 tar -zvxf jdk-8u171-linux-x64.tar.gz -C /training/命令对其进行解压缩及安装,根据自己jdk的版本有所调整
上传解压缩后就是配置jdk的环境变量,先使用 vi ~/.bash_profile 打开环境变量文件解析。
在.bash_profile文件中添加如下信息:

export JAVA_HOME=/training/jdk1.8.0_171
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=.:$CLASSPATH:$JAVA_HOME/lib:$JRE_HOME/lib
export PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin;

esc :wq保存退出
再通过使用source ~/.bash_profile命令让环境变量生效
最后验证jdk是否安装成功使用命令java -version


2、安装Hadoop

下载hadoop:https://hadoop.apache.org/releases.html
与安装jdk同理先上传hadoop的.gz到tools目录下,
然后执行下面的命令进行解压安装 tar -zvxf hadoop-2.7.3.tar.gz -C /training/
配置环境变量:vi ~/.bash_profile 打开文件脚本
添加如下信息:

export HADOOP_HOME=/training/hadoop-2.7.3
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

esc :wq保存退出
再通过使用source ~/.bash_profile命令让环境变量生效
验证是否生效:执行:hdfs 或者hadopo 有相关信息出现即可

3、Hadoop运行模式

3.1、本地模式

本地模式只是用于单击测试,通过以下例子进行模拟

mkdir wcinput
cd wcinput
vi word.txt
# 键入以下内容
hadoop yarn
hadoop mapreduce
hello world
hello china
# 执行命令
hadoop  jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.3.4.jar wordcount wcinput/ ./wcoutput 

3.2、伪分布式模式

伪分布式模式也是单机运行,但是具备Hadoop集群的所有功能,一台服务器模拟一个分布式的环境。

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Modify_QmQ

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值