Hadoop安装配置、运行第一个WordCount示例程序

在Ubuntu系统中,本文详细介绍了如何安装配置Hadoop环境,包括Java1.6的安装、Hadoop用户的创建、SSH的安装与配置。接着,通过下载Hadoop2.x版本进行解压、配置环境变量,并成功运行WordCount示例程序,验证Hadoop安装。整个过程涉及文件的创建、拷贝以及免密码SSH登陆的设置。
摘要由CSDN通过智能技术生成

操作系统ubuntu。本篇目的是在单机模式下运行成功WordCount示例程序。


本篇小结安装步骤,遇到的问题和解决办法。

疑惑点及其思考。


Hadoop是为linux而开发的,所以开发hadoop程序,包括spark最好在linux环境下。目录如下:

一:Hadoop运行环境安装:

java1.6安装配置

Hadoop用户创建

SHH安装及配置

二:安装Hadoop 2.x

下载

安装

配置

三:WordCount示例程序运行测试

创建input

拷贝文件到input目录

执行示例程序

查看输入目录output


详细过程如下:

一:Hadoop运行环境安装:

java1.6安装配置:

具体过程分为:下载Oracle JDK, 新建安装目录,解压,配置环境变量,让环境变量生效,检验java安装结果。

下载:到官网下载linux版本的oracle JDK

新建目录:命令mkdir

解压文件:命令tar -zxvf解压文件到新建目录

配置环境变量:命令vim ~/.bashrc或者gedit ~/.bashrc修改配置文件。添加安装路径JAVA_HOME等。

让环境变量生效:命令source ~/.bashrc

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值