Hadoop运行模式 之 本地运行模式

本文详细介绍了Hadoop的本地运行模式,包括官方Grep案例和WordCount案例。在Grep案例中,涉及创建input文件夹、复制配置文件及执行mapreduce程序;在WordCount案例中,涉及创建wcinput文件夹、编辑输入文件并运行程序。所有操作都在Hadoop 2.7.2版本环境下进行。
摘要由CSDN通过智能技术生成

Hadoop的运行模式包括:本地模式、伪分布式模式以及完全分布式模式

Hadoop官网地址:https://hadoop.apache.org/

 

本次使用的Hadoop的版本是2.7.2

官网文档:https://hadoop.apache.org/docs/r2.7.2/hadoop-project-dist/hadoop-common/SingleCluster.html

目录

一、官方Grep案例

1、在文件夹hadoop-2.7.2下面创建一个input文件夹

2、将Hadoop的xml配置文件复制到input

3、执行share目录下的mapreduce程序

4、查看输出结果

二、官方WordCount案例

1、在hadoop-2.7.2文件夹下创建一个wcinput文件夹

2、在wcinput文件夹下创建一个wc.input文件

3、编辑wc.input文件,输入如下内容

4、回到hadoop目录:/opt/module/hadoop-2.7.2

5、执行程序

6、查看结果

三、使用软件


 

一、官方Grep案例

1、在文件夹hadoop-2.7.2下面创建一个input文件夹

mkdir input

2、将Hadoop的xml配置文件复制到input

cp etc/hadoop/*.xml input

3、执行share目录下的mapreduce程序

直接使用hadoop命令需要配置环境变量,否则应该写 “bin/hadoop”

(善于利用Tab键)

hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.2.jar grep input/ output 'dfs[a-z.]+'

 

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值