Hadoop Shell基本操作

本文介绍了如何在Hadoop环境中进行Shell操作,包括启动和关闭Hadoop,创建、管理文件和目录,改变文件权限和所有者,提交job任务,以及安全模式的进入与退出。详细步骤涵盖从创建文件夹、移动文件到执行WordCount示例。
摘要由CSDN通过智能技术生成

系统环境

Linux Ubuntu 16.04
hadoop-2.6.0-cdh5.4

任务内容

1.学习开启、关闭Hadoop

2.学习在Hadoop中创建、修改、查看、删除文件夹及文件

3.学习改变文件的权限及文件的拥有者

4.学习使用shell命令提交job任务

5.Hadoop安全模式的进入与退出

任务步骤

1.打开终端模拟器,切换到/apps/hadoop/sbin目录下,启动Hadoop

cd /apps/hadoop/sbin
./start-all.sh

图例

在这里插入图片描述
除了直接执行start-all.sh外,还可以分步启动start-dfs.sh和start-yarn.sh。
2.执行jps,检查一下Hadoop相关进程是否启动

jps

3.在/目录下创建一个test1文件夹

hadoop fs -mkdir /test1 

4.在Hadoop中的test1文件夹中创建一个file.txt文件

hadoop fs -touchz /test1/file.txt 

5.查看根目录下所有文件

hadoop fs -ls /  

6.还可以使用ls -R的方式递归查看根下所有文件

hadoop fs -ls -R /  

</

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值