hadoop dfs 常用命令行

原创 2013年12月05日 16:06:30

* 文件操作
 * 查看目录文件
 * $ hadoop dfs -ls /user/cl
 *
 * 创建文件目录
 * $ hadoop dfs -mkdir /user/cl/temp
 *
 * 删除文件
 * $ hadoop dfs -rm /user/cl/temp/a.txt
 *
 * 删除目录与目录下所有文件
 * $ hadoop dfs -rmr /user/cl/temp
 *
 * 上传文件
 * 上传一个本机/home/cl/local.txt到hdfs中/user/cl/temp目录下
 * $ hadoop dfs -put /home/cl/local.txt /user/cl/temp
 *
 * 下载文件
 * 下载hdfs中/user/cl/temp目录下的hdfs.txt文件到本机/home/cl/中
 * $ hadoop dfs -get /user/cl/temp/hdfs.txt /home/cl
 *
 * 查看文件
 * $ hadoop dfs –cat /home/cl/hdfs.txt
 *
 * Job操作

 * 提交MapReduce Job, Hadoop所有的MapReduce Job都是一个jar包

 * $ hadoop jar <local-jar-file> <java-class> <hdfs-input-file> <hdfs-output-dir>

 * $ hadoop jar sandbox-mapred-0.0.20.jar sandbox.mapred.WordCountJob /user/cl/input.dat /user/cl/outputdir
 *
 * 杀死某个正在运行的Job
 * 假设Job_Id为:job_201207121738_0001
 * $ hadoop job -kill job_201207121738_0001

相关文章推荐

Hadoop学习笔记八之 combine 以及常用命令行 和全局变量

combine总结: combine功能和reduce一样的,都是组合重复数据 起到聚合作用 区别: combine属于map端函数,在本地对map产生数据进行分组聚合将得到结果通过网络传输给redu...

Windows下的CMD常用命令行操作

  • 2017年06月28日 22:04
  • 2KB
  • 下载

Mysql常用命令行大全

第一招、mysql服务的启动和停止 net stop mysql net start mysql 第二招、登陆mysql 语法如下: mysql -u用户名 -p用户密码 ...
  • DDPJS
  • DDPJS
  • 2015年05月11日 14:01
  • 194

Linux常用命令行

  • 2016年12月21日 10:44
  • 647KB
  • 下载

常用命令行

  • 2012年08月10日 10:41
  • 4KB
  • 下载

Android 常用命令行和 源码编译

1.取出 ANR log,分析问题 C:\Users\Administrator>adb shell root@android:/ # cd data/ar cd data/ar /system/bi...

实用Windows常用命令行大全.doc

  • 2008年11月21日 13:22
  • 75KB
  • 下载

实用Windows常用命令行大全

  • 2013年11月13日 15:20
  • 22KB
  • 下载
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:hadoop dfs 常用命令行
举报原因:
原因补充:

(最多只允许输入30个字)