hadoop dfs 常用命令行

原创 2013年12月05日 16:06:30

* 文件操作
 * 查看目录文件
 * $ hadoop dfs -ls /user/cl
 *
 * 创建文件目录
 * $ hadoop dfs -mkdir /user/cl/temp
 *
 * 删除文件
 * $ hadoop dfs -rm /user/cl/temp/a.txt
 *
 * 删除目录与目录下所有文件
 * $ hadoop dfs -rmr /user/cl/temp
 *
 * 上传文件
 * 上传一个本机/home/cl/local.txt到hdfs中/user/cl/temp目录下
 * $ hadoop dfs -put /home/cl/local.txt /user/cl/temp
 *
 * 下载文件
 * 下载hdfs中/user/cl/temp目录下的hdfs.txt文件到本机/home/cl/中
 * $ hadoop dfs -get /user/cl/temp/hdfs.txt /home/cl
 *
 * 查看文件
 * $ hadoop dfs –cat /home/cl/hdfs.txt
 *
 * Job操作

 * 提交MapReduce Job, Hadoop所有的MapReduce Job都是一个jar包

 * $ hadoop jar <local-jar-file> <java-class> <hdfs-input-file> <hdfs-output-dir>

 * $ hadoop jar sandbox-mapred-0.0.20.jar sandbox.mapred.WordCountJob /user/cl/input.dat /user/cl/outputdir
 *
 * 杀死某个正在运行的Job
 * 假设Job_Id为:job_201207121738_0001
 * $ hadoop job -kill job_201207121738_0001

Hadoop dfs 常用命令行

* 文件操作   * 查看目录文件  * $ hadoop dfs -ls /user/cl  *   * 创建文件目录  * $ hadoop dfs -mkdir /user/cl/t...
  • TechChan
  • TechChan
  • 2015年12月29日 15:26
  • 10113

hadoop fs 与 hadoop dfs 的区别

The Difference Between 'Hadoop DFS' and 'Hadoop FS' While exploring HDFS, I came across these two s...
  • End0o0
  • End0o0
  • 2013年07月22日 14:03
  • 10980

hadoop fs {args}、hadoop dfs {args}、hdfs dfs {args}三者的区别

这是摘自stackoverflow的话: Following are the three commands which appears same but have minute differ...
  • heming621
  • heming621
  • 2014年12月21日 15:11
  • 536

Hadoop fs 和Hadoop dfs 的区别

(1)fs是文件系统, dfs是分布式文件系统 (2)fs > dfs (3)分布式环境情况下,fs与dfs无区别                        (4)本地环境中,fs就是本地文...
  • SunWuKong_Hadoop
  • SunWuKong_Hadoop
  • 2016年12月15日 10:35
  • 3433

Hadoop:hadoop fs、hadoop dfs与hdfs dfs命令的区别

http://blog.csdn.net/pipisorry/article/details/51340838 'Hadoop DFS'和'Hadoop FS'的区别 While expl...
  • pipisorry
  • pipisorry
  • 2016年05月07日 23:58
  • 18698

hadoop hdfs dfs 命令讲解

hdfs dfs命令 appendToFile Usage: hdfs dfs -appendToFile  ...  追加一个或者多个文件到hdfs制定文件中.也可以从命令行读取输入. · ...
  • u010220089
  • u010220089
  • 2015年05月23日 21:20
  • 20914

hadoop hdfs dfs基本操作

hadoop hdfs dfs基本操作 本文主要参考: http://hadoop.apache.org/docs/r2.6.5/hadoop-project-dist/hadoop-common...
  • wild46cat
  • wild46cat
  • 2017年04月09日 20:39
  • 2079

何时使用hadoop fs、hadoop dfs与hdfs dfs命令

Following are the three commands which appears same but have minute differences hadoop fs {args...
  • jediael_lu
  • jediael_lu
  • 2014年07月10日 09:29
  • 25767

hadoop dfs -ls 不起作用的问题

在hdfs上创建文件,查看文件时,发现使用如下明明并不生效hadoop fs -mkdir /data创建文件失败 查看文件`hadoop fs -ls /`data则提示ls: Cannot ac...
  • xiongjiezk
  • xiongjiezk
  • 2016年12月27日 19:18
  • 1156

hadoop dfs下文件的操作

上传,下载文件 Configuration conf=new Configuration(); FileSystem hdfs=FileSystem.get(conf); ...
  • nywsp
  • nywsp
  • 2014年01月06日 12:45
  • 1541
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:hadoop dfs 常用命令行
举报原因:
原因补充:

(最多只允许输入30个字)