HDFS Web页面: ip:50070
常见命令
命令 | 说明 |
---|---|
hadoop fs -mkdir /park | 在hdfs 的根目录下,创建 park目录 |
hadoop fs -ls / | 查看hdfs根目录下有哪些目录 |
hadoop fs -put /root/1.txt /park | 文件上传 |
hadoop fs -get /park/jdk /home | 把hdfs文件系统下park目录的文件下载到linux的home目录下 |
hadoop fs -rm /park/文件名 | 删除hdfs 的park目录的指定文件 |
hadoop fs -rmdir /park | 删除park目录,但是前提目录里没有文件 |
hadoop fs -rmr /park | 删除park目录,即使目录里有文件 |
hadoop fs -cat /park/a.txt | 查看park目录下的a.txt文件 |
hadoop fs -tail /park/a.txt | 查看park目录下a.txt文件末尾的数据 |
haddop jar xxx.jar | 执行jar包 |
hadoop fs -cat /park/result/part-r-00000 | 查看 /park/result/part-r-00000文件的内容 |
hadoop fs –mv /park02 /park01 | 将HDFS上的park02目录重名为park01命令 |
hadoop fs -mv /park02/1.txt /park01 | 将park02目录下的1.txt移动到/park01目录下 |
hadoop fs -touchz /park/2.txt | 创建一个空文件 |
hadoop fs -getmerge /park /root/tmp | 将park目录下的所有文件合并成一个文件,并且下载到目录/root/tmp下 |
hadoop dfsadmin -safemode leave | 离开hadoop安全模式 |
hadoop dfsadmin -safemode enter | 进入hadoop安全模式 |
hadoop dfsadmin -rollEdits | 前置edit滚动 |
hadoop dfsadmin -report | 报告存活的datanode节点信息 |
hadoop fsck /park | 汇报/park目录 健康状况 |
hadoop fsck /park/1.txt -files -blocks -locations -racks | 查看1.txt 这个文件block信息以及机架信息 |
hadoop fs -expunge | 手动清空hdfs回收站 |
hadoop fs -chmod 777 / | 修改目录的权限 |
其他命令
命令 | 说明 |
---|---|
hadoop fs -cp /park01/1.txt /park02 | 将HDFS上 /park01下的1.txt拷贝一份到 /park02目录下。目标路径可以有多个,用空格隔开,比如:hadoop fs -cp /park01/1.txt /park02 /park03…… |
hadoop fs -du /park/1.txt | 查看HDFS上某个文件的大小。也可以查看指定目录,如果是目录的话,则列出目录下所有的文件及其大小,比如:hadoop fs -du /park |
hadoop fs -copyFromLocal /home/1.txt /park01 | 将本地文件1.txt上传到/park01目录下,现在已经被put代替 |
hadoop fs -copyToLocal /park01/1.txt /home | 将HDFS上的1.txt 拷贝到本地文件系统 |
hadoop fs -lsr / | 递归查看指定目录下的所有内容 |
hadoop archive -archiveName txt.har -p /txt / | 打包,将txt目录下面的小文件都打包成一个大文件,文件的后缀名必须是.har |