hdfs常用shell命令

1. sh hadoop fs -put /soft/offlineprocess/custom.xml /user/oozie/

将/soft/offlineprocess/下的custom.xml文件，拷贝到hdfs的/user/oozie/目录下。

2. sh hadoop -rmr /user/oozie/lib/

删除hdfs目录/user/oozie/lib/下的所有内容

3.sh hadoop fs -rm /user/oozie/offlineprocess.jar

删除hdfs目录/user/oozie/目录下的offlineprocess.jar

4.hdfs dfs -ls /user/oozie

查找hdfs目录 /user/oozie下的所有文件

5. 查看日志： ./yarn logs -applicationId application_1499688215525_0004

6. hdfs dfs -ls /tmp/logs/root/logs/application_1512187276224_0212/
hdfs dfs -cat /tmp/logs/root/logs/application_1512187276224_0212/n5_45362

7. centOS中增加快捷键，编辑.bash_profile即可

alias cdh="cd /soft/offlineprocess/" 输入cdh，即可进入目录/soft/offlineprocess/

alias tailinfo="tail -100f /data/logs/offlineprocess/info.log" 输入tailinfo，即可查看/data/logs/offlineprocess/目录下的info.log日志

alias reputjar="hdfs dfs -rm /user/oozie/offlineprocess.jar;hdfs dfs -put /soft/offlineprocess/offlineprocess.jar /user/oozie/offlineprocess.jar" 输入reputjar，即可先删除hdfs中/user/oozie/目录下的offlineprocess.jar，然后重新上传/soft/offlineprocess/目录下的offlineprocess.jar 到目录/user/oozie/

alias lls="hdfs dfs -ls $1" 输入lls /user/oozie/lib，即可查看/user/oozie/lib下的所有文件

alias llsjar="hdfs dfs -ls /user/oozie" 输入llsjar，即可查看/user/oozie下的所有文件

alias killjob="/soft/hadoop/bin/yarn  application  -kill  $1" 中止指定任务