hdfs和yarn的常用命令

hdfs的常用命令

命令	功能说明
hdfs dfs -mkdir -p hdfs地址	创建目录
hdfs dfs -ls /	显示目录
hdfs dfs -copyToLocal hdfs地址 本地地址	从HDFS拷贝到本地
hdfs dfs -copyFromLocal 本地地址 hdfs地址	从本地上传到hdsf
hdfs dfs -get hdfs地址	文件下载
hdfs dfs -rm hdfs地址	删除集群的文件
hdfs dfs -rm -r -skipTrash hdfs地址	删除文件夹（不加-skipTrash，删除的目录会放入/user/hdfs/.Trash中）
hdfs dfs -expunge	清空hdfs的回收站
hdfs dfs  -moveFromLocal 本地地址 hdfs地址	从本地剪切粘贴到HDFS
hdfs dfs -appendToFile 本地文件 hdfs文件	追加一个文件到已经存在的文件末尾
hdfs dfs -cat hdfs文件	显示文件内容
hdfs dfs -cp hdfs文件 hdfs路径	从HDFS的一个路径拷贝到HDFS的另一个路径
hdfs dfs -mv hdfs文件 hdfs路径	在HDFS目录中移动文件
hdfs dfs  -getmerge hdfs路径 本地文件	合并下载多个文件
hdfs dfs -tail hdfs文件	显示一个文件的末尾
hdfs dfs  -h hdfs文件	统计文件夹下的文件大小信息
hdfs dfs -s -h hdfs文件	统计文件夹的大小信息
hdfs dfs -setrep 3 hdfs文件	设置HDFS中文件的副本数量

yarn的常用命令

命令	功能说明
yarn application -list	查看正在运行的yarn任务列表
yarn application -kill appID	kill掉指定id的yarn任务
yarn logs -applicationId appID	查看任务日志信息