hadoop常用命令

这边列举一些hadoop常用的命令,大家可以看一下有没有自己需要的

1、查看指定目录下内容


hadoop dfs –ls [文件目录]


eg: hadoop dfs –ls /user/flume/MasterLog


2、打开某个已存在文件


hadoop dfs –cat [file_path]


eg:hadoop dfs -cat /user/flume/MasterLog/1.log


3、将本地文件存储至hadoop


hadoop fs –put [本地地址] [hadoop目录]


hadoop fs –put  /home/flume/test.txt   /user/flume/


(file.txt是文件名)


4、将本地文件夹存储至hadoop


hadoop fs –put [本地目录] [hadoop目录] 
hadoop fs –put  /home/flume/dir_name   /user/flume


(dir_name是文件夹名)


5、将hadoop上某个文件down至本地已有目录下


hadoop fs -get [文件目录] [本地目录]


hadoop fs –get /user/flume/test.txt  /home/flume


6、删除hadoop上指定文件


hadoop fs –rm [文件地址]


hadoop fs –rm /user/flume/test.txt


7、删除hadoop上指定文件夹(包含子目录等)


hadoop fs –rm [目录地址]


hadoop fs –rmr /user/flume


8、在hadoop指定目录内创建新目录


hadoop fs –mkdir /user/flume


9、在hadoop指定目录下新建一个空文件使用touchz命令:


hadoop fs -touchz /user/test.txt


10、将hadoop上某个文件重命名


使用mv命令:


hadoop fs –mv /user/test.txt  /user/test1.txt (将test.txt重命名为test1.txt)


11、将hadoop指定目录下所有内容保存为一个文件,同时down至本地


hadoop dfs –getmerge /user /home/flume


12、将正在运行的hadoop作业kill掉


hadoop job –kill [job-id


===========================
启动Hadoop
进入HADOOP_HOME目录。
执行sh bin/start-all.sh
关闭Hadoop
进入HADOOP_HOME目录。
执行sh bin/stop-all.sh
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值