Hadoop脚本——Hadoop实战初级部分学习笔记

4、Hadoop脚本

1、bin目录

hadoop：hadoop shell

hadoop-config.sh  给hadoop的一些变量赋值 HADOOP_HOME、HADOOP_CONF等

 

hadoop-deamon.sh

 

call salves.sh

 

start-all.sh

start-dfs sh

start-balancer sh

start-jobhistoryserver sh

start-mapred.sh

 

其他的还是参考ppt吧，

 

 

hadoop namenode –format 格式化 类似于格式化磁盘

 

hadoop fsck

 

hadoop diskcp  “hdfs://localhost:9000/tmp/test” “hdfs://localhost:9000/tmp/test2”  (会启动mapreduce) 虚拟机比较慢。。 集群直接复制，hadoop版本必须一致。

 

 

hadoop classpath  查看依赖的jar包 

 

hadoop deamonlog  -getlevel localhost:50070 namenode 看日志级别

hadoop deamonlog  -setlevel localhost:50070 namenode info 设置日志级别