Hadoop常用操作总结
1.各个web页面地址
服务 | 端口号 |
---|---|
HDFS页面 | 50070 |
YARN的管理界面 | 8088 |
ambari | 8080 |
HistoryServer的管理界面 | 19888 |
Zookeeper的服务端口号 | 2181 |
Mysql的服务端口号 | 3306 |
Kafka的服务端口号 | 9092 |
azkaban界面 | 8443 |
2. HDFS的shell命令
功能 | 命令 |
---|---|
查看指令 | hadoop fs / hdfs dfs |
查看hdfs所在端口 | hdfs getconf -confKey fs.default.name |
查看文件 | hadoop fs -R -ls / (-R)表示递归查看 |
创建多级目录 | hadoop fs -mkdir -p /parent/child (-p)表示多级递归创建 |
运行jar包 | hadoop jar xxxx.jar com.xxxxx |
复制本地文件到hdfs中 | hadoop fs -moveFromLocal ./a.txt /parent/child |
查看正在运行的job | hadoop job -list |
杀死job | hadoop job -kill jobId |
退出安全模式 | hadoop dfsadmin -safemode leave |