hadoop 命令行相关操作

• 格式化：hadoop namenode -format
• 启动：start-all.sh
  • start-dfs.sh
• 关闭：stop-all.sh
  • stop-dfs.sh

1. 安全模式（safe mode）

hadoop 在启动时会首先进入安全模式（safe mode），系统在该模式下会自动检查文件的副本数，如果小于阈值，会启动后续的操作。

在安全模式下，不可以对 hadoop 文件系统进行增删改的动作。

• 查询是否进入安全模式

  hadoop dfsadmin -safemode get
  

• 进入安全模式

  hadoop dfsadmin -safemode enter
  

• 退出安全模式

  hadoop dfsadmin -safemode leave
  

2. hadoop 文件系统（file system，fs）

https://www.cnblogs.com/cl1234/p/3566923.html

• 查看，-ls，hadoop fs -ls /
  • hadoop fs -ls -R /：递归遍历
• 上传，-put，hadoop fs -put 文件 路径
• 创建文件夹，-mkdir，hadoop fs -mkdir -p /usr/ds
• 删除，-rm（删除文件或空白文件夹），-rmr：递归删除文件夹；
• 修改文件权限，-chmod，hadoop fs -chmod 777 文件

3. DataNode

hadoop dfsadmin -report

会报道一些关于hadoop运行的核心信息，比如DataNode的运行信息。如果 datanode 的运行数（Live）和预期（slaves 文件中的主机名的个数）不符，则启动失败。