Hadoop 常见指令

最新推荐文章于 2024-03-17 11:26:01 发布

该昵称已经被占用

最新推荐文章于 2024-03-17 11:26:01 发布

阅读量3.1k

点赞数 1

分类专栏： Hadoop学习专辑

本文链接：https://blog.csdn.net/u011414200/article/details/50465433

版权

本文介绍了Hadoop的基础管理脚本，包括HDFS管理命令fs、作业管理命令job、作业提交命令jar，以及如何停止正在运行的Hadoop程序。用户可以通过配置文件目录和特定命令进行操作，对于不同Hadoop版本，停止运行程序的方法略有差异。

摘要由CSDN通过智能技术生成

一概述
二 HDFS 管理命令 fs
三作业管理命令 job
四作业提交命令 jar
五如何停止正在运行的 Hadoop 程序
六附录

一. 概述

bin 目录下的 Hadoop 脚本是最基础的集群管理脚本，用户可以通过该脚本完成各种功能，如 HDFS 文件管理、MapReduce 作业管理等。该脚本的使用方式：

hadoop [--config confdir] COMMAND

–config 是用于设置 Hadoop 配置文件目录，默认目录为 ${HADOOP_HOME}/etc/hadoop/
COMMAND 是具体的某个命令，常用的如下几个命令
- HDFS 管理命令 fs
- 作业管理命令 job
- 作业提交命令 jar

我们可以键入 hadoop ，以查看更多的命令：

Usage: hadoop [--config confdir] COMMAND
       where COMMAND is one of:
  fs                   run a generic filesystem user client
  version              print the version
  jar <jar>            run a jar file
  checknative [-a|-h]  check native hadoop and compression libraries availability
  distcp <srcurl> <desturl> copy file or directories recursively
  archive -archiveName NAME -p <parent path> <src>* <dest> create a hadoop archive
  classpath            prints the class path needed to get the
  credential           interact with credential providers
                       Hadoop jar and the required libraries
  daemonlog            get/set the