yarn常用命令

本文详细介绍了YARN(Yet Another Resource Negotiator)的多种命令行工具,包括用于监控应用资源使用情况的yarntop,查看队列状态的yarnqueue-status,管理和控制应用程序的yarnapplication,以及获取节点和容器信息的命令。这些工具对于管理和优化Hadoop集群资源分配至关重要。
摘要由CSDN通过智能技术生成
  1. yarn top
    类似linux里的top命令,查看正在运行的程序资源使用情况

  2. yarn queue -status root.users.xxxx
    查看指定queue使用情况

  3. yarn application

    -list -appStates 【ALL,NEW,NEW_SAVING,SUBMITTED,ACCEPTED,RUNNING,FINISHED,FAILED,KILLED】

    -list -appTypes [SUBMITTED, ACCEPTED, RUNNING]
    查看app状态

    -movetoqueue application_1528080031923_0067 -queue root.users.xxx
    移动app到对应的队列

    -kill application_1528080031923_0067
    kill掉app

    -status application_1528080031923_0067
    查看app状态

  4. yarn applicationattempt -list application_1528080031923_0064
    查看app尝试信息

  5. yarn classpath --glob
    打印类路径

  6. yarn container
    -list appattempt_1528080031923_0068_000001
    打印正在执行任务的容器信息

    -status container_1528080031923_0068_01_000002
    打印当前容器信息

  7. yarn jar [mainClass] args…
    提交任务到yarn

  8. yarn logs -applicationId application_1528080031923_0064
    查看app运行日志

  9. yarn node -all -list
    查看所有节点信息

  10. yarn daemonlog -getlevel n0:8088 rg.apache.hadoop.yarn.server.resourcemanager.rmapp.RMAppImpl
    查看守护进程日志级别

  11. yarn resourcemanager [-format-state-store]
    RMStateStore的格式化. 如果过去的应用程序不再需要,则清理RMStateStore

  12. Usage: yarn rmadmin
    -refreshQueues
    重载队列的ACL,状态和调度器特定的属性,ResourceManager将重载mapred-queues配置文件

    -refreshNodes
    动态刷新dfs.hosts和dfs.hosts.exclude配置,无需重启NameNode。
    dfs.hosts:列出了允许连入NameNode的datanode清单(IP或者机器名)
    dfs.hosts.exclude:列出了禁止连入NameNode的datanode清单(IP或者机器名)
    重新读取hosts和exclude文件,更新允许连到Namenode的或那些需要退出或入编的Datanode的集合。

    -refreshUserToGroupsMappings
    刷新用户到组的映射。

    -refreshSuperUserGroupsConfiguration
    刷新用户组的配置

    -refreshAdminAcls
    刷新ResourceManager的ACL管理

    -refreshServiceAclResourceManager
    重载服务级别的授权文件。

    -getGroups [username]
    获取指定用户所属的组。

    -transitionToActive [–forceactive] [–forcemanual]
    尝试将目标服务转为 Active 状态。如果使用了–forceactive选项,不需要核对非Active节点。如果采用了自动故障转移,这个命令不能使用。虽然你可以重写–forcemanual选项,你需要谨慎。

    -transitionToStandby [–forcemanual]
    将服务转为 Standby 状态. 如果采用了自动故障转移,这个命令不能使用。虽然你可以重写–forcemanual选项,你需要谨慎。

    -failover [–forceactive]
    启动从serviceId1 到 serviceId2的故障转移。如果使用了-forceactive选项,即使服务没有准备,也会尝试故障转移到目标服务。如果采用了自动故障转移,这个命令不能使用。

    -getServiceState
    返回服务的状态。(注:ResourceManager不是HA的时候,时不能运行该命令的)

    -checkHealth
    请求服务器执行健康检查,如果检查失败,RMAdmin将用一个非零标示退出。(注:ResourceManager不是HA的时候,时不能运行该命令的)

    -help [cmd]
    显示指定命令的帮助,如果没有指定,则显示命令的帮助。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值