如何杀掉当前正在执行的hadoop任务

最新推荐文章于 2022-05-01 20:53:15 发布
最新推荐文章于 2022-05-01 20:53:15 发布
阅读量2.4k 收藏 3
点赞数 1
分类专栏： hadoop

列出当前hadoop正在执行的jobs:

[hadoop@192.168.10.11 hadoop-0.20.2-cdh3u3]$ hadoop job -list
10 jobs currently running
JobId   State   StartTime       UserName        Priority        SchedulingInfo
job_201212111628_11166  1       1375083632268   dbs     NORMAL  NA
job_201212111628_11219  1       1375280297644   dbs     NORMAL  NA
job_201212111628_11512  1       1375846914268   dbs     NORMAL  NA
job_201212111628_11538  1       1375885079046   dbs     NORMAL  NA
job_201212111628_11727  1       1376489879837   dbs     NORMAL  NA
job_201212111628_11930  1       1377094858657   dbs     NORMAL  NA
job_201212111628_12094  1       1377534049419   dbs     NORMAL  NA
job_201212111628_12097  1       1377569500240   dbs     NORMAL  NA
job_201212111628_12099  1       1377569535886   dbs     NORMAL  NA
job_201212111628_12100  1       1377569573432   dbs     NORMAL  NA

 

杀掉job: job_201212111628_11166

[hadoop@192.168.10.11 bin]$ ./hadoop job -kill job_201212111628_11166
Killed job job_201212111628_11166
[hadoop@192.168.10.11 bin]$ hadoop job -list
9 jobs currently running
JobId   State   StartTime       UserName        Priority        SchedulingInfo
job_201212111628_11219  1       1375280297644   dbs     NORMAL  NA
job_201212111628_11512  1       1375846914268   dbs     NORMAL  NA
job_201212111628_11538  1       1375885079046   dbs     NORMAL  NA
job_201212111628_11727  1       1376489879837   dbs     NORMAL  NA
job_201212111628_11930  1       1377094858657   dbs     NORMAL  NA
job_201212111628_12094  1       1377534049419   dbs     NORMAL  NA
job_201212111628_12097  1       1377569500240   dbs     NORMAL  NA
job_201212111628_12099  1       1377569535886   dbs     NORMAL  NA
job_201212111628_12100  1       1377569573432   dbs     NORMAL  NA

a280966503
关注
  • 1
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
hadoop集群停止脚本
认知 行动 坚持
06-28 1215
解决停止hadoop集群时，效率低问题 当搭建好了hadoop集群时，启动hadoop集群后，需要停止集群工作，需要先停止yarn，需要停止hdfs，需要停止zookeeper，很麻烦呀，效率太低了，有木有！！！！！！！！！！
Hadoop集群的启动与停止
qq_69722036的博客
10-15 3260
r=4 读的权限 w=2 写的权限 x=1 执行的权限。例如：192.168.191.131:9870 # ip+端口。7.进入hadoop的web网站进行访问，用自己的虚拟机IP地址。2.编辑hadoop.sh集群控制文件。二.编辑hadoop启动与停止的脚本。一.hadoop集群的启动与停止。（二）启动和停止hadoop集群。（一）启动hadoop集群。（二）停止hadoop集群。1.启动hadoop集群。4.停止hadoop集群。4.启动hadoop。
HDFS详解02
Binbinhb的博客
03-05 370
一、pid 1、pid 默认放在/tmp目录下，pid内容为jps的进程号。 2、删除进程，一般不会通过ps -ef|grep hadoop来删除，因为进程号不只是PID，还会出现别的进程号，可能会误杀别的进程 （1）查看停止hdfs的脚本内容 执行的是hadoop-daemons.sh脚本停止 （2）查看hadoop-daemons.sh脚本 执行的是hadoop-dae...
Hadoop启动停止的三种方式
yjc_1111的专栏
12-06 4000
（1）分别启动HDFS和MapReduce，命令如下： 启动： start-dfs.sh start-mapred.sh 停止： stop-mapred.sh stop-dfs.sh （2）全部启动或停止 启动： start-all.sh 启动顺序： NameNode->DataNode->Seco
Hadoop作业提交与停止命令
lqf的专栏
03-06 1万+
1. 作业提交命令 jarhadoop jar <jar> [mainClass] args.. 表示 jar 包名 mainClass 表示 main class 名称，可以不必输入而由 jar 命名自动搜索 args 是 main class 输入参数 bin/hadoop jar hadoop-examples-1.0.0.jar wordcount /text/input /test
vagrant-hadoop-hive-spark：Vagrant项目启动运行当前版本的Hadoop，Hive和Spark的单节点VM
02-06
在这个Vagrant环境中，Spark可以与Hadoop协同工作，加速数据分析任务的执行。 VagrantShell 标签表明这个项目可能包含了自定义的Shell脚本，用于配置和初始化虚拟机环境。这些脚本通常会负责安装和配置上述的大数据...
hadoop winutils.exe运行文件
08-15
在Windows环境下搭建Hadoop开发或测试环境时，经常会遇到一个问题，那就是“缺少winutils.exe”错误。这个错误意味着系统无法找到必要...通过遵循上述步骤，你应该能够成功地在Windows上运行Hadoop并避免遇到此类错误。
基于hadoop生态的电影网站.zip
最新发布
03-13
MapReduce则是一种编程模型，用于大规模数据集的并行计算，它将复杂任务拆分为多个子任务，分布到集群的各个节点执行。 其次，为了提供个性化的电影推荐，项目可能采用了Hadoop生态中的Mahout或Spark MLlib。这两个...
基于Hadoop数据分析系统设计(需求分析).docx
04-17
安装JDK是运行Hadoop的前提，因为Hadoop是用Java编写的。在安装Hadoop时，根据服务器的架构选择32位或64位版本，并进行相应的配置优化，比如调整内存分配、网络通信参数等，以提高Hadoop集群的性能。 一旦Hadoop...
hadoop杀死正在运行的任务(或杀不死的任务)
JOB66的博客
10-23 1491
1.hadoop job -kill $JobId 2.mapred job -kill $JobId 这两个方式一致，如果无法杀死(卡死) 3.yarn application -kill $ApplicationId 可解
Hadoop：启动与停止命令
热门推荐
oraclestudyroad的博客
07-25 8万+
Hadoop认证培训：启动与停止命令，在安装配置了Hadoop的伪分布式环境后就可以启动Hadoop了，首先需要格式化HDFS分布式文件系统，进入Hadoop的bin目录，操作命令如下： hadoop namenode -format 正常格式化HDFS的显示截图，如图2-1所示。 然后就可以启动Hadoop，进入Hadoop的bin目录，操作命令如下：
Hadoop中止下线操作后大量剩余复制块的解决方案
走在前往架构师的路上
01-24 1万+
前言如果说你是一名hadoop集群的日常维护者,那么你肯定经历过很多的节点上下线工作.例如,随着业务规模的高速扩张,集群的资源渐渐的不够使用的时候,一般正常的做法是通过增加机器来达到线性扩展的效果.当然,当这些机器在使用的过程中,出现了机器老化而引发的各自问题的时候,比如磁盘坏了,又比如某些机器网络偶尔连接不上了等,这个时候,就要把这些机器从集群中挪掉,切忌不能图一时的小利益,将这些机器留在集群中
停止正在运行的hadoop任务
05-01 1654
查看正在运行的任务列表 yarn application -list -appStates RUNNING 停止任务 yarn application -kill application_任务编号
Hadoop服务开启与关闭及其源码介绍
m0_43405302的博客
12-30 2583
服务开启与关闭 1、开启关闭所有服务（不推荐） #开启所有服务 start-all.sh #关闭所有服务 stop-all.sh 2、开启Hadoop所有服务★★★ #开启HDFS服务 start-dfs.sh #------------------------------------------------------------------ Starting namenodes on [single01] Last login: Wed Dec 29 17:17:39 CST 2021 from 19
Sqoop常用命令及参数一
while false
09-13 1756
常用命令列举 import 将数据导入到集群 export 将集群数据导出 codegen 获取数据库中某张表数据生成 Java 并打包Jar create-hive-table 创建 Hive 表 eval 查看 SQL 执行结果 import-all-tables 导入某个数据库下所有表到 HDFS 中 job 用来生成一个 ...
进程名杀进程
Hadoop工作室
08-06 1384
killall 进程名 pid='ps gaux | grep smonsvr | grep -v grep | awk '{print $2}'' kill -9 &pid 如何kill掉进程名包含某个字符串的一批进程: kill -9 $(ps -ef|grep 进程名关键字|gawk '$0 !~/grep/ {print $2}' |tr -s '\n' ' ') 观测进程名
hadoop ha模式下，kill active的namenode节点后，standby的namenode节点没能自动启动
fang.lovest.yang的博客
01-03 4255
一、背景      在Hadoop HA模式下，如果直接kill掉active namenode，standby namenode没有自动切换到active状态。 二、问题解决步骤      1. 查看hadoop安装目录下 etc/hadoop/hadoop-root-zkfc-fang16.hadoop.com.log ，关于zkfc的日志文件。发现如下问题：        由于在ac...
查看hadoop任务
08-31
该命令将返回当前正在运行的 Hadoop 应用程序的列表，包括其应用程序 ID、用户、队列、状态等信息。您也可以通过添加参数 `-appTypes <应用程序类型>` 来限制特定类型的应用程序。 另外，您还可以使用以下命令来...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值