jps命令不能查看hadoop进程

6 篇文章 0 订阅
4 篇文章 0 订阅

       今天使用jps命令,发现没有了hadoop的相关进程,如datanode,namenode,jobtracker,tasktracker等,都看不到了,但使用pe -ef|grep hadoop是看到相关进程的,而且hadoop是正常运行当中,能跑mr程序.这个问题导致的后果就是不能对hadoop进程停启了,因为机器认不到namenode/datanode进程,影响还是挺大的.

       网上也没找到解决方案,最后发现是因为linux下的tmpwatch把/tmp目录的一个特殊文件删除了(定时清理),这个文件保存的是用户启动进程的pid信息.解决方法是修改相关文件,防止/tmp目录的一些文件被删除:

1切换root

2.编辑tmpwatch文件

vi /etc/cron.daily/tmpwatch 

 3.插入 -X '/tmp/hsperfdata_*' 10d /tmp , -X 是表示不删除某目录

flags=-umc
/usr/sbin/tmpwatch "$flags" -x /tmp/.X11-unix -x /tmp/.XIM-unix \
        -x /tmp/.font-unix -x /tmp/.ICE-unix -x /tmp/.Test-unix 240 /tmp \
        -X '/tmp/hsperfdata_*' 10d /tmp
/usr/sbin/tmpwatch "$flags" 720 /var/tmp
for d in /var/{cache/man,catman}/{cat?,X11R6/cat?,local/cat?}; do
    if [ -d "$d" ]; then
        /usr/sbin/tmpwatch "$flags" -f 720 "$d"
    fi
done

  

 4.重启一下机器,问题解决.

 

启动hadoop. jps能看到相关的hadoop进程了.

 

摘自网上:

写道

java程序启动后,默认(请注意是默认)会在/tmp/hsperfdata_userName目录下以该进程的id为文件名新建文件,并在该文件中存储jvm运行的相关信息,其中的userName为当前的用户名,/tmp/hsperfdata_userName目录会存放该用户所有已经启动的java进程信息。对于windows机器/tmp用Windows存放临时文件目录代替。

 

 

ps:我使用的是redhat5系统,之前使用centos系统没出现过这个问题,不知是否跟系统有关.

 

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: Hadoopjps命令显示jps,可能有以下几种情况: 1. HadoopJPS命令显示jps是因为在Hadoop的bin目录中只有jps命令的符号链接,而没有其他Hadoop相关的命令符号链接,这是正常情况。 2. 如果您已经正确安装了Hadoop并且已经设置好了Hadoop的环境变量,但是jps命令仍然只显示jps,那么可能是因为您的Hadoop进程没有启动。在这种情况下,您需要启动Hadoop进程后,再次运行jps命令,就应该能看到Hadoop相关的进程了。 3. 如果您的Hadoop进程已经启动,但是jps命令仍然只显示jps,那么可能是因为您没有使用正确的用户运行jps命令。在这种情况下,您需要使用具有Hadoop权限的用户登录到系统上,并以该用户身份运行jps命令,才能看到Hadoop相关的进程。 总之,如果您想查看Hadoop相关的进程,请确保Hadoop已正确安装并且相关进程已启动,并以具有Hadoop权限的用户身份运行jps命令。 ### 回答2: HadoopJPS命令中只有JPS,这是因为JPS命令Java Virtual Machine Process Status Tool的缩写,它可以用来显示系统上当前正在运行的Java进程的信息。因此,JPS只能展示运行在Java虚拟机上的进程信息,而无法展示其他类型的进程信息。 同时,Hadoop是一种分布式计算框架,它需要启动多个进程来完成任务。这些进程包括NameNode、DataNode、SecondaryNameNode、JobTracker、TaskTracker等。这些进程都是通过Java命令启动的,因此可以使用JPS命令查看它们的进程信息。 但是,Hadoop的各个组件之间的进程通信和数据传输也需要使用其他的工具和组件,比如Zookeeper、HDFS、Yarn、MapReduce等,这些组件的各种进程信息需要通过其他命令或工具来查看。例如,可以使用Zookeeper自带的客户端命令查看Zookeeper各个节点的状态,使用HDFS自带的命令行工具来查看HDFS中的文件状态等等。 因此,虽然HadoopJPS命令中只有JPS,但是它并不是查看Hadoop集群中所有进程的唯一途径,还有其他的命令和工具可以帮助我们查看集群中各个组件的进程信息。 ### 回答3: Hadoop是一个分布式的计算平台,用于处理大规模的数据。其中,jpsJava Virtual Machine Process Status Tool(Java虚拟机进程状态工具)的缩写,用于检查正在运行的Java进程。在Hadoop中,我们通常会使用Hadoop集群来执行数据处理任务,这需要在每个节点上运行一些Hadoop服务进程。 在Hadoop中,我们可以使用hadoop-daemon.sh和yarn-daemon.sh脚本来启动相应的服务进程,例如NameNode、DataNode和ResourceManager等。这些脚本会启动一个Java进程来运行相应的服务进程。当我们在某个节点上执行jps命令时,它会列出所有正在运行的Java进程及其相关信息,包括Java进程的ID和进程名。但是在Hadoop中,只有一个Java进程在运行Hadoop服务进程,因此jps命令只会显示一个Java进程,即运行Hadoop服务的Java进程。 总之,使用Hadoop时,由于只有一个Java进程运行所有服务进程,因此只有一个Java进程会出现在JPS命令的输出中。这并不表示Hadoop不能处理大规模的数据或不能运行多个服务进程。相反,Hadoop可以根据需要启动多个服务进程来同时处理多个数据处理任务,同时确保它们在不同节点上运行以实现高可用性和容错性。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值