伪分布配置完成启动jobtracker和tasktracker没有启动

最新推荐文章于 2017-11-03 16:51:34 发布
最新推荐文章于 2017-11-03 16:51:34 发布
阅读量161 收藏
点赞数
原文链接：http://www.cnblogs.com/luguoyuanf/p/3594426.html
版权

检查logs目录下的hadoop-root-jobtracker日志文件

clip_image002

2014-02-26 19:56:06,782 FATAL org.apache.hadoop.mapred.JobTracker: java.lang.IllegalArgumentException: Does not contain a valid host

:port authority: local

at org.apache.hadoop.net.NetUtils.createSocketAddr(NetUtils.java:164)

at org.apache.hadoop.net.NetUtils.createSocketAddr(NetUtils.java:130)

at org.apache.hadoop.mapred.JobTracker.getAddress(JobTracker.java:2312)

at org.apache.hadoop.mapred.JobTracker.<init>(JobTracker.java:2070)

at org.apache.hadoop.mapred.JobTracker.<init>(JobTracker.java:1889)

at org.apache.hadoop.mapred.JobTracker.<init>(JobTracker.java:1883)

at org.apache.hadoop.mapred.JobTracker.startTracker(JobTracker.java:312)

at org.apache.hadoop.mapred.JobTracker.startTracker(JobTracker.java:303)

at org.apache.hadoop.mapred.JobTracker.startTracker(JobTracker.java:298)

at org.apache.hadoop.mapred.JobTracker.main(JobTracker.java:4791)

2014-02-26 19:56:06,782 INFO org.apache.hadoop.mapred.JobTracker: SHUTDOWN_MSG:

检查mapred-site.xml配置文件是否有误

转载于:https://www.cnblogs.com/luguoyuanf/p/3594426.html

weixin_30772261
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Hadoop单机伪分布完全分布实验文档
04-10
本实验文档集合了对Hadoop在不同环境下的部署和操作实践，包括单机伪分布和完全分布的模式，以及相关的云计算技术介绍。以下是这些知识点的详细阐述： 1. **Hadoop单机伪分布模式**： 单机伪分布模式是Hadoop初学...
hadoop的伪分布式模式配置与安装伪分布式模式
最新发布
11-26
使用`sbin/start-dfs.sh`和`sbin/start-mapred.sh`命令启动Hadoop的DataNode、NameNode、TaskTracker和JobTracker服务。 10. **验证安装**： 通过访问Hadoop的Web UI（默认在NameNode的50070端口）和JobTracker的...
学习四：jobtracker和tasktracker无法正常启动
04-18 291
按照前面的学习一和学习三的步骤进行配置，我们发现Namenode的MapReduce jobtracker和DataNode的tasktracker无法正常启动，具体表现如下：masternode:# jps ...
JobTracker 没有起来 datanode没有起来
小透明-溶冰
04-09 1125
转载自：http://hi.baidu.com/wylinux/item/eaeafb43fcb406af60d7b931 BindException: Problem binding to cs-01.localhost.localdomain/192.168.0.4:9001 : Address already in use 2012-06-10 20:43:03,004 IN
DataNode没启动且TaskTracker自动消失的解决过程
q454711253的博客
11-03 477
最近在自学hadoop，按照教程搭建伪分布环境。 一个master节点和两个slave节点，在启动hadoop后，slave节点没有启动DataNode，并且TaskTracker自动消失，如下： [root@slave1 logs]# jps 9927 TaskTracker 9979 Jps [root@slave1 logs]# jps 9992 Jps 想到查看日
hadoop运行原理之Job运行(三) TaskTracker的启动及初始化
weixin_34378767的博客
10-15 157
　　与JobTracker一样，TaskTracker也有main()方法，然后以线程的方式启动(继承了Runnable接口)。main()方法中主要包含两步：一是创建一个TaskTracker对象；二是启动TaskTracker线程。 1 public static void main(String argv[]) throws Exception { 2 ... ...
hadopp伪分布式配置
12-09
使用`./start-all.sh`启动所有Hadoop守护进程，包括NameNode、DataNode、Secondary NameNode、TaskTracker和JobTracker。通过访问`http://localhost:50070`和`http://localhost:50030`，可以监控NameNode和...
Linix下Hadoop的伪分布式配置
11-23
然后，通过`bin/start-all.sh`启动所有的Hadoop进程，包括Namenode、DataNode、JobTracker和TaskTracker。 请注意，Hadoop的启动可能需要一些时间，启动后可以通过访问Web UI（Namenode的UI通常在50070端口，...
hadoop 伪分布式环境配置
11-14
在完全分布式模式下，一台机器作为 master，上面运行 namenode 和 jobtracker，另外的机器作为 slave，上面运行 datanode 和 tasktracker。secondaryname 是 namenode 的一个备份，里面同样保存了名字空间和文件到...
解析Hadoop新一代MapReduce框架Yarn
iteye_3276的博客
02-16 297
更快、更强——解析Hadoop新一代MapReduce框架Yarn 摘要：本文介绍了Hadoop 自0.23.0版本后新的MapReduce框架（Yarn)原理、优势、运作机制和配置方法等；着重介绍新的Yarn框架相对于原框架的差异及改进。 编者按：对于业界的大数据存储及分布式处理系统来说，Hadoop 是耳熟能详的卓越开源分布式文件存储及处理框架，对于 Hadoop 框架的介绍在此不...
namenode和jobTracker进程没起来的原因
u012889638的专栏
07-30 1475
namenode和jobTracker进程没起来的原因有许多种
【hadoop】DataNode,NameNode,JobTracker,TaskTracker用jps查看无法启动解决办法
热门推荐
lawrencesgj的专栏
12-13 2万+
最近配了一个单机版的hadoop1.0.4，参考官方网址：http://hadoop.apache.org/docs/r1.0.4/single_node_setup.html 配完后使用jps查看，发现总是有一些没有启动，非常郁闷，在多番研究后发现有两个原因，一个是在/tmp目录下有以前使用2.02版本留下的文件没有删除，二个是因为端口被占用了 解决方法： 一.删除/tmp下的所有文件
FastDFS Tracker端配置文件详解及启动注意事项
赵晓雷的专栏
12-14 5281
今天进行了FastDFS的tracker端的配置，代码发送如下： Java代码   # is this config file disabled  # false for enabled  # true for disabled  disabled=false  #当前配置是否不可用false可用，true不可用    # bind an address of this hos
jobtracker和tasktracker
06-06
JobTracker和TaskTracker是Hadoop分布式计算框架中的两个重要...总之，JobTracker和TaskTracker是Hadoop分布式计算框架中非常重要的组件，它们共同协作完成了整个集群中的作业和任务的调度、分配、执行和管理等工作。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值