hadoop
a469142780
这个作者很懒,什么都没留下…
展开
-
hadoop基本操作命令
假设Hadoop的安装目录HADOOP_HOME为/home/admin/hadoop。 启动与关闭启动Hadoop 进入HADOOP_HOME目录。 执行sh bin/start-all.sh 关闭Hadoop 进入HADOOP_HOME目录。 执行sh bin/stop-all.sh 文件操作Hadoop使用的是HDFS,能够实现的功能和我们使用的磁盘系统类似。并且支持通配符,原创 2017-05-11 11:04:20 · 556 阅读 · 1 评论 -
Hadoop-2.4.1 HA配置
hadoop2.0已经发布了稳定版本了,增加了很多特性,比如HDFS HA、YARN等。最新的hadoop-2.4.1又增加了YARN HA。步骤1到5为前期工作,在此并不赘述。 1.修改Linux主机名 2.修改IP 3.修改主机名和IP的映射关系 /etc/hosts里面配置内网IP地址和IP与主机的映射关系原创 2017-05-07 16:02:54 · 684 阅读 · 1 评论 -
解决hadoop集群中datanode启动后自动关闭的问题
相信大部分的Hadoop的初学者都会都会遇到这样的问题: 在配置好Hadoop集群后,当执行sbin/start-dfs.sh时会发现datanode进程启动后立即关闭。我当时遇到这样的问题时一脸懵逼,以为是自己配置Hadoop的参数出现错误。结果反复的重新配置,重新格式化,然而并没有什么用处。废话不多说了,现在开始介绍问题的产生以及解决方案吧。问题:Namenode上namespaceID与dat原创 2017-05-07 11:55:40 · 4985 阅读 · 2 评论