hadoop
文章平均质量分 62
kgblily205
这个作者很懒,什么都没留下…
展开
-
hadoop异常:hdfs.server.datanode.DataNode: Problem connecting to server: localhost/127.0.0.1:8020
已经在我机子UBUNTU13.10上面安装了hadoop的伪节点分布,现在我想运行一个最基本的测试程序。首先我的电脑名字是Tank, 我在这台电脑上的账户名是joe我的hadoop安装在本地电脑/usr/local/下面 好,首先要知道examples是在哪个地方给出来的.在 /usr/local/hadoop-2.4.0//share/hadoop/下面。原创 2014-07-13 22:34:46 · 7297 阅读 · 0 评论 -
UBUNTU14.04 hadoop搭建的注意事项
hadoop 2.5.0安装目录/usr/local/hadoop-2.5.0首先是ssh localhostPS:1如何出现 ssh : connect to host localhost port 22:Connection 这样命令,那么是ssh server没有启动。安装openssh-server,然后 (sudo) /etc/init.d/ssh -star原创 2014-09-04 16:48:39 · 611 阅读 · 0 评论 -
ubuntu14.04 hadoop在两台电脑上的搭建
hadoop 2.5.0安装目录/usr/local/hadoop-2.5.0首先是ssh localhostPS:1如何出现 ssh : connect to host localhost port 22:Connection 这样命令,那么是ssh server没有启动。安装openssh-server,然后 (sudo) /etc/init.d/ssh -star原创 2014-09-04 16:49:48 · 3572 阅读 · 0 评论 -
Hadoop集群配置
在完成hadoop伪分布式配置后,就可以开始进行进行hadoop的集群配置。下面的环境都是基于伪分布式单节点配置成功的基础上进行的,即已经安装配置了SSH,安装完JDK,伪分布式单节点wordcount测试成功。SSH无密码登录配置环境:3个虚拟机,系统都为Ubuntu11.10ip说明192.168.47.129 master192转载 2014-08-16 01:53:54 · 605 阅读 · 0 评论 -
Hadoop2.2.0安装配置手册!完全分布式Hadoop集群搭建过程~(心血之作啊~~)
历时一周多,终于搭建好最新版本hadoop2.2集群,期间遇到各种问题,作为菜鸟真心被各种折磨,不过当wordcount给出结果的那一刻,兴奋的不得了~~(文当中若有错误之处或疑问欢迎指正,互相学习)PS:转载请注明来源:http://blog.csdn.net/licongcong_0224/article/details/12972889另外:欢迎配置过程中遇到问题的朋友留言,相互讨论转载 2014-08-16 01:52:16 · 466 阅读 · 0 评论 -
配置Hadoop开发环境(Eclipse)
原文地址http://blog.csdn.net/zythy/article/details/17397153通常我们可以用Eclipse作为Hadoop程序的开发平台。1) 下载Eclipse下载地址:http://www.eclipse.org/downloads/根据操作系统类型,选择合适的版本下载并安装。2) 下载并编译Hadoop的Eclipse插件网转载 2014-08-14 04:58:04 · 508 阅读 · 0 评论 -
hadoop2.2.0集群测试搭建(伪分布式集群测试)
hadoop2.0已经发布了稳定版本了,增加了很多特性,比如HDFS HA、YARN等。注意:apache提供的hadoop-2.2.0的安装包是在32位操作系统编译的,因为hadoop依赖一些C++的本地库,所以如果在64位的操作上安装hadoop-2.2.0就需要重新在64操作系统上重新编译(建议第一次安装用32位的系统,我将编译好的64位的也上传到群共享里了,如果有兴趣的转载 2014-08-14 01:38:43 · 502 阅读 · 0 评论 -
Ubuntu下 ssh : connect to host localhost port 22:Connection refused
http://asyty.iteye.com/blog/1440141Ubuntu下测试ssh时使用ssh localhost 命令,出现错误提示connect to host localhost port 22:Connection refused 造成这个错误的原因可能是ssh-server未安装或者未启动。ubuntu 11.10 默认安装openssh-clie转载 2014-08-13 22:15:23 · 547 阅读 · 0 评论 -
hadoop-2.4.0 wordcount
已经在我机子UBUNTU13.10上面安装了hadoop的伪节点分布,现在我想运行一个在原创 2014-05-28 23:12:26 · 1736 阅读 · 0 评论 -
编译hadoop-2.4.0源文件
在ubuntu13.10上编译hadoop-2.4.0源文件参考这篇文章原创 2014-07-19 21:13:05 · 1844 阅读 · 0 评论 -
hadoop 相关配置(未完成)
1.core-site.xmlfs.default.name:用于指定HDFS的namenode和默认的文件系统。hadoop.tmp.dir:HDFS的存储目录。默认值是/tmp/hadoop-${user.name}.LINUX系统中,在服务重启以后,会把/tmp下的目录清空,所以这个一定要重新配置。配置之后需要格式化namenodeio.file.buff原创 2014-12-27 21:13:07 · 667 阅读 · 0 评论