Hadoop系列
文章平均质量分 75
XJAVASunjava
这个作者很懒,什么都没留下…
展开
-
Windows上使用Eclipse远程连接Hadoop进行程序开发
转载自:http://www.cnblogs.com/beanmoon/archive/2013/01/05/2845579.html 由于hadoop主要是部署和应用在linux环境中的,但是目前鄙人自知能力有限,还无法完全把工作环境转移到linux中去(当然还有点小私心啦,windows下那么多好用的程序到linux下用不了还真有点心疼——比如说快播,O(∩_∩)O~)转载 2013-10-05 20:43:25 · 28062 阅读 · 0 评论 -
VMware中ubuntu忘记密码的解决办法[转]
VMware中ubuntu忘记密码的解决办法:一、用安装盘重启,这时候你将获得root权限,但这个不是今天说的重点。二、这种情况更加常见,我们身边并没有安装盘,但grub为我们提供一个非常方便的方法:重启ubuntu,随即长按shift进入grub菜单;选择recovery mode,回车确认;在Recovery Menu中,选择“Root Drop to root shell转载 2013-09-22 15:57:12 · 4276 阅读 · 0 评论 -
Ubuntu 12.10 +Hadoop 1.2.1版本集群配置
一、引言Hadop是一种分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序,充分利用集群的威力高速运算和存储。hadoop1.2.1版本下载地址:http://apache.dataguru.cn/hadoop/common/hadoop-1.2.1/二、准备安装环境我的本机是环境是windows8.1系统 +VMvare9虚拟机。VM原创 2013-09-25 17:09:20 · 6497 阅读 · 1 评论 -
详解MapReduce的Shuffle过程
文章转自:http://langyu.iteye.com/blog/992916 Shuffle过程是MapReduce的核心,也被称为奇迹发生的地方。要想理解MapReduce, Shuffle是必须要了解的。我看过很多相关的资料,但每次看完都云里雾里的绕着,很难理清大致的逻辑,反而越搅越混。前段时间在做MapReduce job 性能调优的工作,需要深入代码研究MapRed转载 2013-11-04 09:49:09 · 1089 阅读 · 0 评论