- 博客(7)
- 收藏
- 关注
原创 hadoop2.4.1的伪分布环境搭建
使用的HDFS伪分布搭建修改配置文件etc/hadoop/hadoop-env.sh: JAVA_HOME=/usr/local/jdk1.7.0_45 修改配置文件etc/hadoop/core-site.xml: fs.defaultFS hdfs://crxy0:9000
2014-11-23 20:44:24
370
转载 如何通过eclipse查看、阅读hadoop2.4源码
1.导入查看hadoop源码(1)选择Existing Projects into Workspace (2)选择源码路径 (3)查看源码 这样我们就完成了全部的内容。2.阅读hadoop源码其中比较常用的Open Call Hierarchy:用Open Call Hierarchy可以查看方法的调用层次。如
2014-11-23 19:25:33
1785
1
转载 win7如何安装maven、安装protoc
一、安装mvaven包1.首先我们下载maven包apache-maven-3.2.1.zip链接:http://pan.baidu.com/s/1jG9QhWa 密码:vmee2.配置maven(1)解压到E盘 (2)进入环境变量 (3)配置环境变量配置M2_HOME变量名:M
2014-11-23 19:24:56
675
转载 从零教你如何获取hadoop2.4源码并使用eclipse关联hadoop2.4源码
我们如果想搞开发,研究源码对我们的帮助很大。不明白原理就如同黑盒子,遇到问题,我们也摸不着思路。所以这里交给大家一.如何获取源码二.如何关联源码一.如何获取源码1.下载hadoop的maven程序包(1)官网下载这里我们先从官网上下载maven包hadoop-2.4.0-src.tar.gz。官网下载地址对于不知道怎么去官网下载,可以查看:新手指导:
2014-11-23 19:20:09
504
转载 APACHE HADOOP YARN – 概念和应用
APACHE HADOOP YARN – 概念和应用如前面所描述的, YARN 实质上是管理分布式app的系统。他由一个中心ResourceManager来管理集群所有的可用资源,每个节点有一个 NodeManager, 直接从ResourceManager来负责管理单节点的可用资源。Resource Manager在YARN里, the ResourceManag
2014-11-21 15:19:26
633
转载 APACHE HADOOP YARN –背景和概述
APACHE HADOOP YARN –背景和概述庆祝重大的里程碑,Apache Hadoop YARN 被提升为Apache Hadoop在ASF的独立子项目,我们将开始系列blog的第一篇于Apache Hadoop YARN – 一个通用的,分布式的,app管理框架,取代Hadoop集群数据处理经典的Apache Hadoop MapReduce框架。MAPREDUCE –
2014-11-21 15:17:28
731
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人