Hadoop
文章平均质量分 88
chaijuntao
这个作者很懒,什么都没留下…
展开
-
hadoop-CDH版环境搭建(一)
目前而言,不收费的Hadoop版本主要有三个(均是国外厂商),分别是:Apache(最原始的版本,所有发行版均基于这个版本进行改进)、Cloudera版本(Cloudera’s Distribution Including Apache Hadoop,简称CDH)、Hortonworks版本(Hortonworks Data Platform,简称“HDP”),对于国内而言,绝大多...原创 2015-08-25 11:28:02 · 152 阅读 · 0 评论 -
hadoop-CDH版环境搭建(二)
Step 8:安装CDH5 a、下载rpm安装包 1、进入下载目录,/usr/tool/: 2、执行下载: wget http://archive.cloudera.com/cdh5/one-click-install/redhat/6/x86_64/cloudera-cdh-5-0.x86_64.rpm --如果Li...原创 2015-08-25 17:41:46 · 192 阅读 · 0 评论 -
将Hadoop 2.6.0源码导入到Eclipse
我的环境: CentOS 64bitNTFS格式文件系统Administrator用户Eclipse(Luna Service Release 2 (4.4.2))JDK 1.7(Oracle官网下载)最好不要用1.8,因为导入源码后还想编译的话会出现问题。hadoop-src-2.6.0.tar.gz(在官网下载的源码:http://www.apache.org/dyn/closer.cgi...原创 2015-10-22 16:48:47 · 116 阅读 · 0 评论 -
hadoop2.2.0源代码编译
一、环境说明 虚拟软件:VMware Workstation 10 虚拟机配置: RHEL Server release 6.5 (Santiago) 2.6.32-431.el6.x86_64 cpu:4核心,内存:4G,硬盘:50G 二、前提条件: 1:将rhel6.5的iso文件作为yum源 2:hadoop-2.2.0-src.tar.gz 3:安装JDK 1.6.0_4...原创 2015-10-22 17:37:15 · 82 阅读 · 0 评论 -
(转)在eclipse下远程调试hadoop2.0
在《在eclipse下编译hadoop2.0源码》一文中,我详细介绍了如何在eclipse环境和命令行环境下编译hadoop2.0源代码,并简单介绍了如何构建hadoop环境,这篇文章将着重介绍如何在eclipse下调试源代码。 在hadoop2.0中,常用的模块有NameNode,DataNode, ResourceManager, NodeManager, FsShell等。这里我们以调试...原创 2015-10-23 15:23:37 · 121 阅读 · 0 评论