![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
流泪的鱼
专注容器云计算
展开
-
Hadoop快速入门
目的<br />这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统(HDFS)和Map-Reduce框架有所体会,比如在HDFS上运行示例程序或简单作业等。<br />先决条件支持平台GNU/Linux是产品开发和运行的平台。 Hadoop已在有2000个节点的GNU/Linux主机组成的集群系统上得到验证。 Win32平台是作为开发平台支持的。由于分布式操作尚未在Win32平台上充分测试,所以还不作为一个生产平台被支持。 所需软件<br />Linux和Wind转载 2011-03-08 14:04:00 · 670 阅读 · 0 评论 -
hadoop单机模式和伪分布式模式安装过程
<br />login as root<br />#cd ~<br /> #wget http://apache.freelamp.com/hadoop/core/stable/hadoop-0.20.2.tar.gz<br />#mkdir /opt/hadoop<br /> #cd /opt/hadoop<br /> #mv /root/hadoop-0.20.2.tar.gz .<br /> #tar xzvf hadoop-0.20.2.tar.gz<br /> #cd hadoop-0.20.2<转载 2011-03-08 15:18:00 · 1589 阅读 · 0 评论 -
Hadoop异常 hdfs.DFSClient: DataStreamer Exception: org.apache.hadoop.ipc.RemoteException
机器环境:ubuntu 11.10 64位hadoop版本:1.0.1按照http://hadoop.apache.org/common/docs/stable/single_node_setup.html上描述做单击为分布式测试时抛异常:root@ubuntu:~/sse/hadoop/hadoop-1.0.1# bin/hadoop fs -put conf input原创 2012-03-16 11:53:35 · 10308 阅读 · 1 评论 -
CentOS6.2上安装Hadoop-2.0.0-alpha(独立版)和jdk7u4
硬件: Dell PowerEdge SC420 Pentium 4GB RAM 80GBHDD 系统:CentOS 6.2下载地址:ftp://mirror.nandomedia.com/pub/CentOS/6.2/isos/i386/CentOS-6.2-i386-LiveCD.iso烧制CD从CD引导启动安装CentOS 6.2从桌面单击Instal原创 2012-05-29 15:18:27 · 1983 阅读 · 0 评论 -
Hadoop 2.0 安装向导 (0.23.x)
Hadoop 2.0安装向导 (0.23.x)最新版本的HADOOP2.0与老版本相比有不同的目录结构。本文将介绍一种简单安装Hadoop2.0到你的电脑上的方法(Hadoop 0.23安装)。这有许多可以执行的方式,现在介绍以下:如果想安装老版本的hadoop此处不再介绍。首先一个可用的linux操作系统,此处介绍使用ubuntu创建一个名为hadoop的用户并做原创 2012-05-29 16:24:09 · 5291 阅读 · 0 评论 -
盘点九种引人瞩目的开源大数据技术
越来越多的公司开始聚焦于大数据技术领域,而开源恰恰是大数据技术的灵魂。以下将为您介绍九大引人注目的开源大数据技术,请拭目以待:1.Apache HadoopApache hadoop是一个开源的分布式计算框架,最初由Doug为支持其开源Web搜索引擎Nutch所创立。通过集成MapReduce技术,Hadoop将大数据分布到多个数据节点上进行处理。Hadoop遵循Apache 2.0许转载 2012-07-14 15:06:51 · 979 阅读 · 0 评论