- 博客(6)
- 资源 (11)
- 收藏
- 关注
转载 解析Hadoop分布式文件系统HDFS
一、前提和设计目标 1、硬件错误是常态,而非异常情况,HDFS可能是有成百上千的server组成,任何一个组件都有可能一直失效,因此错误检测和快速、自动的恢复是HDFS的核心架构目标。 2、跑在HDFS上的应用与一般的应用不同,它们主要是以流式读为主,做批量处理;比之关注数据访问的低延迟问题,更关键的在于数据访问的高吞吐量。 3、HDFS以支持
2013-12-22 20:40:25 806
转载 Hadoop版本选择探讨
原文地址:http://dongxicheng.org/mapreduce-nextgen/how-to-select-hadoop-versions/http://dongxicheng.org/mapreduce-nextgen/hadoop-2-0-terms-explained/由于Hadoop版本混乱多变,因此,Hadoop的版本选择问题一直令很多初级用户苦恼。本文总
2013-12-21 17:52:46 7357
转载 WINDOWS 下安装HADOOP(2)
资料准备: 最新稳定的hadoop 包(gz 压缩格式), cygwin. 首先按照cygwin ,很简单一直下一步就好。 Net Category下的:openssh,openssl BaseCategory下的:sed (若需要Eclipse,必须sed) Devel Category下的:subversion(建议安装)。
2013-12-21 17:20:44 1170
转载 Windows下安装Hadoop
台式机i5-2400 3.1G,2G内存,操作系统Win7,JDK1.6.31。1.下载Cygwin,运行Setup.exe,记得安装Sed、Openssh、Openssl,安装目录为d:\cygwin。2.安装JDK,设置Windows环境变量,添加JAVA_HOME,值为java安装目录,添加CLASSPATH,值为.[plain] view plaincopy
2013-12-21 17:14:51 1570
转载 eclipse hadoop开发环境配置
win7下安装hadoop完成后,接下来就是eclipse hadoop开发环境配置了。具体的操作如下:一、在eclipse下安装开发hadoop程序的插件安装这个插件很简单,haoop-0.20.2自带一个eclipse的插件,在hadoop目录下的 contrib\eclipse-plugin\hadoop-0.20.2-eclipse-plugin.jar,把这个文件copy到e
2013-12-21 17:10:43 610
转载 在Windows下安装Hadoop遇到的几个问题
Hdoop的荐部署环境是linux,但是我们想要在windows体验一下还是可以的,尤其是对我这样不是经常使用Linux系统的人。Windows下安装配置Hadoop的教程还是挺多的,这里可以下载。 下面我说说安装配置过程中遇到的一些问题吧,给自己以后提供借鉴。 我的操作系统是Windows 7,使用的Cygwin版本是1.7.7-1,hadoop版本是0.20.2。
2013-12-21 17:09:34 2885
Apache Nutch 1.7 在windows和Linux下的安装
2014-07-13
JTBC CMS JSP版-V2
2014-07-02
Cygwin setupFile
2013-12-21
VMware-BIOS-File-for-DELL-HP
2011-08-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人