HADOOP
victorjz
这个作者很懒,什么都没留下…
展开
-
Hadoop基础
首先Hadoop是适合**大数据分布式存储与计算的平台**。所以只是一个平台而已,具体的分析数据之类的还需要其它的。 一般hadoop的版本下载都是从Apache Hadoop的官网进行下载。 Cloudera基于Apache的Hadoop版本上进行商业化。 Yahoo拥有自己的内部版本。 所以我以Apache Hadoop的版本进行学习。Hadoop的核心项目包括原创 2015-11-16 21:10:33 · 270 阅读 · 0 评论 -
Hadoop分布式安装02
安装JDK1.7首先下载JDK 然后进入下载的文件夹中进行解压 gzip -dc jdk-7u79-linux-x64.tar.gz | tar xf -然后将解压好的文件 jdk1.7.0_79mv jdk1.7.0_79 /usr/lib/jvm我放到了/usr/lib/jvm下面然后将java添加到环境变量vim /etc/profile在文件的末尾添加如下内容:export JAV原创 2015-11-17 16:50:37 · 230 阅读 · 0 评论 -
Hadoop分布式安装01
首先进入Apache Hadoop官网learn about里面有以下提示Apache Hadoop **2.7.1**Apache Hadoop 2.7.1 is a minor release in the 2.x.y release line, building upon the previous release 2.7.0. This is the next stable release原创 2015-11-17 14:53:32 · 338 阅读 · 0 评论 -
Hadoop分布式安装02
安装JDK1.7.9 进入下载下来的JDK压缩包的目录下。cd /home/hadoop01/Downloads然后将jdk-7u79-linux-x64.tar.gz文件进行解压缩。gzip -dc jdk-7u79-linux-x64.tar.gz |tar xf -生成jdk1.7.0_79文件夹建立新的文件夹 mkdir /usr/lib/jvm将jdk文件夹复制到新建的jvm原创 2015-11-17 19:55:36 · 214 阅读 · 0 评论 -
Hadoop分布式安装04
配置环境vim /etc/profile进一步进行配置,添加HADOOP_HOME及PATHexport JAVA_HOME=/usr/lib/jvm/jdk1.7.0_79export HADOOP_HOME=/hadoop/hadoop-2.7.1export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin保存。原创 2015-11-17 21:21:10 · 159 阅读 · 0 评论 -
Hadoop分布式安装03
进行Hadoop的安装和配置第一步 建立一个文件 mkdir /hadoop进入下载的hadoop-2.7.1.tar.gz的文件中进行解压,解压到建立的文件夹中去tar -zxvf hadoop-2.7.1.tar.gz -C /hadoop/然后对hadoop进行配置首先进入hadoop的etc配置文件中cd /hadoop/hadoop-2.7.1/etc/hadoop第一个需要配置的原创 2015-11-17 20:07:18 · 239 阅读 · 0 评论 -
hadoop分布式安装在ubuntu下安装JDK
安装JAVA环境Java环境可选择Oracle的JDK,或是OpenJDK,新版本在OpenJDK1.7下是没问题的。直接通过命令安装OpenJDK7$ sudo apt-get install openjdk-7-jre openjdk-7-jdkOpenJDK默认的安装位置为:/usr/lib/jvm/java-7-openjdk-amd64,(可以通过命令 dpkg -L openjdk-7-原创 2015-12-01 19:42:27 · 251 阅读 · 0 评论 -
Hadoop分布式安装整理
首先是准备工作 OS ubuntu 14.04 64位 Hadoop 2.7.1 java version "1.7.0_91"下面进行安装的实际操作由于我本人是菜鸟,所以很多地方在安装时遇到了问题,所以希望通过总结提高自己。请见谅。首先安装好Ubuntu系统以后第一步是创建hadoop用户创建hadoop用户首先是ctrl+alt+t打开terminal,输入以下转载 2015-12-01 17:07:39 · 335 阅读 · 0 评论 -
Hadoop分布式安装hadoop2
安装Hadoop2下载的话,下载hadoop-2.x.y.tar.gz格式的文件。这个是编译好的,另一个包含src的则是hadoop源代码。将hadoop安装至/usr/local/中$ cd ~/Downloads$ sudo tar -zxvf ./hadoop-2.7.1.tar.gz -C /usr/local #解压到/usr/local中$ cd /usr/local$ sud原创 2015-12-01 20:06:51 · 415 阅读 · 0 评论