- 博客(12)
- 收藏
- 关注
RSS订阅原创 Hadoop分布式安装hadoop2
安装Hadoop2下载的话，下载hadoop-2.x.y.tar.gz格式的文件。这个是编译好的，另一个包含src的则是hadoop源代码。将hadoop安装至/usr/local/中$ cd ~/Downloads$ sudo tar -zxvf ./hadoop-2.7.1.tar.gz -C /usr/local #解压到/usr/local中$ cd /usr/local$ sud
2015-12-01 20:06:51
390
原创 hadoop分布式安装在ubuntu下安装JDK
安装JAVA环境Java环境可选择Oracle的JDK，或是OpenJDK,新版本在OpenJDK1.7下是没问题的。直接通过命令安装OpenJDK7$ sudo apt-get install openjdk-7-jre openjdk-7-jdkOpenJDK默认的安装位置为:/usr/lib/jvm/java-7-openjdk-amd64,(可以通过命令 dpkg -L openjdk-7-
2015-12-01 19:42:27
244
转载 Hadoop分布式安装整理
首先是准备工作 OS ubuntu 14.04 64位 Hadoop 2.7.1 java version "1.7.0_91"下面进行安装的实际操作由于我本人是菜鸟，所以很多地方在安装时遇到了问题，所以希望通过总结提高自己。请见谅。首先安装好Ubuntu系统以后第一步是创建hadoop用户创建hadoop用户首先是ctrl+alt+t打开terminal，输入以下
2015-12-01 17:07:39
326
原创 第1章 ビッグデータとデータの活用
ビッグデータとは、今までは活用するのが難しいと考えられていたデータを指すと考えればよいでしょう。ビッグデータを活用するための技術 1、大量データの検索を高速化するための技術 技術 インメモリデータベース 従来はディスクアクセスが必要だった部分について、メモリ上だけで完結するように改良し、高速化したもの。 EG：SAP HANA ；Oracle TimesTen ； H2 Database；列
2015-11-18 13:17:07
547
原创 Hadoop分布式安装04
配置环境vim /etc/profile进一步进行配置，添加HADOOP_HOME及PATHexport JAVA_HOME=/usr/lib/jvm/jdk1.7.0_79export HADOOP_HOME=/hadoop/hadoop-2.7.1export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin保存。
2015-11-17 21:21:10
150
原创 Hadoop分布式安装03
进行Hadoop的安装和配置第一步 建立一个文件 mkdir /hadoop进入下载的hadoop-2.7.1.tar.gz的文件中进行解压，解压到建立的文件夹中去tar -zxvf hadoop-2.7.1.tar.gz -C /hadoop/然后对hadoop进行配置首先进入hadoop的etc配置文件中cd /hadoop/hadoop-2.7.1/etc/hadoop第一个需要配置的
2015-11-17 20:07:18
231
原创 Hadoop分布式安装02
安装JDK1.7.9 进入下载下来的JDK压缩包的目录下。cd /home/hadoop01/Downloads然后将jdk-7u79-linux-x64.tar.gz文件进行解压缩。gzip -dc jdk-7u79-linux-x64.tar.gz |tar xf -生成jdk1.7.0_79文件夹建立新的文件夹 mkdir /usr/lib/jvm将jdk文件夹复制到新建的jvm
2015-11-17 19:55:36
206
原创 Hadoop分布式安装02
安装JDK1.7首先下载JDK 然后进入下载的文件夹中进行解压 gzip -dc jdk-7u79-linux-x64.tar.gz | tar xf -然后将解压好的文件 jdk1.7.0_79mv jdk1.7.0_79 /usr/lib/jvm我放到了/usr/lib/jvm下面然后将java添加到环境变量vim /etc/profile在文件的末尾添加如下内容:export JAV
2015-11-17 16:50:37
216
原创 Hadoop分布式安装01
首先进入Apache Hadoop官网learn about里面有以下提示Apache Hadoop **2.7.1**Apache Hadoop 2.7.1 is a minor release in the 2.x.y release line, building upon the previous release 2.7.0. This is the next stable release
2015-11-17 14:53:32
331
原创 Hadoop基础
首先Hadoop是适合**大数据分布式存储与计算的平台**。所以只是一个平台而已，具体的分析数据之类的还需要其它的。 一般hadoop的版本下载都是从Apache Hadoop的官网进行下载。 Cloudera基于Apache的Hadoop版本上进行商业化。 Yahoo拥有自己的内部版本。 所以我以Apache Hadoop的版本进行学习。Hadoop的核心项目包括
2015-11-16 21:10:33
264
转载 JAVA基础复习03
1：运算符(掌握)(1)算术运算符 +,-,*,/,%,++,--(2)赋值运算符 =,+=,-=,*=,/=,%=组合赋值运算符，有一个隐含强制类型转换功能。左边的变量=(左边的数据类型)(左边的数据和右边的数据进行操作)(3)关系运算符(比较运算符) ==,!=,>,>=,结果是boolean类型。请不要把==写成了=。(4)逻辑运算符 &,|,^,!,
2015-11-09 18:56:14
178
转载 java基础复习02
1：关键字(掌握)(1)在Java语言中具有特殊含义的单词。(2)特点：Java语言中的所有关键字全部小写。(3)注意：goto和const在Java语言中有，但是一直未使用。2：标识符(掌握)(1)标识符就是给类,接口,方法,变量等起名字。(2)组成规则A:由数字,字母,_和$组成。B:数字不能开头。C:不能和关键字重名。D:名字不要用空格
2015-11-03 15:26:56
288
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人