自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

猫又全宗

哼。

  • 博客(7)
  • 收藏
  • 关注

原创 Maven编译安装Mahout for Hadoop2

0 准备工作 安装Mahout的主机需要安装有JDK、Hadoop执行环境和Maven管理工具。 1 编译安装Mahout 下载源码: git clone git@github.com:apache/mahout.git 进入到mahout根目录,编译: mvn clean compile 打包: mvn -DskipTests=true clean package 安装

2014-12-12 14:33:56 759

原创 Hadoop2.5.1安装Hive0.13.1

接上一篇文章继续配置。 机器列表: 127.0.0.1 localhost 192.168.11.99 master 192.168.11.97 master2 192.168.12.174 slave1 192.168.12.178 slave2 192.168.12.18 slave3 192.168.11.94 slave4 192.168.12.17

2014-12-02 13:54:40 667

原创 Hadoop2.5.1 ResourceManager HA

Hadoop在2.4以后引入了ResourceManager HA,避免了单点失败。 官方文档:ResourceManager High Availability 按照之前的安装配置,使用master和master2两台主机作ResourceManager的HA。 按照文档说明,我们对yarn-site.xml进行配置: yarn.nodemanager.aux-servic

2014-11-28 16:44:49 771

原创 Hadoop2.5.1安装Hbase + Zookeeper

接上一篇文章继续进行配置。 Hbase版本:0.98.7 Zookeeper版本:3.4.6 机器列表: master HMaster master2 backup-master slave1 HRegionServer slave2 HRegionServer slave3 HRegionServer slave

2014-11-27 14:13:28 805

原创 Hadoop2.5.1 HDFS HA(QJM)

HDFS High Availability Using the Quorum Journal Manager 机器类型:64位centos。机器列表: 192.168.11.99 master 192.168.11.97 master2 192.168.12.174 slave1 192.168.12.178 slave2 192.168.12.18 slave3 1

2014-11-27 09:56:54 664

原创 Hadoop2.5.1完全分布式安装

机器类型,64位centos;列表: 58.215.185.92 master 58.215.187.209 slave1 58.215.188.135 slave2 58.215.187.43 slave3 58.215.187.77 slave4 0 准备工作 0.1 修改每台机器的hostname为列表中的名字 如master就做如下修改: [root@mas

2014-11-26 16:55:02 524

原创 eclipse下编写hive udf函数

package com.tom; import org.apache.hadoop.hive.ql.exec.UDF; import org.apache.hadoop.io.Text; public class HiveUDF extends UDF{ public Text evaluate(final Text str) { if(str == null) return null;

2014-11-20 16:51:20 1007

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除