hadoop
ZHB_McCoy
这个作者很懒,什么都没留下…
展开
-
hadoop 集群大版本切换之保存数据和日志的方法
转自:http://www.cnblogs.com/editice/archive/2012/01/13/2322069.html注:将版本从0.21.0 切换到 0.20.205.0 ,或者反过来切换,没有办法用自带的upgrade命令(文中的许多操作最好能够写成脚本,手动操作过于麻烦)转载请注明出处,谢谢,实现出来确实挺累的测试之前的情况测试采用三台机器作为测试转载 2012-01-16 17:51:17 · 674 阅读 · 0 评论 -
hive安装配置与hive的JDBC (hadoop-0.20.2 + hive-0.7.0)
hive安装安装hive的时候参考了http://yp.oss.org.cn/software/show_resource.php?resource_id=270 和http://www.cnblogs.com/flying5/archive/2011/05/23/2078399.html具体步骤大概是:1)安装hadoop2)jdk3)下载hive上面这些都可以从网上找到很多转载 2012-04-24 16:12:24 · 1898 阅读 · 0 评论 -
Hive安装
hive 安装 http://www.open-open.com/lib/view/open1330908496483.htmlhive安装配置可安装集群任意节点上tar -xf hive-x.y.z.tar.gz(本次安装为hive-0.8.1.tar.gz)将解压后的hive-0.8.1文件放在系统的/opt/soft/hive中。在/etc/pr转载 2012-04-13 10:26:46 · 1717 阅读 · 0 评论 -
几篇关于Hadoop+Hive数据仓库的入门文章
Hadoop计算平台和Hadoop数据仓库的区别http://datasearch.ruc.edu.cn/~boliangfeng/blog/?tag=%E6%95%B0%E6%8D%AE%E4%BB%93%E5%BA%93Hive 随谈(三)– Hive 和数据库的异同http://www.tbdata.org/archives/551Hadoop Ecosystem解决转载 2012-04-11 13:54:46 · 757 阅读 · 0 评论 -
Hadoop-HBase-Zookeeper安装记录
一.jdk 安装及配置 (所有机器)路径:/opt/soft/jdk环境变量 vi /etc/profile 修改JAVA_HOME=/opt/soft/jdk,并添加PATH、CLASSPATH二.hadoop 集群安装HD1211:namenode, jobtracker, HmasterHD1212:secondarynamenode, datanode, tasktr原创 2012-03-22 17:13:14 · 835 阅读 · 0 评论 -
hbase基本概念和hbase shell常用命令用法
转自:http://www.jaywong.org/?p=1321. 简介HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtable:一个结构化数据的分布式存储系统》。HBase是Google Bigtable的开源实现,它利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce来处理HBase中的海量数据,利用Zo转载 2012-03-30 10:21:09 · 786 阅读 · 0 评论 -
zookeeper理解
zookeeper的部署和使用1.1 zookeeper的部署和使用1.1.1系统描述ZooKeeper是一个高可用、高可靠的协同工作系统,分布式程序可以用ZooKeeper保存并更新关键共享状态。Katta使用zookeeper保证主节点和搜索节点的有效性,指派索引文件给搜索节点,察觉搜索节点的失效等。1.1.2 安装和配置安装zookeeper也很简单,下载zookee转载 2012-03-12 13:37:39 · 3648 阅读 · 0 评论 -
Hadoop+Hbase+ZooKeeper 安装配置及需要注意的事项
转自:http://blog.csdn.net/FranklySun/article/details/6443027本文重点讲解Hbase的安装、配置、问题解决关于hadoop和zookeeper的安装配置及相关问题,可以参考:hadoop:http://blog.csdn.net/FranklySun/archive/2011/05/13/6417984.aspx转载 2012-03-07 11:22:50 · 655 阅读 · 0 评论 -
HBase 学习
最近有一段时间没有写文章和学习技术,主要是在弄一个项目的需求调研和概要设计。通过一个多月来的项目需求、概要设计,明白了一些道理,软件工程部只是写代码。说这话可能有人会觉得很搞笑,到现在才知道,但是我想说的是:知道不等于明白,知道不等于领悟到。有时间,等任务完成将项目带回公司后,好好的说一下这次调研的感受和学习。 今天主要是将项目要用的一个技术来阐述一下。hadoop项目中的hb转载 2012-03-07 11:19:30 · 1581 阅读 · 1 评论 -
hadoop、hbase、zookeeper环境搭建(详细)
一 机器192.168.0.203 hd203: hadoop namenode & hbase HMaster192.168.0.204 hd204: hadoop datanode & hbase HRegionServer & zookeeper192.168.0.205 hd205: hadoop datanode & hbase HRegionServer & zookeep转载 2012-03-07 11:05:25 · 968 阅读 · 0 评论 -
正则分析apache log
/* * Copyright (c) Ian F. Darwin, http://www.darwinsys.com/, 1996-2002. * All rights reserved. Software written by Ian F. Darwin and others. * $Id: LICENSE,v 1.8 2004/02/09 03:33:38 ian Exp $ * *转载 2012-03-06 17:27:23 · 770 阅读 · 0 评论 -
hadoop hbase 博客推荐,文章不错
http://www.javabloger.com/article/category/hadoophttp://www.javabloger.com/article/category/hbase转载 2012-02-23 13:55:14 · 416 阅读 · 0 评论 -
Hadoop Hive与Hbase整合
用hbase做数据库,但由于hbase没有类sql查询方式,所以操作和计算数据非常不方便,于是整合hive,让hive支撑在hbase数据库层面 的 hql查询.hive也即 做数据仓库1. 基于Hadoop+Hive架构对海量数据进行查询:http://blog.csdn.net/kunshan_shenbin/article/details/71053192. HBase 0.90转载 2012-04-16 09:39:16 · 1103 阅读 · 0 评论