iteye_878的博客

1.概述zookeeper是一个分布式协调系统，主要目的是为了减轻构建健壮的分布式系统的负担。应用场景有领导选举，崩溃检测，分布式队列和锁等。zookeeper被应用在hbase/solr/kafka/dubbo等系统上。而且本人发现越来越多的分布式系统都开始采用zookeeper作为底层基础设施。2.环境Win7 64bitJDK 1.7.0_72zookeeper ...

[i][b]2016/06/16更新[/b][/i]windows环境下需要额外下载winutils1.环境首先要注意不同版本的spark需要不同版本的scala,python。我这里试验成功的版本如下：Windows 7JDK 1.7.0_72scala 2.10.5python 2.7.8spark 1.4.1winutils2.下载...

本文安装环境概述：windows7 64bitjdk1.7.0_72 64bithadoop2.7.2Hadoop从v2以后，单机模式已经可以在Windows上运行了，而且无需cygwin。而单机伪分布式模式理论上也是可以运行的，但是笔者在运行时遇到了形形色色的问题，所以这里就不讨论了。本文记录单机模式安装。1.下载hadoop[url]http://hadoop....

初学hadoop，折腾了几天总算把hadoop0.20.2在windows上安装成功了。因为网上很多安装成功的资料都是用的hadoop0.20.2,所以我们初学就先用这个版本。本文安装环境概述：windows7jdk1.6.0_43cygwinopensshhadoop0.20.2hadoop0.20.2版本比较老，所以最好用jdk6，不要用jdk7，以免出现一...

之前折腾了几天，想让hbase的单机模式在cygwin上跑起来，都不成功。正当我气馁之时，我无意中发现hbase0.96.0的bin和conf目录下有一些扩展名为cmd的文件。这难道是给windows用的？难道现在hbase可以直接在windows上运行了？抱着这样的想法，我尝试了不用cygwin的方法运行hbase，还真成功了。特此记录下来，给需要的人做一个参考。1. 环境：...

之前以为hadoop安装很难，然后装了hbase以后才知道，hadoop其实是小菜一碟，装hbase才叫难。经过我一周的不懈努力和反复尝试，终于成功的试验出来一套在windows上安装hbase0.20.6单机伪分布式模式的方法。环境win7 32bitjdk 1.6.0_45 32bitzookeeper 3.4.3hadoop 0.20.2hbase 0.2...

首先解释一下标题，为什么叫“hive体验”，是因为windows上并不能运行hive。本人想在win7，cygwin平台上把hive试验出来，尝试了2个星期，试验了好几种hadoop和hive的版本，均以失败而告终。google搜索出来的各种信息也均表示windows上并不能运行hive，就连一向解燃眉之急的stackoverflow上搜索之也都是只有问题，没有回答。所以本人经历了N次失败后，...