Hadoop
Ididcan
这个作者很懒,什么都没留下…
展开
-
Katta如何使用Zookeeper-Client连接
Katta使用ZkClient和ZKServer通讯,调用顺序一般是:Katta->ZKClient->ClientCnxn->NIOServerCnxn->ZKServer,具体结构如下: 1. 连接:a)ZkClient、ClientCnxn和Katta处于同一个实例中,和Z转载 2011-07-11 10:14:03 · 1778 阅读 · 0 评论 -
Sawzall简介
SawzallSawzall可以被认为是构建在MapReduce之上的采用类似Java语法的DSL(Domain-Specific Language),也可以认为它是分布式的AWK。它主要用于对大规模分布式数据进行筛选和聚合等高级数据处理操作,在实现方面,是通过解释器将其转化为相对应的MapReduce任务。除了Google的Sawzall之外,yahoo推出了相似的Pig语言,但其语法类原创 2011-11-22 11:36:16 · 2333 阅读 · 0 评论 -
Hadoop 超简单配置
下载一个hadoop版本,本人从官网上下载最新的版本hadoop-1.0.3。本人将压缩包放置于到用户目录下 /home/username/tar -xzvf hadoop-x.y.z-bin.tar.gz进入hadoop-1.0.3/conf 目录,改写配置文件hadoop-env.sh 配置java运行路径 export JAVA_HOME=/usr/l原创 2012-08-05 10:21:17 · 2403 阅读 · 0 评论