hadoop
AndersZhuo123
Talk is cheap, show me the code!
展开
-
简介Hadoop
一 云计算的三大平台1 Iaas 基础设施即服务 如 appengin2 Saas 业务即服务 如webservice3 Paas 平台即服务 如hadoop二 什么是云计算更大限度的使用网络资源,实现集群,可扩展的软件三 云计算与云存储有什么关系?hadoop属于那一种? hadoop同时关注云计算和云存储 hadoop更趋向于计算原创 2013-04-23 08:54:45 · 771 阅读 · 0 评论 -
Eclipse提交hadoop程序出错:org.apache.hadoop.security.AccessControlException: Permission denied: user=D
http://blog.csdn.net/iquicksandi/article/details/7898790描述:在window下使用Eclipse进行hadoop的程序编写,然后Run on hadoop 后,出现如下错误:11/10/28 16:05:53 INFO mapred.JobClient: Running job: job_201110281103_0003转载 2013-04-27 23:02:57 · 2735 阅读 · 1 评论 -
Eclipse Hadoop1.0.4 插件
1, 下载 clipse-jee-juno-SR2-linux-gtk.tar.gz 安装到计算机上。2, 下载eclipsehadoop插件我用的是hadoop1.0.4的版本,这里有个比较好的版本。下载地址:hadoop-eclipse-plugin-1.0.4.jar 把下载下来的jar文件放到eclipse/plugins/文件夹中,然后重启eclipse。原创 2013-04-27 23:05:13 · 3111 阅读 · 0 评论 -
org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist:
一个Hadoop小程序:将Hello world写入文件中,简要代码:public static void main(String[] args) throws Exception { Configuration conf = new Configuration(); Job job = new Job(conf,"demo"); job.setJarByClass(HelloWo原创 2013-04-29 19:39:54 · 12396 阅读 · 0 评论 -
KeyValueTextInputFormat 分割key value For hadoop 1.0
对于要分割这样的文本:1,21,32,4.......需要使用hadoop的KeyValueTextInputFormat,于是乎就要配置:Configuration conf = new Configuration();Job job = new Job(conf,"MyJob");conf.set("mapreduce.input.keyvalueliner原创 2013-04-30 09:59:29 · 5041 阅读 · 0 评论 -
ZooKeeper客户端地址列表的随机原理
原文:http://nileader.blog.51cto.com/1381108/932948在之前一个文章《ZooKeeper Java API 使用样例》中提到,客户端使用ZooKeeper的时候,首先会建立与ZooKeeper的连接,方法是通过调用下面这个构造方法来实现的。public ZooKeeper(String connectString, // int s转载 2015-08-11 10:14:39 · 627 阅读 · 0 评论 -
Zookeeper节点类型
http://blog.csdn.net/desilting/article/details/41043837 原文 public enum CreateMode { /** * 持久节点:节点创建后,会一直存在,不会因客户端会话失效而删除; */ PERSISTENT (0, false, false), /** *转载 2015-08-04 20:50:13 · 946 阅读 · 0 评论