HDFS
文章平均质量分 79
ycwycf1
这个作者很懒,什么都没留下…
展开
-
hadoop编译源代码报错:package-info.java: 未结束的字符串字面值
转载自:http://space.itpub.net/8183550/viewspace-683859今天在搭建HADOOP环境编译的时候,报错:compile-core-classes: [javac] Compiling 386 source files to F:\hadoop\common\trunk\build\classes [javac]转载 2011-11-17 16:44:43 · 1721 阅读 · 0 评论 -
解决Hadoop0.21.0 HDFS/MapReduce编译错误(impossible to resolve dependencies)
转自:http://www.iteye.com/topic/1070647最近老大安排,要跟踪HDFS ConcatenateFile的前提条件;于是尝试用ant/ivy编译了一下hdfs,提示ivy找不到hadoop-common组件;于是又编译了一下mapreduce,提示ivy找不到hadoop-comm/hadoop-hdfs;编译hadoop-common,提示编译成功;在编译m转载 2011-11-17 17:03:24 · 3685 阅读 · 0 评论 -
Hadoop0.21.0源码编译流程
转自:http://blog.csdn.net/npucloud/article/details/6414072 Author:谢 本文介绍在Linux下使用eclipse编译Hadoop0.21.0源码,参考Hadoop0.21.0编译手册假设安装环境已配置好:eclipse3.X + jdk1.6第一步,下载hadoop0.21.0release版本 下载镜像:ht转载 2011-11-17 17:19:46 · 1203 阅读 · 0 评论 -
HDFS的使用及编程
转自:http://blog.csdn.net/whuqin/article/details/6662378本文介绍HDFS的使用,主要是对其Java API的介绍,参考hadoop的在线api。1.web访问:http://localhost:50070,查看dfs、nodes。2.命令行调用格式:hadoop fs -command具体命令:[-ls ] [-转载 2011-11-03 17:21:18 · 556 阅读 · 0 评论 -
Hadoop源码分析的思路
转自:http://www.zbitedu.com/?action-viewthread-tid-41289关于Hadoop的内部实现流程方案,我想列到下篇日志当中,本篇我只想讲述如何剖析这3万多行的代码。在对Java 应用程序的IO操作的基础上理解Hadoop并不难,关键是掌握程序系统各组件的依懒性,有条理的分析先做什么,后实现什么这样的原则,我的plan是:1. 系统中存在的cas转载 2011-11-03 17:36:33 · 511 阅读 · 0 评论 -
运行hadoop基准测试
转自:http://blog.csdn.net/azhao_dn/article/details/6930909由于需要为hadoop集群采购新的服务器,需要对服务器在hadoop环境下的性能进行测试,所以特地整理了一下hadoop集群自带的测试用例:bin/hadoop jar hadoop-*test*.jar运行上述命令,可以得到hadoop-*test*.j转载 2012-02-09 15:42:35 · 1475 阅读 · 0 评论