hadoop
mno2330
这个作者很懒,什么都没留下…
展开
-
在对HDFS格式化,执行hadoop namenode -format命令时
在对HDFS格式化,执行hadoop namenode -format命令时,出现未知的主机名的问题,异常信息如下所示: [shirdrn@localhost bin]$ hadoop namenode -format11/06/22 07:33:31 INFO namenode.NameNode: STARTUP_MSG: /*******************************...原创 2011-07-01 20:31:02 · 6038 阅读 · 1 评论 -
hadoop datanode起不来错误解决方法
查看日志:ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.io.IOException: Incompatible namespaceIDs in ....解决方法:移除 datanode 的所有資料节点1: rm -rf /$HDFS/user/hadoop/data节点2: rm -rf /$HDFS/user/had...原创 2011-07-02 22:18:25 · 405 阅读 · 0 评论 -
面试hadoop可能被问到的问题
1、hadoop运行的原理? 2、mapreduce的原理? 3、HDFS存储的机制? 4、举一个简单的例子说明mapreduce是怎么来运行的 ? 5、面试的人给你出一些问题,让你用mapreduce来实现? 比如:现在有10个文件夹,每个文件夹都有1000000个url.现在让你找出top1000000url。 6、hadoop中Combiner...原创 2011-10-08 10:54:41 · 118 阅读 · 0 评论 -
一致性哈希算法及其在分布式系统中的应用
http://www.cnblogs.com/leoo2sk/archive/2011/08/11/consistent-hashing-intro.html原创 2011-10-10 17:53:05 · 82 阅读 · 0 评论