- 博客(5)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 win8+hadoop1.2.1+eclipse4.4.2插件安装
1.下载解压 1.下载hadoop1.2.1 http://apache.fayea.com/hadoop/common/hadoop-1.2.1/ hadoop-1.2.1.tar.gz 61M 2.下载eclipse4.4.2 http://www.eclipse.org/downloads/ Eclipse IDE for Java Developers, 155M 3.下
2015-03-03 16:21:34
1140
原创 HDFS学习笔记
HDFS的设计基础和目标: 1.硬件错误是常态，因此需要冗余 2.流式数据分析，即数据的批量读取而非随机读写，hadoop擅长做的是数据分析而不是数据处理 3.大规模数据集 4.简单一致性模型。为了降低系统复杂度，对文件采用一次性写多次读的逻辑设计，即是文件一经写入，关闭，就再也不能修改 5.程序采用‘数据就近’原则分配节点执行 Namenode 1.管理文件系统的命
2015-03-02 10:33:59
532
原创 Data node 192.168.0.153:50010 is attempting to report storage ID DS-819066718-127.0.0.1-50010-14250
50010-1425095741370. Node 192.168.0.22:50010 is expected to serve this storage. org.apache.hadoop.hdfs.protocol.UnregisteredDatanodeException: Data node 192.168.0.153:50010 is attempting to report sto
2015-03-02 09:34:58
2538
转载 org.apache.hadoop.ipc.RPC: Server at master/ip:port not available yet
转自：http://blog.sina.com.cn/s/blog_893ee27f0100zoh7.html 很多情况下遇到类似问题 hadoop datanode 问题 INFO org.apache.hadoop.ipc.RPC: Server at /:9000 not available yet, Zzzzz.. 本以为这个样子就大功告成了， 然后我用bin/hadoop
2015-03-02 09:24:45
775
转载 Hadoop 解除 “Name node is in safe mode”
运行Hadoop程序时，有时候会报以下错误： org.apache.hadoop.dfs.SafeModeException: Cannot delete /user/hadoop/input. Name node is in safe mode 这个错误应该还满常见的吧（至少我运行的时候是这样的） 那我们来分析下这个错误，从字面上来理解： Name node is
2015-03-01 14:27:20
430
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人