Hadoop相关
文章平均质量分 82
NJUTONY
吉林大学09级软件学院南京大学计算机研究生在读
展开
-
HDFS 文件结构
原文地址:http://www.pluscn.net/?p=833本文主要描述HDFS中的NameNode、DataNode、Secondary NameNode 是如何在磁盘上组织、存储持久化数据的。1. NameNode 结构在HDFS中,namenode提供整个HDFS文件系统的namespace管理,块管理以及与metadata相关的服务。最新格式化的NameNode会转载 2014-03-14 01:08:37 · 788 阅读 · 0 评论 -
编译hadoop 中eclipse-plugin的jar包
原博客地址:http://www.cnblogs.com/njuduyu/archive/2013/03/31/2991657.html分别给出这两种做法的原始链接。在本文中,我采用第一种,除了介绍安装过程之外,还会介绍我所遇到的问题。一共分为四步(注意,与文章最后参考链接里面的略有不同) 第一步:编辑home/hadoop/hadoop_installs/转载 2014-07-25 13:13:55 · 944 阅读 · 0 评论 -
Hadoop伪分布式环境配置
一. 概要 经过几天的调试,终于在Linux Cent OS 5.5下成功搭建Hadoop测试环境。本次测试在一台服务器上进行伪分布式搭建。Hadoop 伪分布式模式是在单机上模拟 Hadoop 分布式,单机上的分布式并不是真正的伪分布式,而是使用线程模拟分布式。Hadoop 本身是无法区分伪分布式和分布式的,两种配置也很相似,唯一不同的地方是伪分布式是在单机器上配置,数据节点和转载 2014-07-25 13:18:39 · 616 阅读 · 0 评论