![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
kimboyz
这个作者很懒,什么都没留下…
展开
-
Hadoop概念
一、HDFS的基本概念 1.1、数据块(block) HDFS(Hadoop Distributed File System)默认的最基本的存储单位是64M的数据块。 和普通文件系统相同的是,HDFS中的文件是被分成64M一块的数据块存储的。 不同于普通文件系统的是,HDFS中,如果一个文件小于一个数据块的大小,并不占用整个数据块存储空间。 1.2、元数据节点(Namenode)和...原创 2013-11-14 10:04:07 · 150 阅读 · 0 评论 -
hadoop虚拟机centOS安装过程(伪分布式)
伪分布式模式安装 学习hadoop有一段时间,中间忙了很久没看过,虚拟机的hadoop也被删除了,之前装的是hadoop集群环境, 都是使用虚拟机,因为集群环境多配置,暂先将配置伪集群方式搭建起来使用,其使用的原理都是一样的,后面 有时间再把真实集群搭建一次,下面是我搭建的步骤: 我是win7 64位系统,但因centOS 64位尚未下载...原创 2014-03-05 14:45:29 · 95 阅读 · 0 评论 -
hadoop 1.2.1 虚拟机centOS 安装过程(分布式)
之前写过一篇hadoop 伪分布式模式 , 主要用于学习之用 , 毕竟这个技术要真正的落实到工作上,很多配置不亲手写下, 很难消化过来, 今天特意搭建一下, 并写下来作以后查看; 说下搭建的环境 (3台机器, 1台 master, 2 台slaver): 1. centos 5.8 64位 ; 2. hadoop 版本 : 1.2.1 , 目前hadoop1中最新且毕竟稳定的 ...原创 2014-03-12 14:42:26 · 68 阅读 · 0 评论