hadoop介绍

Hadoop名字由来  作者孩子的棕黄色小象的名称Hadoop简介  开源的,分布式存储+分布式计算平台作用  搭建大型数据仓库,PB级数据的存储,处理,分析,统计等业务  搜索引擎,日志分析,商业智能,数据挖掘分布式文件系统HDFSHDFS是GFS的克隆版特点:扩展性,容错性(多副本),海量数据存储将文件切分为指定大小的数据块并以多副本的存储在多个机器上数据切分,多副本,容错等操作对用户是透明的...
摘要由CSDN通过智能技术生成

Hadoop名字由来

  作者孩子的棕黄色小象的名称

Hadoop简介

  开源的,分布式存储+分布式计算平台

作用

  搭建大型数据仓库,PB级数据的存储,处理,分析,统计等业务

  搜索引擎,日志分析,商业智能,数据挖掘


分布式文件系统HDFS

HDFS是GFS的克隆版

特点:扩展性,容错性(多副本),海量数据存储

将文件切分为指定大小的数据块并以多副本的存储在多个机器上

数据切分,多副本,容错等操作对用户是透明的


资源调度系统Yarn

  负责整个集群资源的管理和调度

  特点:扩展性,容错性,多框架资源统一调度

  


分布式计算框架MapReduce

特点:扩展性,容错性,海量数据

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值