初识hadoop框架及hadoop1.x 与hadoop2.x的区别

今天,小编带大家初识hadoop的相关知识及架构!


第二种方式为永久改变主机名,开机不变





并行计算框架:mapreduce

Yarh:资源管理平台,任务调度器(2.2.0),hdfs(2.2.0内存扩展)

计算同,管理不同

 

Hbase实时分布数据库

Zookeeper协助hbase工作,有时间同步的要求

Hive:文件管理,提供接口(类似sql语句;转换成mapreduce,)

Pig:动态语言,转成mapreduce



Namenode扩展到2个,

Hdoop1.x守护进程,如下:










Map:分散   reduce:规约

开发人员只需要编写map,reduce函数,即可在hadoop上按着指定的业务逻辑运行程序,简单方便!


  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值