今天,小编带大家初识hadoop的相关知识及架构!
第二种方式为永久改变主机名,开机不变
并行计算框架:mapreduce
Yarh:资源管理平台,任务调度器(2.2.0),hdfs(2.2.0内存扩展)
计算同,管理不同
Hbase: 实时分布数据库
Zookeeper协助hbase工作,有时间同步的要求
Hive:文件管理,提供接口(类似sql语句;转换成mapreduce,)
Pig:动态语言,转成mapreduce
Namenode扩展到2个,
Hdoop1.x守护进程,如下:
Map:分散 reduce:规约
开发人员只需要编写map,reduce函数,即可在hadoop上按着指定的业务逻辑运行程序,简单方便!