大数据平台

开源大数据技术2006年诞生
大数据组件:担任某个数据任务的软件
    分类:数据接入组件、数据落地组件、数据计算组件、数据存储组件、展示组件、调度组件
把承担不同数据功能的组件串起来,完成某些业务功能的软件组合就叫大数据平台
最早的开源大数据平台:hadoop
    hadoop的技术组件:HDFS、mapreduce、yarn、hbase、hive、zookeeper等
组件很多,以及每个组件内部又存在多个版本,想要完美组合起来,构成一个企业级的大数据平台使用者,需要先考虑2个问题
    一是组件之间的选型问题,二是组件内部的版本兼容性问题
把完全开源的大数据组件,根据不同的功能、场景以及版本,然后经过一系列兼容性适配,组装成一个个大数据产品,然后提供管理界面
    如:cloudera(CDH)、hortonworks(HDP)、合并之后推出新产品CDP
多种大数据平台核心技术差不多,选择需要根据实际业务特点跟方案的适配性来决定

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值