BigData In Aws Or Aliyun

16 篇文章 0 订阅
14 篇文章 0 订阅

大数据通用系统解决方案(分别基于Open,AWS,Aliyun,和三者的使用技术)

应用场景

物联网领域、车联网、智能城市,智能生活

MQTT端和云之间的通信  
   1 open  -  EMQ (百万级分布式开源物联网MQTT消息服务器)
   2 aws   -  AWS IoT
   3 ali   -  Aliyun IOT (包括 Aliyun MQTT)
消息中间件    
 MQ 1 open  -  Kafka 
   2 aws   -  Kinesis
   3 ali   -  RocketMQ
Infrastructure   
 infra 1 open  -  Ambari(Hotonworks)
 基盘搭建2 aws   -  aws-emr
   3 ali   -  E-MapReduce
计算     
 Realtime Compute1 open  -  Spark Streaming,Flink
 即时计算2 aws   -  暂无 
   3 ali   -  阿里云实时计算(Alibaba Cloud Realtime Compute),基于Flink
       
 Batch Compute1 open  -  Spark Batch, Hadoop MR
 离线计算2 aws   -  AWS Batch
   3 ali   -  BatchCompute
分析     
 Analysis1 open  -  Apache Kylin™等
 分析 2 aws   -  Amazon QuickSight等
   3 ali   -  Quick BI,画像分析等
存储     
 File Store1 open  -  HDFS 
 文件存储2 aws   -  FSx 
   3 ali   -  NAS 
       
 Object Store1 open  -  Swift 
 对象存储2 aws   -  S3 
   3 ali   -  OSS 
       
 NoSql DB1 open  -  HBase 
   2 aws   -  DynamoDB 
   3 ali   -  OceanBase
缓存     
 Data Cache1 open  -  Redis,Memcached
 缓存 2 aws   -  Amazon ElastiCache(Redis 和 Memcached 引擎之上)
   3 ali   -  阿里云数据库 Redis 版(ApsaraDB for Redis)是兼容开源 Redis 协议的 Key-Value 类型在线存储服务
搜索     
 Data Search1 open  -  Elasticsearch
 搜索引擎2 aws   -  Amazon ES (基于开源Elasticsearch一种常见的开源搜索和分析引擎)
   3 ali   -  阿里云Elasticsearch,提供基于开源Elasticsearch服务
数据仓库     
 data warehousing1 open  -  Hive 
 数据仓库2 aws   -  Amazon Redshift
   3 ali   -  Data Lake Analytics
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值