1-3 常见的分布式系统

本文详细介绍了分布式系统的各个方面,包括分布式存储系统的中间控制节点架构和完全无中心架构,如HDFS和Ceph;分布式计算系统如Hadoop MapReduce、Spark和Flink的特点及应用场景;分布式消息队列系统Kafka的工作原理;以及分布式机器学习系统中Spark MLlib和分布式Tensorflow的使用。
摘要由CSDN通过智能技术生成

1 分布式存储系统

1.1 中间控制节点架构

定义:单独元数据服务器为中间控制,具体数据存储服务器为分布式的架构

代表:Hadoop Distributed File System(HDFS)

元数据:描述数据的数据(包含具体数据的路径,以及相关信息)

架构图:

特点:1.用户进行数据读写时,先访问存储元数据服务器节点,得到真正数据的存储信息后,去真正存储数据的节点进行读写

           2.存储元数据节点通常为单一的服务器节点,

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值