云计算与大数据课程笔记（五）之AWS云计算框架辅助笔记

Dynamo

Amazon Dynamo是Amazon Web Services (AWS) 提供的一个基础存储架构，它是为了实现高度可扩展的分布式数据存储而设计的。DynamoDB，一个受Dynamo启发的数据库服务，后来成为了AWS提供的完全托管的NoSQL数据库服务。

Dynamo的核心特点

• 分布式设计：Dynamo使用分布式哈希表（DHT）技术来实现数据的分布式存储，这样可以在多个服务器之间分散数据，增强数据存储的可扩展性和可靠性。
• 高可用性和可靠性：Dynamo通过在多个节点上复制数据来确保高可用性和容错能力。即使部分节点失败，系统仍然可以继续工作。
• 一致性和分区容忍：Dynamo通过使用一致性协议（如向量时钟或Merkle树）来管理数据的一致性和处理分区容错，允许在一定程度上调整一致性和可用性之间的平衡。

Dynamo --> DynamoDB扩展 

• 完全托管的服务：Dynamo的概念和技术被进一步发展，形成了DynamoDB，它是一个完全托管的NoSQL数据库服务，用户无需管理底层的服务器或者处理分布式系统的复杂性。
• 无服务器能力：DynamoDB提供无服务器的数据存储能力，自动处理数据分片和复制，用户只需要关注数据的使用，而无需管理数据库的运行维护。

应用场景

• 大规模分布式应用：Dynamo和DynamoDB非常适合大规模的、需要高可用性和可扩展性的分布式应用，如大型网站、在线服务和云应用。

Dynamo是AWS开发的一种分布式存储系统的基础架构，它旨在提供高可用性、可扩展性和灵活性。DynamoDB是基于Dynamo原理构建的，提供了一个完全托管、高性能的NoSQL数据库服务，适用于需要处理大量数据且需求高度可靠性和可扩展性的应用。

---

弹性计算云EC2和简单存储服务S3

Amazon EC2（Elastic Compute Cloud）和 Amazon S3（Simple Storage Service）是Amazon Web Services (AWS) 提供的两个核心服务，分别针对计算和存储需求。

Amazon EC2

Amazon EC2 提供可伸缩的计算能力。用户可以在 EC2 上虚拟运行应用程序，使用所需数量的虚拟服务器。

• 虚拟服务器：EC2 允许用户在云中启动和管理虚拟服务器（称为实例），用户可以根据需要选择不同类型和配置的实例。
• 可伸缩性：EC2 提供弹性伸缩功能，根据负载自动增加或减少实例数量，以优化成本和性能。
• 安全：EC2 提供多层次的安全防护，包括网络隔离、用户身份验证和访问控制。

Amazon S3

Amazon S3 提供可扩展的对象存储服务。它是为存储和检索任意数量的数据而设计，无论数据量大小，都能提供高可靠性。

• 对象存储：S3 将数据作为对象存储，每个对象都存储在一个唯一的键（key）和值（value）对中，键是对象的标识符。
• 数据持久性和可靠性：S3 提供高数据持久性，数据自动复制到多个设施，确保数据的安全和可靠性。
• 数据管理和传输：S3 支持多种数据管理功能，包括生命周期策略、版本控制和加密服务，以及优化的数据传输方法。

两者的关联

虽然 EC2 和 S3 是独立的服务，但它们经常一起使用来支持各种云计算需求。例如，EC2 实例可以用来处理计算任务，而数据可以存储在 S3 上，实例可以直接访问 S3 中的数据进行处理。

• EC2：提供弹性的虚拟服务器，可以根据需求调整计算资源，适合运行各种规模的应用程序。
• S3：提供高可靠性的对象存储服务，适合存储大量数据，支持高频次的数据访问和检索。

EC2 和 S3 结合使用，为云计算提供了一个完整的解决方案，涵盖计算、存储和数据处理的各个方面。

---

Amazon SimpleDB 和 Amazon DynamoDB

Amazon SimpleDB 和 Amazon DynamoDB 是 AWS 提供的两种非关系型数据库服务，它们都是设计来管理和存储大规模数据集的，但各有特点和用途。

Amazon SimpleDB

SimpleDB 是一个简单的非关系型数据库服务，提供了基本的数据库存储和查询功能。

• 基于属性的存储：SimpleDB 以属性（键-值对）的形式存储数据，每个条目可以有多个这样的键-值对。
• 简单的查询语言：SimpleDB 提供了一个简单的查询语言，允许用户执行基于属性的查询来检索数据。
• 自动索引：所有属性都自动被索引，这意味着查询操作通常很快，但这也限制了查询的复杂性和灵活性。
• 适用性：适合那些结构简单、查询模式固定、数据量适中的应用。

Amazon DynamoDB

DynamoDB 是一个更强大的非关系型数据库服务，支持键值和文档数据模型，提供高性能、可扩展的数据库服务。既有着Redis的键值对功能，也有MongoDB的文档处理功能。

• 键值和文档存储：DynamoDB 允许用户存储和查询键值对数据和文档数据，如 JSON。
• 自动扩展：DynamoDB 支持自动扩展功能，可以根据流量自动调整吞吐量容量。
• 高可用性和持久性：DynamoDB 数据自动复制到多个可用区，确保高可用性和数据持久性。
• 适用性：适合需要处理大规模数据和需要高吞吐量、低延迟的应用。

对比

• 复杂性：DynamoDB 在功能上比 SimpleDB 复杂，提供更多的特性和选项，适用于更复杂的应用场景。
• 扩展性：DynamoDB 在处理大规模数据集方面更有优势，可以支持更大的数据量和更高的请求频率。
• 管理：DynamoDB 提供了更多的自动管理功能，如性能调优和扩展，而 SimpleDB 更侧重于简单性和易用性。

---

关系型数据库服务RDS和简单队列服务SQS

Amazon RDS (Relational Database Service) 和 Amazon SQS (Simple Queue Service) 是 AWS 提供的两种不同类型的服务，分别用于关系型数据库管理和消息队列。

Amazon RDS (Relational Database Service)

RDS 是一种托管的关系型数据库服务，支持多种数据库引擎。（服务的程度）

• 支持多种数据库：RDS 支持多种关系数据库引擎，如 MySQL、PostgreSQL、Oracle、SQL Server 以及 AWS 自己的 Aurora。
• 管理和维护：RDS 自动处理许多数据库管理任务，如硬件配置、数据库设置、备份和补丁管理。
• 可扩展性和性能：RDS 允许用户根据需要轻松扩展数据库的计算资源和存储容量。它还提供了高性能的数据库实例选项。
• 高可用性：通过设置多可用区部署，RDS 可以自动备份数据库并在发生故障时进行故障转移，以实现高可用性。

托管的关系型数据库服务（如 Amazon RDS）意味着云服务提供商负责数据库的许多运维任务，包括硬件的配置、数据库软件的安装、自动备份、补丁管理和基本的监控。在这种服务中，用户无需关心底层的硬件或数据库软件的管理，但仍然有一定程度的控制权，比如选择数据库类型、设置数据库的大小、配置一些参数等。

Amazon SQS (Simple Queue Service)

SQS 是一种完全托管的消息队列服务，用于在不同的组件、应用程序之间传递消息。

• 消息队列：SQS 提供了一个可靠的消息队列来存储从一个组件发送到另一个组件的消息。
• 解耦组件：通过使用 SQS，不同的系统组件可以独立地扩展和操作，提高了系统的整体可靠性和弹性。
• 可扩展性：SQS 可以处理高容量的消息传输，并且可以根据使用情况自动扩展。
• 延迟和重试机制：SQS 支持消息延迟和重试机制，确保消息可以可靠地传递给接收方。

完全托管的消息队列服务（如 Amazon SQS）意味着服务提供商管理了所有与服务运行相关的方面，包括硬件和软件的管理、维护、扩展和故障恢复。完全托管通常意味着用户几乎不需要关心任何后端操作或管理任务，可以完全集中精力于使用服务本身的功能。

对比

• 应用类型：RDS 是为存储和管理结构化数据设计的，适用于需要复杂查询和事务支持的应用；而 SQS 是为消息传递和进程间通信设计的，适合解耦应用组件和处理异步消息。
• 服务模型：RDS 提供数据库服务，强调数据的持久性和一致性；SQS 提供队列服务，强调消息的传输和处理。

RDS 和 SQS 分别解决了数据存储和消息传递的需求，它们在现代云架构中扮演着重要的角色，帮助构建可扩展、可靠和高效的应用程序。