亚马逊云科技专栏

2021年初，可观测性的概念在国内市场还鲜少有人提到，但到了2021年下半年，有关可观测性的研讨和实践却开始如雨后春笋般层出不穷，知名公司Grafana 甚至直接将原来的监控工具改成了可观测性技术栈并推了一系列服务。可观测性真的能够解决传统监控体系面临的诸多问题吗？又该如何构建可观测体系？本期，亚马逊云科技Tech Talk特别邀请到观测云 CEO 蒋烁淼带来分享《构建端到端的可观测体系最佳实践》。可观测性为何突然“火出圈”可观测性看似是个新鲜词，但其实它的起源远比我们的认知要早得多。可观测

12月14日，咨询机构Gartner发布了报告《2021 Gartner Magic Quadrant for Cloud Database Management System》。数据库管...

2021 亚马逊云科技 re:Invent 全球大会虽已落下帷幕，开发者们围绕这场盛会的讨论热情却不曾消减。作为云计算领域每年创新发布的关键节点，今年的 re:Invent 上又有数十款重...

在 re:Invent 2020 上，Amazon Lambda推出了大函数支持。Amazon Lambda客户可以设置Amazon Lambda函数的最大内存为 10,240 MB(10...

相关服务及背景介绍Amazon S3Amazon Simple Storage Service (Amazon S3) 是一种面向 Internet 的存储服务。该服务旨在降低网络规模计算...

简介Deepmind团­队于2021年7月公开了Alphafold2算法源代码和相关论文，这一方案被认为可解决困扰生物学长达半个世纪的蛋白质折叠结构预测难题，其准确度高达92.4(百分制)...

「关注」并「星标」我们，每天接收关于亚马逊云科技的最新资讯！不平凡的2021已经悄悄走远：依旧蔓延的疫情一直到年末的 Log4j 的重磅炸药，基本上各个大厂都在连夜整修系统来填补安全漏洞。Log4j 目前使用在百万台机器当中：它默默的记录着系统日志，帮助开发者找到错误原因，基本上是一个不可或缺的工具。可是，作为使用量这么大的包，真正赞助它的只有3个人。维护基本上靠社区同学加班加点地在业余时间完成。你可能会好奇，既然这么多人用，为什么开源软件仍旧没有获得资金？目前开源环境的生态是怎么样...

Apache Superset是一个开源的基于主流云原生技术构建的数据可视分析平台Business Intelligence（BI），给用户提供轻量，直观，可定制的操作界面来对接各种数据源，实现数据的查询，编排和可视化。

数据血缘跟踪、记录、展示了数据来自何处，以及在数据流转过程中应用了哪些转换操作，它有助于追溯数据来源及处理过程。

在不那么遥远的旧 IT 时代，有这样一个段子——假如把数据库们”聚在一起“开会”。Oracle: 我们需要企业级数据库。MySQL: Oracle 不开源。PostgreSQL: MySQL 的功能不够多。SQLite: 你可以把我嵌入到任何地方。这样，4 种数据库够大家用了。MongoDB: 为什么我们要用 join 和模式 (schema)?Bigtable: MongoDB 的对 web 的扩展性不好。Hbase: Bigtable 不开源。

提示：如图文未加载，请刷新重试END听说，点完下面4个按钮就不会碰到bug了！ ...

自 2012 年推出以来，已有数十万亚马逊云科技客户选择用 Amazon DynamoDB 处理关键任务的工作负载。Amazon DynamoDB 是一个非关系型数据库，允许您存储几乎无限量的数据，并以任何规模的单数毫秒级性能检索数据。

Amazon Redshift 数据仓库是种快速且完全托管的数据仓库服务，让您可以使用标准 SQL 和现有的商业智能工具经济高效地分析您的所有数据，提供优质的数据仓库解决方案。

在 2020 年 Amazon re:Invent 大会上，我们预览了 Amazon HealthLake，这是一项完全托管、符合 HIPAA 标准的服务。医疗保健和生命科学客户可以利用此服务将来自不同孤岛和不同格式的健康信息汇总到结构化的集中式亚马逊云科技数据湖，并通过分析和机器学习 (ML) 从这些数据中获取洞察。今天，我非常高兴地宣布，Amazon HealthLake 正式发布，可供所有亚马逊云科技客户使用。

数据仓库的数据体系严格、治理容易，业务规模越大，ROI 越高；数据湖的数据种类丰富，治理困难，业务规模越大，ROI 越低，但胜在灵活。

Apache Airflow(以下简称为Airflow) 是一项由Airbnb在 2014 年推出的开源项目，其目的是为了管理日益复杂的数据管理工具、脚本和分析工具，提供一个构建批处理工作流的方案。Airflow是一种可扩展的分布式工作流调度系统，允许将工作流建模为有向无环图（DAGs），通过这种方式简化数据管道中各个处理步骤的创建、编排和监控。Airflow被广泛应用于机器学习、数据分析/处理以及各类需要流程化的场景。

在维持 Amazon ElastiCache 资源的可靠性、可用性与性能方面，监控一直是最为重要的手段之一。在本文中，我们将共同了解如何使用 Amazon CloudWatch 及其他外部工具维持健康运作的 Redis 集群，并防止其意外中断。我们还将具体讨论对扩展需求进行预测及筹备的几种可行方法。

企业上云是企业在数字化转型的关键一步，数据表明全球有88%的企业将上云作为优先战略，但同时，86％的企业基础架构支出中仍在本地的系统部署上，这说明企业向云端迁移还需要一段时间。同时，公有云、混合云、多云的多种方式接入已成为企业的主流选择。亚马逊云科技希望把云迁移变得更加简单，所以亚马逊云科技一直致力于更新和迭代混合云的功能，帮助客户实现高速、安全、平滑、高可用的混合云构造解决方案。

企业上云是企业在数字化转型的关键一步，数据表明全球有88%的企业将上云作为优先战略，但同时，86％的企业基础架构支出中仍在本地的系统部署上，这说明企业向云端迁移还需要一段时间。同时，公有云、混合云、多云的多种方式接入已成为企业的主流选择。亚马逊云科技希望把云迁移变得更加简单，所以亚马逊云科技一直致力于更新和迭代混合云的功能，帮助客户实现高速、安全、平滑、高可用的混合云构造解决方案。

Apache Airflow(以下简称为Airflow) 是一项由Airbnb在 2014 年推出的开源项目，其目的是为了管理日益复杂的数据管理工具、脚本和分析工具，提供一个构建批处理工作流的方案。Airflow是一种可扩展的分布式工作流调度系统，允许将工作流建模为有向无环图（DAGs），通过这种方式简化数据管道中各个处理步骤的创建、编排和监控。Airflow被广泛应用于机器学习、数据分析/处理以及各类需要流程化的场景。