Airbyte
文章平均质量分 94
Airbyte 中文社区
入湖入仓,数据传输管道。开源软件Airbyte中文社区
展开
-
探索 Airbyte 的增量数据同步
当 Airbyte 将数据从源复制到目标时,它首先将数据复制到“原始”表中。然后,如果启用了规范化,则此数据将由目标中的 Airbyte 触发的 SQL 命令进行转换。Airbyte 利用dbt创建用于规范化数据的 SQL,并利用公用表表达式(或 CTE)将 SQL 分解为更模块化和易于理解的部分。在本教程的后面部分,您将探索用于规范化的低级别 SQL,并将查看目标数据库中的原始表和规范化表。增量同步是一种复制方法,可有效地使源和目标保持同步。与完全刷新数据。原创 2023-04-04 16:04:15 · 1580 阅读 · 1 评论 -
Airbyte是如何避免ELT中数据提取加载错误
ELT中,提取加载EL的优雅不仅仅是结果,而是执行 - 保证不会出错的艺术,是整个数据工程的基石。原创 2023-03-29 09:54:05 · 215 阅读 · 0 评论