架构
文章平均质量分 92
架构经验合集
markvivv
这个作者很懒,什么都没留下…
展开
-
【译】OpenMetadata 与 DataHub: 架构、功能、集成等方面的比较
OpenMetadata 是一个开源元数据存储库,由 Uber 元数据基础架构背后的团队构建。DataHub 是 LinkedIn 推出的一款开源数据编目工具。这两款工具在数据编目、搜索、发现、管理和质量方面提供了类似的功能。在本文中,我们将比较 OpenMetadata 和 DataHub 的架构、技术栈、元数据建模和摄取设置、功能和集成。OpenMetadata 和 DataHub 是目前最流行的两种开源数据编目工具。这两个工具在功能上有很大的重叠,但也有一些不同之处。原创 2023-12-27 08:54:24 · 4181 阅读 · 2 评论 -
【译】DataHub:元数据管理的三代技术架构解析
十年前,当我开始在 LinkedIn 工作时,公司刚刚开始经历数据的数量、种类和速度的极速增长。在接下来的几年里,我和 LinkedIn 数据基础架构团队的同事们开发了EspressoDatabus和Kafka等基础技术,以确保 LinkedIn 能够在下一波增长浪潮中生存并茁壮成长。几年后,我成为当时规模相当小的 “数据分析基础架构” 团队的技术负责人,该团队负责运行和支持 LinkedIn 的 Hadoop 使用,还负责维护横跨 Hadoop 和 Teradata 的混合数据仓库。翻译 2023-09-15 23:12:14 · 850 阅读 · 0 评论