元数据管理工具Atlas学习笔记之介绍

简介

Atlas可为组织提供开放式元数据管理和治理功能，用以构建数据目录，对数据进行分类和管理，形成数据字典

架构

元数据源：HBase、Hive、Sqoop、Kafka；
Admin UI：基于Web的应用程序，允许我们发现和注释元数据，拥有搜索界面和类似SQL的查询语言，可用于查询Atlas管理的元数据类型和对象；
Ranger Tag Based Policies：权限管理模块；
Business Taxonomy：业务分类；
Messaging：我们可以选择使用基于Kafka的消息传递接口与Atlas集成；
API：Atlas所有功能都通过REST API对外暴露，该API支持对类型和实体进行增删改查；
Ingest/Export：元数据的采集与导出；
Type System：类型系统，我们可以对想要管理的元数据对象定义模型，类型系统称为实体的类型实例，表示被管理的实际元数据对象；
Graph Engine：图形引擎，Atlas内部用JanusGraph图数据库作为图形引擎持久化管理元数据；
Metadata Store：采用HBase存储元数据；
Index Store：采用Solr建立索引

相关地址

官网：https://atlas.apache.org/#/
下载链接：https://atlas.apache.org/#/Downloads