Atlas--概述

简介

Apache Atlas为大数据集群提供开放式元数据管理和治理功能，用以构建其数据资产目录，对这些资产进行分类和管理，形成数据字典。并且给数据分析师和数据治理团队，提供围绕这些数据资产的协作功能。

数据字典

表与表之间的血缘依赖
字段与字段之间的血缘关系

架构原理

Metadata Source
支持的原数据来源：HBase、Hive、Sqoop、Storm、Kafka

Admin UI
该组件是一个基于Web的应用程序，允许数据管理员和数据科学家发现和注释元数据。这里最重要的是搜索界面和类似SQL的查询语言，可用于查询Atlas管理的元数据类型和对象。

Ranger Tag Based Policies
权限管理模块

Business Taxonomy
业务分类

Messaging
除了API之外，用户还可以选择使用基于Kafka的消息传递接口与Atlas集成。

API
Altas的所有功能都通过REST API项最终用户暴露，该API允许创建，更新和删除类型和实体。它也是查询和发现Atlas管理的类型和实体的主要机制。

Ingest/Export
采集组件允许将元数据加到Atlas。同样，“导出”组件将Atlas检测到的元数据导出。