用 OpenMetadata 助力您的数据之旅

什么是 OpenMetadata？

OpenMetadata 是一个由中央元数据存储库、深度列级血缘关系以及无缝团队协作支持的统一元数据平台，用于数据发现、数据可观测性和数据治理。它是最快速发展的开源项目之一，拥有活跃的社区，并被众多不同行业领域的公司所采用。基于开放元数据标准和 API，支持与广泛数据服务的连接器，OpenMetadata 实现了端到端的元数据管理，让您能够自由地释放数据资产的价值。

目录：

• 功能
• 试用我们的沙盒
• 安装与运行
• 路线图
• 文档与支持
• 贡献者

OpenMetadata 由四个主要组件组成：

• 元数据模式：这些是基于通用抽象和类型的元数据核心定义和词汇表。它们还允许自定义扩展和属性，以适应不同的用例和领域。
• 元数据存储：这是用于存储和管理元数据图的中心存储库，以统一的方式连接数据资产、用户和工具生成的元数据。
• 元数据 API：这些是基于元数据模式构建的用于生产和消费元数据的接口。它们实现了用户界面和工具、系统和服务与元数据存储的无缝集成。
• 摄取框架：这是一个可插拔框架，用于从各种源和工具将元数据摄取到元数据存储中。它支持约 84 多种连接器，适用于数据仓库、数据库、仪表板服务、消息传递服务、管道服务等。

OpenMetadata 的关键特性

数据发现：使用多种策略（如关键词搜索、数据关联和高级查询）在一个地方查找和探索所有数据资产。您可以在表、主题、仪表板、管道和服务中进行搜索。

数据协作：与其他用户和团队就数据资产进行沟通、交流和合作。您可以接收事件通知、发送警报、添加公告、创建任务以及使用对话线程。

数据质量和探查器：通过无代码方式衡量和监控数据质量，以建立对数据的信任。您可以定义并运行数据质量测试，将它们分组为测试套件，并在交互式仪表板上查看结果。借助强大的协作功能，使数据质量成为组织内的共同责任。

数据治理：在整个组织范围内执行数据政策和标准。您可以定义数据域和数据产品，指定所有者和利益相关者，并使用标签和术语对数据资产进行分类。利用强大的自动化功能自动对您的数据进行分类。

数据洞察与 KPI：使用报告和平台分析来了解贵组织的数据状况。数据洞察提供了一个单一视图，展示了所有关键指标，以最准确地反映您的数据状态。您可以在 OpenMetadata 中定义关键绩效指标 (KPI)，并设定目标，以改善文档、所有权和分级管理。还可以针对 KPI 设置警报，以便在指定时间收到通知。

数据血缘：端到端地跟踪和可视化您的数据资产的来源和转换过程。您可以查看列级血缘关系，筛选查询，并使用无代码编辑器手动编辑血缘关系。

数据文档化：使用富文本、图片和链接记录您的数据资产和元数据实体。您还可以添加评论和注释，生成数据字典和数据目录。

数据可观测性：监控您的数据资产和管道的健康状况和性能。您可以查看诸如数据新鲜度、数据量、数据质量及数据延迟等指标。您也可以为任何异常或故障设置警报和通知。

数据安全：使用各种身份验证和授权机制保护您的数据和元数据。您可以与不同的身份提供商集成以实现单点登录，并定义角色和策略来进行访问控制。

Webhook：使用 Webhook 与外部应用程序和服务集成。您可以注册 URL 以接收元数据事件通知，并与 Slack、Microsoft Teams 和 Google Chat 集成。

连接器：使用连接器从各种源和工具摄取元数据。OpenMetadata 支持约 84 种以上的连接器，适用于数据仓库、数据库、仪表板服务、消息传递服务、管道服务等。

试用我们的沙盒

请访问 http://sandbox.open-metadata.org 查看并体验示例数据。

安装并运行 OpenMetadata

您只需几分钟即可启动并运行。有关安装说明，请参阅 OpenMetadata 文档：本地 Docker 部署快速入门。

文档与支持

我们随时为您提供帮助，让 OpenMetadata 更加完善！请查阅 OpenMetadata 文档，以全面了解 OpenMetadata 的各项功能。加入我们的 Slack 社区，与我们联系，无论是聊天、寻求帮助，还是讨论新功能需求。

贡献者

我们非常感谢所有贡献，无论大小！请查看我们的贡献指南以开始参与，并告诉我们我们能如何帮助您。

不想错过任何更新吗？给这个项目点个⭐ 🚀 吧！

衷心感谢所有支持我们的人！

星标用户

许可证

OpenMetadata 采用 Apache License, Version 2.0 协议发布。

OpenMetadata 快速上手指南

OpenMetadata 是一个统一的元数据平台，旨在通过中央元数据存储库、深入的列级血缘分析和无缝的团队协作，赋能数据发现、数据可观测性和数据治理。

环境准备

在开始之前，请确保您的开发环境满足以下要求：

• 操作系统: Linux, macOS, 或 Windows (需安装 WSL2 或 Docker Desktop)
• Docker: 版本 20.10+ (推荐使用 Docker Compose v2+)
• 内存: 至少分配 8GB RAM 给 Docker 容器（推荐 16GB 以获得更佳体验）
• 网络: 确保能够访问 Docker Hub 拉取镜像。
  • 国内加速建议: 如果拉取镜像缓慢，请配置 Docker 镜像加速器（如阿里云、腾讯云等提供的加速地址），或在 docker-compose.yaml 中替换为国内镜像源。

安装步骤

OpenMetadata 官方推荐使用 Docker Compose 进行本地快速部署。

1. 获取源码或配置文件

克隆官方仓库或直接下载 docker-compose.yml 文件。

git clone https://github.com/open-metadata/OpenMetadata.git
cd OpenMetadata/docker-compose

2. 启动服务

在项目目录下运行以下命令启动所有组件（包括 MySQL/Elasticsearch/OpenMetadata Server 等）：

docker compose up -d

注意: 首次启动可能需要几分钟时间下载镜像并初始化数据库。您可以使用 docker compose logs -f openmetadata 查看启动日志。

3. 验证安装

当所有容器状态变为 Up (healthy) 后，在浏览器中访问：

http://localhost:8585

默认登录账号：

• 用户名: admin
• 密码: admin

基本使用

以下是使用 OpenMetadata 的最简流程：

1. 连接数据源 (Ingestion)

OpenMetadata 支持 84+ 种连接器。以最常用的 MySQL 为例：

1. 登录后，点击顶部导航栏的 Connectors。
2. 选择 Databases -> MySQL。
3. 点击 Add Connection，填写基本信息：
   • Name: my_mysql_db
   • Host: 您的数据库地址 (本地测试可填 host.docker.internal 或局域网 IP)
   • Port: 3306
   • Username/Password: 数据库凭证
4. 保存并测试连接。

2. 运行元数据摄取

连接成功后，配置摄取任务以同步元数据：

1. 在连接器页面点击刚创建的连接，进入 Ingestion 标签页。
2. 点击 Create Ingestion Task。
3. 保持默认配置（全量同步），点击 Save & Run。
4. 等待任务状态变为 Success。

3. 探索与协作

现在您可以在平台上查看同步过来的数据资产：

• 数据发现: 在首页搜索框输入表名，即可查看表结构、描述和预览数据。
• 查看血缘: 点击任意表，选择 Lineage 标签，查看列级的数据来源与去向。
• 添加文档: 在表详情页点击 Description，使用富文本编辑器添加业务含义注释。
• 数据质量: 点击 Data Quality 标签，无需编写代码即可添加测试用例（如：非空检查、唯一性检查），并查看质量评分。

---

更多详细功能（如自定义标签、权限管理、高级血缘分析）请参考 官方文档。