AllData数据中台集成开源项目OpenMetaData,建设元数据与数据血缘平台!


AllData数据中台通过集成开源项目OpenMetaData构建元数据管理平台,元数据管理平台是通过全面的元数据采集、强大的存储与检索、深度的分析与治理、灵活的应用与共享、高扩展性与定制化以及直观的用户体验,为企业提供了一站式的元数据管理解决方案。

● 统一资产目录与智能检索

● 端到端可视化血缘与影响分析

● 场景化协作空间与知识沉淀

AllData 数据中台正式完成元数据管理平台从旧版到 OpenMetaData 1.12 版本的重磅升级!深度集成开源 OpenMetaData 1.12 核心能力,结合 AllData 全链路数据底座,打造企业级 AI 原生元数据中枢,实现数据资产统一纳管、全链路血缘、AI 智能治理、数据契约合规,彻底告别数据黑盒。

🔹项目地址:https://github.com/open-metadata/OpenMetadata
🔹文档地址:https://docs.open-metadata.org/latest

基于 OpenMetaData 1.12版本深度定制,AllData 元数据管理平台从 "基础元数据采集" 升级为 "AI 驱动、全链路、可治理、可运营" 的企业数据中枢,无缝对接 AllData数据中台的全链路能力(MySQL→Doris 同步、StreamPark / 海豚加工、实时数仓、指标体系、BI可视化、机器学习、大模型应用)。


步骤一: 添加数据源

【操作说明】

1、打开元数据管理平台

进入设置,点击服务,选择数据源后添加【添加新服务】


2、选择数据服务类型和填写名称填写连接详情(由技术同事提供信息)

注意:在连接信息填写完后需要先校验数据源的是否连接成功,避免后续操作因连接失败导致拾取异常。


(除了从数据源拾取外还可以选择多种元数据拾取方式,如工作流、仪表盘等)

3、新建完成后系统会自动执行Doris数据源元数据的拾取


4、拾取完成后,在数据资产中可以找到新增的元数据拾取详情。

步骤二:查看元数据详情 - 深度理解数据的"血缘脉络"

【操作说明】

方法1:

在数据资产左边数据资产列表中展开对应的数据源查找数据表,然后点击数据表进入详细查看数据表的血缘关系。

方法2:

在血缘功能中可以具体需要查找的数据表查看该表的血缘关系。

点击数据表在右边展开数据表详情,选择【血缘关系】可以查看该表的上下游关系。

步骤三:元数据工作区查看 - 您的个人数据"控制台"

【操作说明】

1、进入域

打开需要管理的工作区,这里可以选择添加成功拾取的数据进工作区中管理。初次使用如果没有数据域可以点击【添加域】

新建数据域时候建议填写数据域所有者,方便后续区分部门和业务数据管理。

2、进入数据域详情

可添加资产/子域/数据产品分类,方便从全部数据中划分,以便其他部分同事直接了当查看到当前数据属于谁在管理,管理的是什么类型数据。

选择子域,给工作区划分详细的工作子域,可以把工作区全部数据划分到各个子域里进行详细管理。


1、元数据管理平台主页

集中展示数据资产、数据域、核心功能入口与常用操作导航。

2、数据探索

数据探索页面,可查看数据库拾取详情,快速理解数据结构。

进入元数据详情页面,查看数据表的字段、活动信息流、样本数据、数据观测和血缘关系等详细信息。其中血缘关系可以清晰显示该数据表在数据血缘中位置以及对上下游的数据影响和分析。

2.1 查看元数据数据表的血缘关系

可以查看数据表的字段信息以及该数据表的上下游信息以及影响,加强数据优化分析。

2.2 查看数据表的详细信息

2.3 查看数据表的血缘关系

2.4 查看该数据表对上下游的影响

3、血缘关系

数据血缘可视化,支持溯源与影响分析。

3.1 查看数据库详细信息

4、数据观测

4.1 数据质控

数据健康度监控,直观呈现数据资产覆盖率、质量评分与异常统计。

4.2 事件管理

数据事件管理,支持数据异常受理、处理跟踪与严重性分级。

4.3 提醒

数据质量异常提醒,及时推送数据问题,保障数据可靠性。

4.4 测试库

5、数据洞察

5.1 数据资产

一站式统计全量数据资产的规模、完整度与健康度,直观呈现数据资产的整体治理状态。

5.2 应用分析

可视化展示数据资产的访问热度、活跃用户与使用趋势,助力掌握数据资产的实际应用情况。

5.3 KPls

支持自定义添加数据资产健康度相关的关键绩效指标,实现数据治理效果的量化追踪与评估。

6、数据域

6.1 数据域

数据域管理页面,按业务域分类组织数据资产,实现数据权责清晰划分。

6.2 查看数据域详情

6.3 数据产品

数据产品管理,支持创建与维护业务化数据产品,统一对外提供数据服务。

7、数据治理

7.1 本体浏览器

7.2 分类

7.3 指标

核心指标管理,统一维护业务指标口径、定义与关联数据资产。

7.4 列批量操作

字段批量处理,支持批量修改、检测与规则应用,提升治理效率。

8、设置

AllData 数据中台从 "数据整合者" 升级为元数据驱动的智能数据中枢------ 集成 OpenMetaData 1.12版本,真正打通数据治理、数据开发、数据应用、AI 落地的全链路。

不管你是要解决数据孤岛、血缘混乱、质量不可控,还是加速大模型落地、满足合规审计,AllData 数据中台-元数据管理平台都能一站式搞定。

相关推荐
解救女汉子2 小时前
Python 中正确声明、重新赋值并安全使用 None 初始化变量的完整指南
jvm·数据库·python
wsdswzj2 小时前
数据库基础安全
数据库·安全
a9511416422 小时前
CSS 悬停箭头闪烁偏移问题的根源与稳定解决方案
jvm·数据库·python
Shorasul2 小时前
安装宝塔面板提示端口被占用_查找并终止占用进程
jvm·数据库·python
oradh2 小时前
Oracle数据库索引组织表概述
数据库·oracle·oracle基础·oracle索引组织表·索引组织表·iot表
2401_871696522 小时前
macOS 中使用 launchd 每分钟执行一次 PHP 脚本的完整配置指南
jvm·数据库·python
吕源林2 小时前
MongoDB副本集在网络闪断后如何快速恢复_重连机制与心跳超时(electionTimeoutMillis)
jvm·数据库·python
不会写DN2 小时前
如何排查 MySQL 慢查询
数据库·mysql·adb
emovie2 小时前
Python函数基础
linux·数据库·python