Informatica的元数据和数据血缘关系

概述

梳理Informatic的元数据，理清ETL背后的数据加工流水线基础数据，为后续的数据地图建设打下基础。

元数据

宏定义

IS_VISIBLE          -- 是否可见，代表是否最新版本，1：是，0：不是
IS_VALID            -- 是否有效
LAST_SAVED          -- 最后更新日期
VERSION_NUMBER      -- 版本号
COMMENTS            -- 备注
OPB_TASK.TASK_TYPE  --对应OPB_OBJECT_TYPE里的OBJECT_TYPE_ID，代表任务的类型-- 常用：71：工作流，68：会话，58：命令

基本表

OPB_WIDGET           -- 组件表
OPB_WIDGET_ATTR

Informatica的元数据和数据血缘关系相关推荐

【DataHub】现代数据栈的元数据平台--如何将数据血缘关系写入DataHub
什么是Data lineage? 在大数据时代,系统的数据来源广泛,各种类型的数据快速产生且爆发性增长.从数据的产生.ETL .数据融合分析.数据应用直至最终消亡,在数据流转过程中数据之间的关联关系称 ...
2022数据血缘关系详解
在数据资产管理与数据治理领域,数据之间的血缘关系是一个绕不开的话题,数据血缘的完备程度也是评价一个企业数据中台成熟度的重要度量之一.到底什么是数据血缘,它对于数据工作者和数据使用者有哪些举足轻重的作用 ...
数据治理：数据血缘关系
数据血缘关系,从概念来讲很好理解,即数据的全生命周期中,数据与数据之间会形成多种多样的关系,这些关系与人类的血缘关系类似,所以被称作数据的血缘关系从技术角度来讲,数据a通过ETL处理生成了数据b,那 ...
大数据治理入门系列：数据血缘关系
血缘关系在人类社会中扮演着重要角色.大多数家庭是基于血缘关系形成的,而家庭作为社会的基本单元,对维系社会稳定发挥着重要关系.其实,数据之间也存在类似的血缘关系.数据从产生.加工.流转,一直到消亡,每个 ...
python pymongo+networkx 实现mongo数据血缘关系可视化
为什么80%的码农都做不了架构师?>>> 数据血缘通常是指数据产生的链路,其采集主要通过自动解析(存储过程.SQL.ETL过程等文件)结合人工收集的方式实现.本文不涉及数据血缘 ...
数据管理——数据血缘关系概述
摘要: 数据的血缘关系作为数据治理很重要的部分,需要引起格外的重视. 数据血缘关系的概念在人类社会中,血缘关系是指由婚姻或生育而产生的人际关系.如父母与子女的关系,兄弟姐妹关系,以及由此而派生的其他 ...
Mysql 数据血缘关系图_hive血缘关系之输入表与目标表的解析
接了一个新需求:需要做数据仓库的血缘关系.正所谓兵来将挡水来土掩,那咱就动手吧. 血缘关系是数据治理的一块,其实有专门的第三方数据治理框架,但考虑到目前的线上环境已经趋于稳定,引入新的框架无疑是劳民伤 ...
python实现之数据血缘关系,by networkx
最近在进行数据逆向分析,无业务无界面无数据库的情况下,想通过对存储过程中关于输出输入表的分析快速了解业务的核心问题,然后再对核心业务进行逆向回溯. 其实问题很简单,一个存储过程会有多个输入表和输出表, ...
数据血缘关系图工具_如何在论文中画出漂亮的插图？用它！丨城市数据派
[你投稿了没?10万+作者"平台好才是真的好",也许下一个就是你!](点击看详情),是由城市数据派主办的征稿活动,小派在此恭候派友们投稿分享![本期看点]LaTeX是一种非常好用的 ...
数据治理（一）自研血缘关系
数据治理(一)血缘关系一.概念数据血缘也称为数据血统或谱系,是来描述数据的来源和派生关系.数据来源是数据科学的关键,也是被公认为数据信任的核心的部分.说白了就是这个数据是怎么来的,经过了哪些过程或 ...

Informatica的元数据和数据血缘关系

概述

元数据

宏定义

基本表

Informatica的元数据和数据血缘关系相关推荐

最新文章

热门文章