6-dw_元数据管理

元数据是帮助用户和技术人员对数据仓库里的数据理解，可以分为技术元数据和业务元数据。

技术元数据包含：

1：模型定义

定义数据仓库里各各种模型的功能，包括数据的口径，各个字段的含义，使用范围，出数时间和频率。

2：血缘定义

模型里的源头数据来源，ETL同步方式，时间，频率，各个系统和表的上下游关系。

3：ODS定义

模型里的源头表的源系统名称，技术负责人，源头表数据逻辑，数据更新方式。

4：权限管理

管理数据仓库平台上的业务人员和技术人员的数据权限，可以分为库的权限，表的权限，模型数据权限。制定相关流程，方便平台用户申请使用和业务owner审批。

业务元数据包含

主要是提供用户在使用数据时能理解数据的含义，在碰到疑问时，可以找到相关业务部门了解数据的口径和使用场景，让数据有业务部门的owner，有了业务部门背书，此数据就是公司统一出来的口径，官方的说明。

更多技术文章请关注公众号(长按后点识别图中二维码):

6-dw_元数据管理相关推荐

图形文件元数据管理工具exiv2
图形文件元数据管理工具exiv2 图形文件通常都包含多种元数据,如Exif.IPTC.XMP.这些信息往往是渗透人员收集的目标.为了便于管理这些信息,Kali Linux内置了专用工具exiv2.该工 ...
qstring 属于元数据类型吗_数据仓库的“元数据管理”
作者 | 李谦恒数据工程师.逻辑重于代码,高效胜过勤奋.崇尚life work balance. 引言元数据管理是企业数据治理的基础,是数据仓库的提升:作为一名数据人,首要任务就是理解元数据管理. ...
元数据的概念Oracle,元数据管理
基本概念元数据描述的是数据的背景.内容.数据结构及其生命周期管理.简而言之,元数据是"数据的背景".通俗可以理解为数据模型就是元数据. 元数据管理全景包括三部分内容: 元数据模型 ...
NAMENODE工作机制，元数据管理(元数据存储机制、元数据手动查看)、元数据的checkpoint、元数据目录说明（来自学习资料）
NAMENODE工作机制学习目标:理解namenode的工作机制尤其是元数据管理机制,以增强对HDFS工作原理的理解,及培养hadoop集群运营中"性能调优"."nam ...
mysql 数据仓库元数据_数据仓库中的元数据管理
1. 引言元数据是数据仓库中的一个重要组成部分,元数据管理系统则是构建,管理,维护和使用数据仓库系统的核心部件. 2. 基础知识 2.1 元数据的定义元数据是指来自企业内外的所有物理数据和知识,包 ...
深度 | 面向云原生数据湖的元数据管理技术解析
简介: 作者:沐远.明惠背景数据湖当前在国内外是比较热的方案,MarketsandMarkets市场调研显示预计数据湖市场规模在2024年会从2019年的79亿美金增长到201亿美金.一些企业已经 ...
基于TableStore的海量电商订单元数据管理
一.背景订单系统存在于各行各业,如电商订单.银行流水.运营商话费账单等,是一个非常广泛.通用的系统.对于这类系统,在过去十几年发展中已经形成了经典的做法.但是随着互联网的发展,以及各企业对数据的重视 ...
数据服务基础能力之元数据管理
一.业务背景 1.应用场景在多变的数据服务场景中,应用中常见如下的业务需求,通过对多种数据结构的灵活组合,快速实现业务模型构建,整体示意图如下: 像常用的画图工具,左边提供基础图形库,中间是画布,右 ...
利用元数据管理数据质量
2019独角兽企业重金招聘Python工程师标准>>> 什么是元数据任何文件系统中的数据分为数据和元数据.数据是指普通文件中的实际数据,而元数据指用来描述一个文件的特 ...
【Flink】Flink 源码阅读笔记（16）- Flink SQL 的元数据管理
1.概述转载:Flink 源码阅读笔记(16)- Flink SQL 的元数据管理 Flink 源码阅读笔记(17)- Flink SQL 中的时间属

6-dw_元数据管理

6-dw_元数据管理相关推荐

最新文章

热门文章