【大数据】大数据基础知识科普--数据分层

大数据基础知识科普–数据分层

（ETL、ODS、DW、DWD、DWM、DWS、DIM）

零、数据加载层：ETL（Extract-Transform-Load）

一、数据操作层：ODS（Operational Data Store）

二、数据仓库层：DW（Data Warehouse）

数据明细层：DWD（Data Warehouse Detail）
数据中间层：DWM（Data WareHouse Middle）
数据服务层：DWS（Data WareHouse Servce）

三、数据应用层：ADS（Application）

四、维表层：（Dimension）

划分原则：

1，高内聚和低耦合

2，核心模型与扩展模型分离（扩展模型定制化需求）

3，公共处理逻辑下沉及单一

4，成本与性能平衡

5，数据可回滚（多次运行）

6，一致性（上下层，相同名称含义一致）

7，命名清晰，易理解

【大数据】大数据基础知识科普--数据分层相关推荐

大数据基础知识科普--数据分层（ETL、ODS、DW、DWD、DWM、DWS、DIM）
零.数据加载层:ETL(Extract-Transform-Load) 一.数据运营层:ODS(Operational Data Store) 二.数据仓库层:DW(Data Warehouse) 1 ...
大数据基础知识科普(2)
上一篇<大数据基础知识科普(1)>为大家讲解了关于服务器,存储磁盘以及RAID的内容.这一篇将沿着之前的脚步,为大家带来更多学习大数据必须要掌握的知识! 目录什么是集群? 什么是计算机网 ...
数据可视化的基础知识·翻译完成
原文:Fundamentals of Data Visualization 校验:飞龙协议:CC BY-NC-SA 4.0 欢迎任何人参与和完善:一个人可以走的很快,但是一群人却可以走的更远. Ap ...
python爬虫数据可视化_python 爬虫与数据可视化--python基础知识
摘要:偶然机会接触到python语音,感觉语法简单.功能强大,刚好朋友分享了一个网课<python 爬虫与数据可视化>,于是在工作与闲暇时间学习起来,并做如下课程笔记整理,整体大概分为4个 ...
【人工智能】大模型之编码器基础知识
[人工智能]大模型之编码器基础知识文章目录 [人工智能]大模型之编码器基础知识 1. 引言 2. 技术原理及概念 2.1 基本概念解释 2.2 技术原理介绍一.自注意力机制二.编码器的基本工作流 ...
【大数据】服务器硬盘基础知识
大数据_02[大数据基础知识] 01 什么是服务器 02 服务器类型 03 存储磁盘(硬盘) 服务器: 也称伺服器,是一种高性能计算机,提供计算服务的设备. 服务器的构成包括处理器.硬盘.内存.系统总 ...
大数据系列sql基础知识（史上最全，收藏起来）
大数据系列文章,从技术能力.业务基础.分析思维三大板块来呈现,你将收获: 1. 提升自信心,自如应对面试,顺利拿到实习岗位或offer: 2.掌握大数据的基础知识,与其他同事沟通无障碍: 3. 具备一 ...
大数据学习，基础知识、发展趋势详解
1.何为大数据? 大数据(big data),IT行业术语,是指无法在一定时间范围内用常规软件工具进行捕捉.管理和处理的数据集合,是需要新处理模式才能具有更强的决策力.洞察发现力和流程优化能力的海量. ...
高光谱遥感数据光谱特征的提取与应用---高光谱基础知识科普论文
论文地址高光谱遥感数据光谱特征的提取与应用杜培军遥感基础知识积累: 绝对温度大于0的物体在整个光谱轴上具有连续的光谱曲线高光谱可以有效的描述一些窄而重要的局部光谱特征,可以明显看到高光谱对于光 ...

【大数据】大数据基础知识科普--数据分层

大数据基础知识科普–数据分层

【大数据】大数据基础知识科普--数据分层相关推荐

最新文章

热门文章