数据仓库分层作用及作用
数据仓库解决什么问题
- 1、将各种数据源整合到一起统一数据中心，解决数据壁垒。 <仓库的集成性特点>
- 2、脏数据清洗，简化业务复杂结构数据。
- 3、规范表、字段名称，统一字段数据格式，完善注释内容。
- 4、保留历史变更数据，提供对细节变化分析支持。
- 5、生产适合OLAP的大宽表，方便用户多维度快速分析。 <仓库的主题性特点>
- 6、数据质量的保证和指标口径的一致性
分层设计的优势
- 1、避免烟囱式开发：重复建设、消耗集群储存空间、增大集群计算压力
- 2、保证数据的质量、统一指标口径
- 3、OLAP效率高（使用大宽表，避免关联计算）
- 4、底层业务数据结构变动 和 上层数据需求改动 可以减少对模型的冲击
为什么要对数据仓库分层：
1用空间换时间，通过大量的预处理来提升应用系统的用户体验（效率），因此数据仓库会存在大量冗余的数据；
2如果不分层的话，如果源业务系统的业务规则发生变化将会影响整个数据清洗过程，工作量巨大
4.数据血缘跟踪，最终开发是业务表，当业务表出现问题时，它可能来自多个业务源表，方便问题定位
数据仓库分层作用及作用相关推荐
- 数据仓库dw层_数据仓库分层之辩
前言,这篇文章最早见过是在2009年的某一个论坛上并保存了下来, 今天发出来读了一遍,不禁思考本质上这些年我们到底进步了什么? 数据仓库的分层可以算是数据仓库架构的子话题.在前段时间参与的一次讨论中, ...
- oracle 数据立方_大数据之数据仓库分层
大数据之数据仓库分层 1. 什么是数据分层? 2. 数据分层的好处 一种通用的数据分层设计 3. 举例 4. 各层会用到的计算引擎和存储系统 5. 分层实现 6.数据分层的一些概念说明 7.大数据相关 ...
- 数据仓库分层和元数据管理
数仓的分层架构 按照数据流入流出的过程,数据仓库架构可分为三层--源数据.数据仓库.数据应用. 数据仓库的数据来源于不同的源数据,并提供多样的数据应用,数据自下而上流入数据仓库后向上层开放应用,而数据 ...
- 为什么要对数据仓库分层？
存储在ODS层的数据显然是不能直接使用的,要经过层层处理:如果一步到位计算出各类指标将来业务变化的时候又要重头开始开发一遍,因此数据仓库分层是很有必要的. 数据仓库分层主要有以下几点好处: 1.把复杂 ...
- 一种通用的数据仓库分层方法
0x00 概述 数据分层是数据仓库设计中十分重要的一个环节,优秀的分层设计能够让整个数据体系更易理解和使用.而目前网络中大部分可以被检索到相关文章只是简单地提及数据分层的设计,或缺少明确而详细的说明, ...
- 数据仓库物理分层_大数据之数据仓库分层
大数据之数据仓库分层 什么是数据分层? 数据分层的好处 一种通用的数据分层设计 举例 各层会用到的计算引擎和存储系统 分层实现 数据分层的一些概念说明 7.大数据相关基础概念 1. 什么是数据分层? ...
- 数据仓库——分层原理
目录 一.什么是数据仓库 二.数仓建模的意义,为什么要对数据仓库分层? 三.ETL 四.技术架构 五.数仓分层架构 数仓逻辑分层 1.数据引入层(ODS,Operational Data Store, ...
- 数据仓库分层类型-具体实例
数据仓库分层类型 架构发明者 建模方式[5] 著作 数据仓库特点 架构图 Kimball Ralph Kimbal 维度建模 The Data Warehouse Toolkit 自底向上 Inmon ...
- 深度 | 数据仓库分层存储技术揭秘
简介: 作者: 沄浩.士远 一 .背景 据IDC发布的<数据时代2025>报告显示,全球每年产生的数据将从2018年的33ZB增长到2025年的175ZB,平均每天约产生491EB数据.随 ...
最新文章
- rpm安装mysql图文
- xunsearch php,GitHub - ziyueit/xunsearch: 迅搜的一个PHP封装类
- TWebBrowser禁止弹出Alert对话框
- 人行二代征信报告模版_人行首度明确，替代数据纳入征信管理！美化信用报告，难了...
- nginx搭建静态服务器(127.0.0.1/localhost访问)
- Java验证（javafx）
- Ext js tabpanel的使用
- 【Java】while(scanner.hasNext()){}引发“死循环”的处理方法
- input js 离开事件_JS购物车的实现
- 记录最近的几个bug
- Python语音识别终极指北，没错，就是指北！
- 电子负载使用恒电流和恒电阻负载模式的方法
- 绕过iframe busting
- xtrabackup备份恢复MySQL数据库
- 币乎作者@骄阳在天 | Conflux的崛起之路
- 自我学习-逆向解析BOSS直聘cookie字段 _zp_stoken__加密
- 使用hardhat 开发以太坊智能合约-验证合约
- docker配置daemon
- 配置eyeOS系统--5--导入eyeOS源代码安装并安装成功
- 少儿编程教育政策大盘点！