数据库之大数据分层理论:

一、对业务体系的系统数据进行采集。

二、数据的临时存储层:ODS

专门保存从业务系统里面收集和采集到的原始信息。在这里不会对数据的有效性进行筛选,只会增加数据的采集和抽取时间以及数据的来源字段。

细分:
1、数据贴源层:ODM

2、标准数据层:SDM

三、历史存储层:HDS

四、数据仓库层:DW

1、数据明细层:DWD
2、基础数据层:FDM

五、数据集市层:DM

1、聚合计算层:ADM

2、报表展示层:MDM/DA/APP

数据库之大数据分层理论 2021-11-14相关推荐

  1. 分析型数据库受大数据市场追捧

    文章讲的是分析型数据库受大数据市场追捧,近期,大数据领域有一些值得关注的动向.首先,EMC和VMware正式公布成立新公司Pivotal.其次,Actian公司宣布收购大规模并行处理(MPP)分析数据 ...

  2. 《实战数据库营销——大数据时代轻松赚钱之道》新书试读+文摘

    数据库营销中数据库是工具,营销是核心 简单来讲,数据库营销就是企业通过搜集和整理消费者的信息,预测消费者有多大可能去购买某种产品,同时利用这些信息给产品以精确定位,有针对性地制定营销策略以达到说服消费 ...

  3. 【技术分享】李文哲:基于图数据库的大数据应用

    本文整理自DTCC2016主题演讲内容,录音整理及文字编辑IT168@田晓旭@老鱼.如需转载,请先联系本公众号获取授权! 演讲嘉宾 李文哲 普惠金融首席数据科学家 普惠金融(puhuifinance. ...

  4. 对象代理数据库:大数据时代下的应需之作

    [IT168 技术]本文根据彭智勇老师于第九届中国数据库技术大会(DTCC 2018)的现场演讲<支持海量复杂数据管理的对象代理数据库系统TOTEM>内容整理而成. 讲师介绍: 彭智勇 武 ...

  5. hbase中为何不能向表中插入数据_大数据HBase理论实操面试题

    1.HBase的特点是什么? 1)大:一个表可以有数十亿行,上百万列: 2)无模式:每行都有一个可排序的主键和任意多的列,列可以根据需要动态的增加,同一张表中不同的行可以有截然不同的列: 3)面向列: ...

  6. 脚踏实地,自强不息——清华大学大数据软件团队2021年度先进个人风采展示

    清华大学大数据软件团队为充分调动员工积极性和创造性,提升团队综合水平和综合竞争力,组织开展了2021年度"优秀员工"评选工作,团队从组织管理能力.工作完成效力.工作创新能力等方面进 ...

  7. 天翼云从业认证(1.3)了解数据库的概念、SQL、关系型数据库、大数据和 NoSQL 数据库

    数据库的概念 SQL 简单举例 create \ insert \ update \ delete\select WHERE\BETWEEN\IS NULL\LIKE avg\count\max gr ...

  8. MYSQL数据库导入大数据量sql文件失败的解决方案

    最快办法:执行下方语句,单次有效. SET GLOBAL max_allowed_packet=30*1024*1024 如果想彻底更改,在安装mysql的文件夹下找到my.ini 文件,在文件末尾添 ...

  9. 浦东将建首个老年人健康数据库 通过大数据预防控制疾病

    随着社会老龄化的加速,老年人的医疗问题日趋成为社会热点,记者日前了解到,浦东张江干细胞基地正在筹建中国第一个老年人健康数据库,将持续数十年跟踪病人,通过大数据的方式达到疾病预防和控制. 记者了解,张江 ...

最新文章

  1. JFreeChart_API
  2. 函数 —— strtok() 例如:Fred male 25,John male 62,Anna female 16两层循环
  3. 工商企业管理对计算机水平的要求,对工商企业管理的分析
  4. LTS计算机,Pine64单板计算机(SBC)和模块入门
  5. OS- -调度(二)
  6. eq linux_《Linux设备驱动程序》(十二)——时间操作(一)
  7. 数据算法之二叉树删除(BinaryTreeL Remove)的Java实现
  8. JSR 168 and Portlet
  9. 3.调整web框架行为 3.1配置路径匹配形式
  10. pp什么叫php的事务,ThinkPHP5.0框架事务处理操作简单示例
  11. QQ、MSN、淘包旺旺、Skype临时对话的html链接代码
  12. PASCAL VOC 2007数据集,百度云下载
  13. 科技巨头扎堆打造的“AI搭配师”,能否拯救疫情下的服装业?
  14. 怎么防治计算机病毒,计算机病毒怎么防治
  15. java面向对象猜拳游戏_面向对象猜拳游戏
  16. Photoshop抠图(运用背景橡皮擦工具进行抠图)
  17. “阿里云OS”是如何失控的
  18. 供水为民振兴乡村 国稻种芯-慈利县:抗旱保收盛德村在行动
  19. 大数据干货,1个案例讲清楚精准营销!
  20. unity塔防游戏怪物转向_玩一玩这款塔防游戏?

热门文章

  1. 拓扑排序[TopologicalSort]
  2. java 回合制_java – 用于j2me“回合制”游戏的Gameloop
  3. google guava的基础部分Demo实例(注释详尽)
  4. 服装销售系统java+sql+servlet
  5. 小爱同学智能音箱怎么打开灯_太阳下​​山时如何打开智能灯
  6. 声网王浩宇:RTE 场景下的 Serverless 架构挑战【RTE 2022】
  7. poj2983poj1364
  8. 洛谷—— P2983 [USACO10FEB]购买巧克力Chocolate Buying
  9. 机器学习(五)线性模型详解
  10. 金仓数据库 KingbaseES PL/SQL 过程语言参考手册(19. D PL/SQL保留字和关键字)