数据中台技术架构

  • 说明
  • 金融企业数据中台架构
  • 阿里中台技术栈

说明

中台的概念热了将近两年,有人认为中台是趋势,有人认为中台是炒作。

笔者(个人微信号:comjavaba)认为中台的本质是能力共享,就像任何程序员都了解代码需要复用一样。复用的代码通过服务、jar、类等方式在项目中复用,在中台实践过程中,复用的能力需要组织机构赋能,需要从组织层面认可并推广中台能力,需要有一套标准、方法论引导企业内各个组织沉淀能力、共享能力、运营能力。

由此可见中台的成败与组织结构息息相关,笔者(个人微信号:comjavaba)文章中不讨论组织结构,主要讨论数据中台技术架构,并对数据中台落地的能力进行验证。

金融企业数据中台架构


最低下蓝色是EDW、Hadoop、DB2、Oracle等是已有的各类系统的数据源。
通过CDC、批量导入、API集成等方式把数据汇聚到中台。
在中台里面进行资料的建模和分类,比如按照客户、账户、交易等纬度。
然后以API方式交付到他们的各个业务中心。
最后做成各种业务开发,如金融商城,手机App,社交系统等。
在没有数据中台的时候。是各个业务中心,直接连到后台的核心系统。因此而产生两个问题:
一是,当数据量上来时,如做促销活动,核心系统DB2,Oracle等跟不上。
二是,当有业务中心有新的需求产生,对数据模型要改变的时候,核心系统很难支撑。
当有了可以灵活组织新的业务模型的数据中台,才可能真正快速地响应前端的业务需要。

在右上角,可以看到数据中台依旧可以支持一些分析的场景。

当然,这样的数据中台必须具备数据的治理能力,如质量,编目,建模等等。

所以数据中台的主要价值在于,数据的协同效率、复用效率和交付速度。原各个系统中的数据不再各自为政,而协同到一起效率提高很多。同样,一份数据可以给多个业务场景使用,而不再需要ETL到不同的系统,还要去维护它们的一致性,去掉重复,或防止遗失。最大的价值更在于,加快数据的交付速度。

阿里中台技术栈


技术栈可以总结成为以下内容:
本专栏会基于阿里与逐步验证,敬请关注。

数据中台总体技术架构相关推荐

  1. 金融大数据平台总体技术要求

    本文件规定了面向金融业的大数据平台总体技术要求的框架结构.功能技术要求.非功能技术要求以及接口技术要求. 关注公众号:[互联互通社区],回复[DATA065]获取全部报告内容. 精彩推荐 关注互联互通 ...

  2. 业务中台、数据中台、技术中台到底是什么?

    业务中台.数据中台.技术中台到底是什么? 00 中台能力总体框架 01 业务中台 02 数据中台 数据应用技术发展迅猛 数据架构更加灵活 数据来源更加多元化,数据格式更加多样化 数据智能化应用将会越来 ...

  3. 中台:业务中台、数据中台、技术中台

    什么是中台 企业级能力复用平台 为什么需要中台 避免重复造轮子 许多业务需求或功能需求高度类似.通用化程度很高,但是由于没有专门的团队负责规划和开发,大量的系统重复开发.重复建设,导致复用性低.效率低 ...

  4. 体系化认识微服务之三:微服务总体技术架构

    体系化认识微服务之三:微服务总体技术架构 这篇文章,介绍下微服务的总体架构体系,微服务拆分后涉及的服务众多,我们从一个全局的视角看下微服务架构涉及哪些方面.从上层到下层依次分为:接入层.网关.业务服务 ...

  5. 架构设计工作笔记003---中台概念_业务中台_数据中台_技术中台

    1.什么是中台,到底要解决什么问题? 这个最早由阿里在2015年提出的"大中台,小前台"战略中延伸出来的概念,灵感来源于一家芬兰的小公司Supercell--一家仅有300名员工, ...

  6. 什么是业务中台、数据中台、技术中台?

    前言 2015年阿里巴巴提出"大中台,小前台"的中台战略,通过实施中台战略找到能够快速应对外界变化,整合阿里各种基础能力,高效支撑业务创新的机制.阿里巴巴中台战略最早从业务中台和数 ...

  7. 终于有人把业务中台、数据中台、技术中台都讲明白了

    导读:2015年阿里巴巴提出"大中台,小前台"的中台战略,通过实施中台战略找到能够快速应对外界变化,整合阿里各种基础能力,高效支撑业务创新的机制.阿里巴巴中台战略最早从业务中台和数 ...

  8. 什么是业务中台、数据中台、技术中台?这回终于解释清楚了

    前言 2015年阿里巴巴提出"大中台,小前台"的中台战略,通过实施中台战略找到能够快速应对外界变化,整合阿里各种基础能力,高效支撑业务创新的机制.阿里巴巴中台战略最早从业务中台和数 ...

  9. 构建数据中台的组织架构

    一.中台是一种企业架构 1.TOGAF企业架构标准 TOGAF是一套企业架构标准.企业架构是指整个公司或企业的软件和其他技术的整体观点和方法.企业架构又细分为业务架构.应用架构.数据架构.技术架构几个 ...

最新文章

  1. OpenCv Mat -类 成员函数
  2. java bufferedreader mark_BufferedReader之mark与reset初探
  3. 用户名 不在 sudoers文件中,此事将被报告
  4. 个人简历小程序前端源码
  5. 编辑器eslint格式_VScode格式化代码,开启ESlint代码检测方法,eslint代码配置
  6. scp命令报错-bash: scp: command not found
  7. 上传文件到某文件夹时,提示...路径访问被拒绝
  8. 电脑控制Android设备的软件——Total Control
  9. 基于Spring Boot 的统一错误处理
  10. PASCAL-VOC2012 数据集介绍 及 制作同格式数据
  11. 小D课堂 - 零基础入门SpringBoot2.X到实战_第2节 SpringBoot接口Http协议开发实战_8、SpringBoot基础HTTP接口GET请求实战...
  12. html em vw,rem em 与vh vw的用法简单介绍
  13. python基础五之for和while
  14. 快速搭建 Node.js 开发环境以及加速 npm
  15. 《动手学深度学习》(PyTorch版)代码注释 - 50 【Semantic_segmentation】
  16. contour()函数的理解
  17. 【收集】键盘钢琴 和弦琴谱 (带HTML版开发流程)
  18. 文档格式转换工具对比
  19. go 及GoLand 环境安装
  20. 游戏服务器框架概括分析

热门文章

  1. AndroidO Notification横幅通知(HangUp Notification)
  2. linux设置开机自启服务,linux设置服务开机自启动的三种方式
  3. 【理科】2020年高考数学(第三章导数)考点与题型全归纳
  4. 2021亚太杯A|B|C题全网最全解题思路+数据分享
  5. 剑麻的全球与中国市场2022-2028年:技术、参与者、趋势、市场规模及占有率研究报告
  6. PTA 7-8 计算并联电阻的阻值
  7. 编写高质量的代码—从命名入手(命名…
  8. Netty框架之责任链模式及其应用
  9. linux中vim保存快捷键设置,Linux中vim操作快捷键非常简洁
  10. 怎么样写好头部姿态的研究背景?