作者 | 宋慧

出品 | CSDN云计算(ID:CSDNcloud)

关于数据中台的问题,CSDN 在一年前采访了 Gartner 研究总监孙鑫,采访中,孙鑫提到 数据分析将是改变“游戏规则”的技术、企业的中台需要可组装的架构 。经过一年的发展,Gartner 再次分享了数据中台的最新进展与其分析观点。

Gartner研究总监孙鑫

从 2019 年起,Gartner 开始关注与研究数据中台,到 2020 年首次发布中台市场的“技术成熟度曲线”,Gartner 认为数据中台在“技术成熟度曲线”的“炒作顶峰”。孙鑫看到,中国有众多的数据库、商业智能 BI、数据科学的厂商,但现在的数据仍是孤岛式,企业已有的数据投入,并没有产出理想的业务价值。而中国企业对数据整合的需求非常旺盛,做数据整合的厂商并不多。因此孙鑫提到,数据整合将成为数据中台最核心的解决方案,也是用户真实所需。

数据中台在技术成熟度曲线的炒作顶峰

数据与业务鸿沟下,Gartner 以分析模型分解数据中台

针对数据和业务问题存在价值鸿沟的痛点,孙鑫认为首先在数据中台的团队中,除 IT 人员,也需要业务端的人员加入,一同完成数据分析,确保企业级数据一致性,共享最佳实践。

另外,在以往数据中台的建设中,通常存在的问题是业务侧团队不了解数据在哪里,用户需要花费时间去寻找数据而不是分析数据,数据资产的定义并未在业务侧团队之间共享。Gartner 认为,需要针对这些问题,中台应实现自动发现元数据,通过元数据智能搜索,找到数据源,让各系统中的数据可以直观传递到用户(业务侧使用者)手中。另外,孙鑫提到,数据资产不应以 IT 团队维护单个项目的形式运行,而应由业务侧团队参与(或众筹的形式),去演进优化与共享数据资产。

Gartner 也建立了一个重要的分析模型——数据和分析基础设施模型DAIM,去分解数据中台建设中遇到的各类问题。模型将各类数据投入分为IT与业务两个维度,将数据分为“已知的数据”和“未知的数据”,业务问题分为“已知的问题”和“未知的问题”,依据模型对中台所需的基础产品进行剖析。

重要模型:数据和分析基础设施模型 DAIM

数据中台组件均可归类在模型中

数据中台的核心产品化组件,都可以归类到模型的四个象限中,其中,孙鑫提到,在中国市场中,数据虚拟化产品目前仍几乎是空白。

数据中台建设重点:数据编织、数据治理、平衡采集与连接

针对数据中台建设,Gartner 给出了三个重点关注的方向。首先是 Gartner 早先提出的数据编织。现在企业已有交易型数据库、数据仓库、数据湖、云端数据存储等众多数据源,Gartner 提出了数据编织,为企业“织”起一张虚拟的网,对企业所有数据虚拟化,在场景中利用知识图谱处理元数据。孙鑫提到,数据编织不是将数据收集于一处,而是对数据进行更优关联,以服务不同用户,帮助用户在合适的时间获得合适大小的数据。同时数据编织也涵盖数据消费的信息,将之定义为企业元数据。

Gartner 提出数据编织 Data Fabric

第二,数据中台应涵盖数据治理。随着《数据安全法》、《个人信息保护法》的颁布和实施,以及“上云”的安全性问题,Gartner 认为数据分析平台应处于企业数字化平台的中心位置,所以也应涵盖治理相关的工作。数据治理不仅由软性标准或治理委员会等执行,之后也将通过技术手段完成政策设置、执法和执行,如数据中台可对数据质量、安全性、隐私、道德的掌控,对数据的定义,以及数据留存条约、条款的制定等。

第三,数据收集与连接实现平衡。数据管理不应只注重数据的收集,导致数据分析和生产价值的延后。采用数据虚拟化,数据中台可依据元数据(数据消费行为)判断应采集还是连接,以及资产化的处理。

对于中台演进的技术,孙鑫也总结其中一些重要的方向。Gartner 看到,现在的数据语义层工具已经在用知识图谱对数据完成关联和建模,从用户自助式分析转变为组装式分析,以业务的视角做业务价值导向的分析,企业应该构建起可以复用的数据分析能力以让用户可以在价值流(Value Stream)上组装分析型应用。

数据分析应用的未来

数据中台未来技术方向:DataOps

未来,孙鑫认为,组装式的数据中台将发展成为“组装式的能力创新平台”,并将塑造数据分析应用的未来。已有的报表平台、分析工作站、自助式分析平台或数据科学平台等,将走向容器化和微服务化。另外,数据分析也将借助 DevOps 加速数据和分析应用上线,Gartner 称其为 DataOps,最终让数据管理与分析的用户从测试更快转入数据生产应用。

往期推荐

5G 落地进入爆发期,是时候让毫米波登场了

Github王炸功能!Copilot替代打工人编程?

边缘应用增长800%,听听Akamai边缘部署的经验

Mendix 发布全球低代码报告

点分享

点收藏

点点赞

点在看

对数据“投入”却没有“产出”?听听 Gartner 的最新分析相关推荐

  1. 全球183个国家经济变量面板数据(收入、产出、投入和生产力等) 1950-2019年

    数据集名称:全球183个国家经济变量面板数据(收入.产出.投入和生产力等) 时间范围:1950-2019年(部分国家1950-1969数据缺失) 数据来源:PWT10.0版(更新于2021年2月18日 ...

  2. dmp标签_京东DMP人群标签有哪些注意事项,如何低投入获得高产出。

    大家好呀我是小雯,电商行业90后玩家,每天分享电商知识~ DMP人群标签便于精准推广,商家自己可以设置,平台也会分析用户消费行为,组合出具有相同数据特征的人群. 打开京准通后台找到DMP,这些标签就是 ...

  3. 神策数据罗彦博:如何正确使用漏斗分析提升转化?

    本文根据神策数据数字营销经理罗彦博<如何正确使用漏斗分析提升转化>直播整理而成.本文主要内容如下: 通过漏斗分析做 SEM 实时调整 推广落地页的转化路径设计 APP 推广中的数据拦截问题 ...

  4. 基于大数据背景下的全国各大城市地铁客流量分析

    目录 第一章 项目介绍 第二章 项目组织与项目计划 第三章 数据采集 3.1 数据采集目标 3.2 数据采集工具与方法 3.3 数据采集流程 3.4 数据采集保存 3.5 本章小结 第四章 数据预处理 ...

  5. 权威认可|思迈特软件入选Gartner《中国分析平台市场指南》

    近日,国际权威研究分析机构Gartner发布2022年<Market Guide for Analytics Platforms, China>(<中国分析平台市场指南>,以下 ...

  6. 2016年大数据Spark“蘑菇云”行动代码学习之AdClickedStreamingStats模块分析

    2016年大数据Spark"蘑菇云"行动代码学习之AdClickedStreamingStats模块分析     系统背景:用户使用终端设备(IPAD.手机.浏览器)等登录系统,系 ...

  7. 时间序列数据和MongoDB:第三部分 - 查询,分析和呈现时间序列数据

    作者:Robert Walters 译者:刘东华 (Martin Liu) 在 时间序列数据和MongoDB中:第一部分 - 简介 我们回顾了您需要了解的关键问题,以了解数据库的查询访问模式.在 时间 ...

  8. Linux内核网络数据包发送(三)——IP协议层分析

    Linux内核网络数据包发送(三)--IP协议层分析 1. 前言 2. `ip_send_skb` 3. `ip_local_out` and `__ip_local_out` 3.1 netfilt ...

  9. Linux内核网络数据包发送(二)——UDP协议层分析

    Linux内核网络数据包发送(二)--UDP协议层分析 1. 前言 2. `udp_sendmsg` 2.1 UDP corking 2.2 获取目的 IP 地址和端口 2.3 Socket 发送:b ...

最新文章

  1. linux内存实际占用分析
  2. linux 更改 引导分区,Linux系统引导过程及引导修复
  3. arcengine根据属性高亮显示图像_新品发布艺卓推出300万像素彩色医疗显示器RX360...
  4. 洛谷P3845-球赛【离散化,贪心】
  5. ssm使用全注解实现增删改查案例——web.xml
  6. 【BZOJ4262】Sum 单调栈+线段树
  7. oracle job定时报错,Oracle Job定时任务的使用详解
  8. Python语法学习第三天--元组
  9. efsframe java_EfsFrame(java开发框架)
  10. 1.4 自定义框架
  11. CCNP-冗余链路中的广播风暴、多帧复制、地址表的不稳定
  12. Java运行准备JDR JRE JVM知识和环境变量的作用
  13. android设置布局背景为空,android 设置背景为空(透明)
  14. 2014武汉理工计算机专业李帅,武汉理工大学信息工程学院2014考研复试名单公示...
  15. 使用cloud studio建立免费的云主机
  16. 被动信息收集:信息收集内容、信息用途、信息收集DNS、DNS信息收集-NSLOOKUP
  17. 印象笔记,幕布, Effie 哪个适合 up 主?
  18. 常见数据库对象和数据库存储
  19. JDK11 下载与安装、环境配置(全网最详情,值得收藏)
  20. Ubuntu如何修改键盘和语言

热门文章

  1. python 异步下载图片_python3抓取异步百度瀑布流动态图片(二)get、json下载代码讲解...
  2. linux7配置网卡绑定,CentOS7双网卡绑定配置
  3. json 反射java 实体_java反射实现javabean转json
  4. 好男人都结婚了吗?最后的研究结论亮了……
  5. 首例猪心移植人体,川妹子立大功!36 岁哈佛女学霸敲除猪致病基因,成顶刊收割机...
  6. 天才王垠惊人言论炸翻网友:相对论是假说,爱因斯坦是民科!
  7. 大佬!莫言获颁第13个荣誉博士学位
  8. 哥廷根,世界数学家的摇篮和圣地
  9. 这些高校表现亮眼!最新全球学术排名,频出黑马
  10. ajax preview,In jQuery, using ajaxSend to preview the url built