这是傅一平的第311篇原创

“与数据同行”开通了微信群,现已汇聚了3000位小伙伴了,长按以下二维码发送“入群”后加入。

正文开始

最近在TD大数据论坛上我做了一次分享,题目是《浙江移动数据中台的建设和应用实践》,关于中台的文章现在网上很多了,文末我列了主流的数据中台的文章(包括我的),数据中台没有标准架构这种观点我也是认同的,因此,这里会结合片子重点谈谈我的实际感受,大多是超越数据中台本身的。

1、为什么做数据的挑战特别巨大?

回顾自己做数据的15年,大多的结果并不乐观,有句话说得蛮有道理:你要判断一个东西有没有可能继续被使用,就要看它已经被使用了多长时间。比如我可以预测凳子在一千年内继续会为人所用,因为凳子已经存在了1000年以上了。

这个规律套用到自己,就有点残酷,回顾10年前自己做的模型、平台或产品,似乎都没有什么东西能留存下来,因此,现在去做数据中台,也是战战兢兢,高大上的东西,在现实面前特别容易倒掉,更别提数据工作本身的一些限制。

比如IT部门是业务部门的后端,而数据部门是IT部门的后端,决定了数据工作者往往是后端的后端,因此要直接去创造价值是很难的,当然仅仅满足于报表取数另当别说,但相信有兴趣看我文章的人,都有着自己更高的追求。

很多数据界的老人对数据中台不屑一顾,认为纯粹是炒作,我很能理解,但如果以这个理由固步自封,那也有点不合时宜,本质不变不代表手段不需要改变,无论是在业务、技术还是数据层面。

2、数据中台从来不是一个新东西

数据中台的本质是什么,大家现在提的最多的词是业务化,服务化,后来我加了个开放化,内涵下面这页PPT讲的很清楚,业务化是在提醒你不要为了治理而治理,服务化在强调标准化和共享,开放化在讲酒香也怕巷子深。

你说这些是新概念吗,是阿里巴巴创造了数据中台吗?

显然不是,阿里巴巴在数据中台上的很大贡献就是创造了一个“数据中台”的名词,降低了企业的沟通成本,让企业的领导意识到数据能发挥出更多的价值。

应该来讲,数据中台涉及的东西,都是做数据做到一定程度后自然产生的结果,只要你希望让数据产生更多、更直接的价值,你就要演化出相应的功能,形成自己的数据中台。

其实早在阿里巴巴以前,无论是网易、OPPO等等,大多数互联网公司其实早就有了自己的数据中台。

比如笔者进公司以来,凡是想提升业务支撑效率的工作全是数据中台的内容,无论是模型周期从月改为日,用可视化工具替代PL/DEV,用标签库实现客户群复用,用自助取数替代人工取数,都是如此。

我们在数据变现的第一天,老板就跟我们讲:一定要标准化,API化,否则数据变现是做不大的。

3、运营商建设数据中台的时代背景

通信行业天生就是一个数字化程度比较好的行业,随着传统管道业务的红利到顶,技术变革不断驱动的产业升级,AICDE对运营商的价值创造方式、核心理念等提出了新的挑战,要求其加快数字化创新,拓展产业新的空间,如下页所示。

互联网企业对运营商业务的挤压是非常厉害的,但互联网的发展有一样对运营商是绝对有利的,那就是管道的线上内容会越来越丰富,线下的轨迹数据也在随着人民生活的提高变得更有价值,运营商这种天然的线上线下数据的全面性、多维性、连续性、完整性等特点,使得其在新的时期有了一些新的优势。

4、数据中台需要企业战略的支持

为实现数字化转型,浙江移动5年前就提出启动智慧运营转型的要求,即:以大数据为驱动、大IT平台为支撑、流程优化和管理完善为保障、改进客户体验和价值创造为目标,推进生产运营转型提升。智慧运营鼓励企业中的每一个业务单元都投入进来,倡导首创精神,实行差别化试点,“一点创新、推广全省”,智慧运营逐渐成为公司的核心竞争力之一。

没有公司的战略,就不可能有足够的业务驱动力去创造数据中台的生存空间,以前做数据创新面临的很大问题是没有需求,靠IT人员的自嗨刚开始的时候也许是一种创新,但马上缺乏了后续继续发展的动力。

公司的战略决定了会给你时间去持续的去做一些公司认可的长期的事情,不是那么急功近利,这对于做数据的太不容易了,智慧运营贵在坚持,不断迭代。我们的智慧运营项目连续做了6年,你可以看下每一年的项目名称,都是在原来基础上的反思和调整。

5、智慧运营坚持的“搭台唱戏”的理念

当初并没有数据中台这个名词,但我们早就有了“搭台唱戏”的理念,数据中台就是其中的舞台,大家的目标是一致的,如下页所示。

我们必须要打造与之适配的数据赋能框架,这就是后来的数据中台,我们的数据中台从来不是COPY别人的产物,而是采用“搭台唱戏”模式支撑企业智慧运营战略的需要。

6、数据中台的一种架构形式

我们定义的数据中台,主要是实现跨域数据整合并沉淀公共的数据能力,同时提供丰富的数据模型、标准化的数据服务、个性化的开发平台与工具,满足一线数据开放和智慧运营的需要,我们把数据管理的相关工具纳入了能效中台,因此在这里并没有体现。

7、数据中台总是处于演进的过程中

数据中台是企业发展到一定阶段的产物,而当企业需要在合适的时机推送合适的服务的时,实时数据中台就成了必需品,它不是技术驱动的产物,而是业务的需要,以下示例了我们数据中台的演进历程。

8、数据中台的核心始终是模型

数据中台再好的架子也需要好的内涵,这就是模型的能力,不要成了绣花枕头稻草芯,这里提两类重要模型:实时模型和挖掘模型。

一是实时模型,为高效支撑实时数据应用,实时数据中台在接入海量实时数据基础上,需要根据不同应用场景,将实时数据清洗、聚合,提炼成动态、事件、时序3类实时模型,分别存储在Redis 、Kafka 、Hbase等技术组件中供下游应用。

二是挖掘模型,社交网络、时间序列、时空轨迹、自然语言处理是运营商未来基于数据进行价值创造的核心算法,只有这些算法才能最大限度的挖掘出运营商数据中的价值,笔者前期在文章《什么才是运营商数据中台最大的竞争力?》中提到过位置和上网是运营商最核心的数据,这些数据的价值挖掘极度依赖以上的核心算法。

互联网公司曾经走过的路,付出的代价,运营商是绕不过的,否则,就无法发挥出原生数据的更多价值。现在中国移动提出要从“要素”竞争向“要素+能力”竞争转型,在这里数据是要素,算法就是能力。

举个例子,基于社交网络识别出家庭、政企的各种关系对于运营商做好家庭、政企业务非常重要,以下示例了某位同事的家庭关系,涉及17个人,7个物理家庭,通过这些关系的识别你才能更精准的提供服务。

9、数据中台的开放至关重要

授人以鱼不如授人以渔,数据中台要开放能力,不是眉毛胡子一把抓,需要尊重公司的现状,为不同的角色提供不同的数据开放手段。比如标签库主要为业务人员服务、DM主要面向会SQL的人员,组件服务则面向技术开发人员等等。

10、数据中台的出口在哪里?

有了数据中台远远不够,只有之上的数据产品才能解决数据推送的最后一公里问题,很多数据团队最大的问题是没有数据产品,根本不是数据中台本身就能解决的。

凡是数据中台做的好的,前端的数据产品生态肯定是不错的,下图示例了我们的数据产品与阿里巴巴的对标,在我的前期文章中也有详细的阐述,即要从不同的赋能角色角度去思考数据产品的方向。

经过几年的摸索,赋能对外变现的神灯产品体系已经具备一定的规模,神灯产品以数据价值保护和信息安全为前提,进行数据、模型、标签、接口、应用产品等多层次的合作,探索合作研发、销售代理、资源互换、产品孵化、模型锤炼、大数据联邦等多种新型合作模式,如下页所示。

数据中台不需要去比框架、比技术或比性能,只要你的企业的业务人员或外部客户利用你的平台创造了更多价值,就是对数据中台最大的褒奖。

但要达到这个目标光有个数据中台是没有用的,除了数据产品,还需要配备相应的战略、组织、机制及人员等等,比如组织中台,也即先进生产力要适配相应的生产关系。下图列出了八个方向的建议,这些能力对传统企业的挑战特别巨大。

这次演讲基本的思想就是这些了,感谢TD公司的组织,让我们有机会让业界看到浙江移动的做法,但你没必要COPY我们的,因为数据中台没有标准架构,总是要掌握一个原则:参考别人的做法,听取专家的意见,然后自己做主。

作者:傅一平 (微信号:fuyipingmnb)

“与数据同行”开通了微信群和QQ群,现已汇聚了3000位小伙伴了,长按以下二维码加入。

笔者也开通了知识星球,欢迎到我的知识星球进行探讨。

近期文章列表

五级数据挖掘工程师,你处在哪一级?

不做中台会死吗?

BI(商业智能)的未来?

数据分析的道与术

OPPO数据中台之基石:基于Flink SQL构建实数据仓库

超越BI,数据产品的前途在哪里?

数据中台已成下一风口,它会颠覆数据工程师的工作吗?

数据产品经理,并不是数据 + 产品经理

数据中台不是技术平台,没有标准架构!

如何有效推进百万标签库的治理?

运营商大数据对外价值变现的十大趋势

如何深入浅出的理解数据仓库建模?

艰难的旅程:我们如何用“十步法”完成了一次企业级数据治理的落地?

五年数字大屏之路,“述说”着我们大数据变现怎样的故事?(附演示视频)

人工智能现在的技术“好玩”到了什么程度?

超越平台,数据中台的业务化、服务化及开放化!

建模核心能力自我掌控后,到底给我们带来了什么变化?

联邦学习,带我们走出“数据孤岛”的困境?

拥有敏捷数据交付平台(DataMaster)是怎样一种体验?

一次客户细分的实践

风声鹤唳的大数据圈,又有多少理解了数据安全的底线?

要看更多,请点击左下角阅读原文即可阅读整理好的所有文章!

浙江移动数据中台的建设和应用实践相关推荐

  1. 运维数据中台的建设方法、实践与展望

    1 .前言 企业在数字化转型过程中运维遇到很多痛点如发现问题难.根因定位难.故障预测难.运维数据治理难.容量预测难以及各种运营大屏需求等,建设运维数据中台可以有效的解决这些痛点,本文将探讨运维数据中台 ...

  2. 爱奇艺数据中台的建设实践

    导读:随着市场对数据价值的认可,促进了数据在各行各业的爆发式增长,以及大数据设施的快速演化,同时也带来了不少新的数据问题:解决这些问题,发挥更大的数据价值,成为了各大公司的重点工作.爱奇艺通过数据中台 ...

  3. 数据中台体系化建设核心方法论

    前言 大家好,我是王老狮,最近一直忙于工作,没有更新博客,借着和C站的专家们进行分享交流的机会,强迫自己花时间写了一些内容,今天就把交流会上的分享内容分享给大家. 初识数据中台 说到中台,最早是由阿里 ...

  4. 企业级数据中台的建设方法、架构和技术栈

    多数企业都意识到数据的重要性,都希望利用数据来驱动业务发展.但经常会听到这样一句话:"我们企业现在业务都还没做起来,连数据都没有,还不到考虑数据利用的时候." 这句话在某种程度上代 ...

  5. 爱奇艺数据中台服务化建设 附下载

    导读:随着市场对数据价值的认可,促进了数据在各行各业的爆发式增长,以及大数据设施的快速演化,同时也带来了不少新的数据问题:解决这些问题,发挥更大的数据价值,成为了各大公司的重点工作. 爱奇艺通过数据中 ...

  6. 赠书:算法与数据中台“网约车业务实践”

    点击上方蓝色"程序猿DD",选择"设为星标" 回复"资源"获取独家整理的学习资料! 在O2O 模式下,网约车平台成为其中最为经典的案例,无论 ...

  7. 民生银行数据中台体系的构建与实践

    在大数据.人工智能.区块链等新兴技术的驱动下,各家银行纷纷利用新技术制定数字转型改革战略,寻找差异化经营的可行模式. 民生银行积极推进改革转型,2018年在"民营企业的银行.科技金融的银行. ...

  8. 数据中台应用实战50篇(一)-企业级数据中台的建设方法架构和技术栈

    前言 多数企业都意识到数据的重要性,都希望利用数据来驱动业务发展.但经常会听到这样一句话:"我们企业现在业务都还没做起来,连数据都没有,还不到考虑数据利用的时候." 这句话在某种程 ...

  9. 有赞数据中台建设实践

    "与数据同行"开通了三类微信群,综合群.专业群(数据仓库.数据分析.产品经理.数据治理及机器学习五大专业)加微信号frank61822702 为好友后入群.新开招聘交流群,请关注' ...

最新文章

  1. oracle备份镜像,Oracle RMAN两种备份方式 – 备份集备份与镜像复制备份
  2. 剑指offer 算法 (知识迁移能力2)
  3. python将第一列替换_python-通过将另一列与第二个DataFrame进行比较来替换一列中的值...
  4. 数据结构与算法 -- 再论递归
  5. 一个最简单的Makefile例子(转)
  6. Jmater参数说明
  7. ORACLE虚拟索引(Virtual Index)
  8. [Unity] 利用Culling Group实现LOD和剔除逻辑
  9. /admin/login.php,app/admin/controller/Login.php · 静水流深/wotuoquan - Gitee.com
  10. jdk8Comparator.comparing 排序
  11. c语言代码存放的区域 堆栈,C语言中内存分布及程序运行中(BSS段、数据段、代码段、堆栈)...
  12. Oracle:cost耗费高的sql执行比cost耗费慢的效率快
  13. html+显示平方米,平方米符号怎么打【四种方法】
  14. java类图_java UML类图的使用-UML基础-火龙果软件工程
  15. 如何撤销命令make install的安装结果,或者如何卸载Linux 库library ?
  16. 绝缘子工作温度_在温度下工作
  17. 谷歌浏览器自带翻译网页插件没用了怎么办?这里有解决办法。
  18. 我们的23种设计模式(一)
  19. 【“鲸智搭”入驻钉钉应用市场!三步走,教你轻松搭建流程表单】
  20. Iphone 上字体大全

热门文章

  1. 新特性:Andorid-foreground 解析
  2. Python面向对象三大特征
  3. RADAR毫米波雷达基本原理
  4. C# WPF从RIOT API获取数据(RIOT代表作品《英雄联盟》)
  5. 关于for循环控制条件在循环外还是循环内的问题
  6. Anaconda 使用tensorboard
  7. 全国各省份结婚离婚面板数据(2005-2019年)
  8. IPC3A5I-FW电瓶车入梯检测触发后电梯门依旧会关闭
  9. opengl-glortho理解
  10. 网上有哪些程序员的学习网站?程序员必备网站!