企业完成建设数据存储和算力基础平台后,再将数据资源归集,下一步就需要将数据资源转化为数据资产。那么什么样的数据资源是数据资产?企业数据管理者需要提升数据质量、消除数据孤岛,并逐步积累数据价值?本篇将从数据平台建设和团队建设两个角度来介绍如何实现数据资产化。

— 数据资产化的挑战 

企业完成建设数据存储和算力基础平台后,再将数据资源归集,下一步就需要将数据资源转化为数据资产。有业务语义和业务价值的数据资源才是数据资产,因此企业数据管理者需要将数据与业务衔接起来,梳理出哪些数据可以服务哪些业务,同时建立好数据衔接通道并做好数据安全管理。这个阶段的主要目标是提供给业务方可以直接使用的数据资产。

企业在数据资产化的阶段会遇到各种各样的挑战,尤其是在起步阶段,经常会遇以下几个问题:

  • 如何能识别出企业的全量数据资产

  • 如何能准确且快速的提升当前的数据质量

  • 如何能跨业务跨领域的打通企业数据,消除“数据孤岛”

  • 当前数据的流转过程是否符合国家相关的法律法规的要求

  • 企业怎样才能逐步的挖掘出数据资产的价值并量化它

  • 相关人才的培养,管理手段的升级,思维模式的创新

对于大多数企业,这一系列挑战在很长一段时间里,都深深困扰着数据管理人员,尤其是引领企业数字化转型的管理层。

然而方法总是比困难多,相关问题的解决并非一蹴而就,需要一套完整的技术平台和管理体系,并落实到具体的业务单位,有计划、分步骤、可量化的持续推进各项服务活动的开展与落地。在这个阶段,企业数据管理者需要完成两个方面的工作,一个是平台功能的建设,一个是团队能力的建设。

— 平台功能建设 

平台建设的重点主要包括能帮助企业做数据资源的治理和业务化转换的数据开发与治理平台,以及随着数据安全类三法(《网络安全法》《数据安全法》《个人信息保护法》)强制推行后要落地的数据安全管理平台。

上图是一个整体的,从数据开发到资产价值的总体流程的概要示意图,不同企业的规划和落地,依照企业的实际情况会存在一定的差异,不过总体过程大同小异,在资产化阶段,对于平台工具的功能要求,我们将其总结为以下几点:

  • 元数据管理与数据资源登记

能够统一管理来自不同数据源的数据资源是数据资源化的第一步,主要包括数据源管理、元数据管理、数据资源盘点等功能。数据源管理要能够支持不同的数据库或平台,平台工具需要能够配置数据源、定义数据资源等。元数据管理要能够支持不同源数据的自动化采集,按照一些统一的标准做元数据定版管理,甚至覆盖数据血缘的统一收集和管理。数据资源盘点需要包括一个资源门户和资源管理规范,可以将不同数据库的差异化数据格式采用统一的数据格式进行盘点和规范化描述,再挂载到统一的资源目录上,便于数据管理和用户发现数据。

  • 数据模型与规范设计

数据模型是数据平台内归集的多样化数据,是统一质量提升和业务化提升的关键。数据模型包括逻辑模型与物理模型,其中逻辑模型主要负责映射业务需求和数据表结构关系,物理模型负责将业务层的数据表结构转换为数据平台底层数据库的实际DDL等。数据标准是数据平台内元数据和数据质量的统一定义,是后续数据资产化过程的参考依据。平台工具需要能够提供逻辑模型登记和物理模型设计的功能,要能够设计数据标准、维护标准映射和执行落标检查,从而可以建立企业内部统一的数据规范和建设标准数据。

  • 自动化的数据质量提升

数据质量提升是一个工程量非常庞杂的工作,平台工具需要能够提高这个工作的自动化程度从而提升效率。平台工具需要提供的能力包括梳理质量模板、编写质量规则、查看质量报告、处理质量问题等。一些自动化和智能化的功能是非常关键的增值技术能力,通过一些基于数据相似度的推荐算法,让机器自动的给数据表关联质量规则和落实数据标准工作,可以将人力从重复的工作中解放出来,从而加速完善数据质量的进程。

  • 数据资产管理与服务能力

经过企业内大量数据管理人员的工作积累,内部将逐步积累起大量的可被各个业务使用的数据资产,此时企业就需要将这些潜在价值很大的数据资产管理起来,并提供多样化的服务方式可以让不同业务部门使用起来。企业一般要建立一个企业的数据资产目录或门户,支持数据管理者来挂载数据资产;而业务用户能够基于资产目录来做检索,更好的发现数据,了解数据分布以及数据信息溯源。

除了功能性要求以外,数据治理类软件本身也是关键的基础软件,企业对其自然也有体系化的架构要求,主要包括如下几点:

  • 稳定性与可靠性 :相关软件会产生大量的无人驻守的计算任务,因此在架构上需要保证相关数据计算任务的稳定性和可靠性。

  • 用户自服务能力 :数据治理软件和资产门户等相关软件是需要开放给所有数据管理人员、安全管理人员以及各个业务部门内部的数据人员来使用的,因此需要提供比较强的自服务能力,这包括独立的工作空间、体系化的权限隔离机制,以及较低的开发启动成本。譬如企业数据管理部门统一制定数据标准,可以分发给各个业务组织或部门,由各个部门再结合自身的业务数据做进一步的完善,而无需从0开始,中间过程可以通过一些关键的数据管理流程来控制。

  • 非结构化数据的资产化:数据资产平台需要对非结构化数据提供管理能力,或者提供插件化的方式,让各个业务团队可以基于一定的方式来做定制化的开发,最终能够有效的管理起业务积累的这部分数据资产。

  • 数据安全:数据的开放在数据流通过程中,也带来了安全风险,按照法律法规的要求企业必须完善数据内容安全和流通安全,而不仅仅是软件层面的认证、权限和审计。数据安全管理平台需要能够提供基于数据内容的分类分级,生成细粒度的安全策略,支持动态脱敏、静态脱敏、数据水印等能力,可以让安全管理人员灵活的配置,从而落实相关合规性要求。

  • 国产软硬件生态支持:数据资产平台软件需要能够开发和管理国产数据库内的资产,此外平台自身也需要满足国产化的相关要求。

— 团队能力建设 

团队能力建设相对比较复杂,在技术层面上团队需要掌握数据资产盘点技术、数据质量管理能力、数据安全分类分级与细粒度安全管理等技术,还需要拓宽视野,从整体的角度考量如何从数据推动业务效率的提升。这部分内容比较抽象,我们将其抽象为全局、务实、安全、资产四个关键点:

  • 全局观:以通过数据来扩大企业业务视野和管理视野为目标,以盘点和拉通企业各领域数据为度量,促进企业全面的识别和展现出所拥有的数据资源量,数据资产量。

  • 务实观:以提升数据质量、满足数据需求为目标,从组织、技术、管理、人员等多方面多角度、多因素入手深挖数据质量问题根因,长效提升数据质量。

  • 安全观:以在满足日益完善的法律法规要求为前提,保证数据资产安全,保护隐私信息不泄露。

  • 资产观:以做好资源配置,控制好成本和收益为目标,对数据收集、存储、整合、应用、共享、开放,再到价值的评估量化全链路建立体系化的资产管理保障。

具体到细分的技术能力上,我们将这部分能力分为四个域,包括开发能力、管控能力、服务能力和运营能力,我们逐个对其展开阐述:

  • 数据资产开发能力域

企业针对数据资产的开发不仅包括数据的采集、存储、加工,也包括分析、建模、数字产品;而数据资产开发的管理目标则是包含了对这些方面的接入、协同、管控的全流程管理。数据开发团队需要掌握对多模数据源的对接,脚本开发、测试执行、作业调度、ETL配置等基础能力,可结合业务语义分析提供常用语法、常用关联等智能推荐,结合标签画像、指标体系等能力,快速打通数据开发领域的各种问题。

  • 数据资产管控能力域

我们知道将生产资料转化为产品时,最重要的就是品质保障,而数据管控就是对数据产品的各个治理领域的功能组合,需要为数据订立架构与规范,建立数据质量的管理机制持续监管及解决质量问题,同时树立起数据共享与保护的意识。企业数据管理团队需要构建数据标准模块以定义规范,通过落标检查来监督规范的执行;通过数据质量模块来定义质量检查规则并执行,统计和分析质量结果,提出问题并处置解决;通过数据安全的分类分级对数据进行安全级别定义,构筑数据保护的基础;通过数据模型将标准落实到数据产品的设计工艺上;以元数据模块进行技术元数据的采集、数据加工血缘路径的采集,实现差异性分析、血缘分析、特征分析等;通过数据模型管理软件来统一管理企业内部的各种业务数据模型定义和落实模型校验,完善内部的数据管理要求。

  • 数据资产服务能力域

产品生产出来了,并且成为了质量过硬的好产品,这时最需要的是将产品销售出去,投入到交换、使用的环节中,而数据资产服务能力域就是对数据的交换、共享、应用输出等服务能力的综合管理,需要将标签画像、指标体系、自助分析、建模预测等业务模式,通过人-机的联机查询访问、机-机的系统调用接口、平台内部实验区数据验证等不同接口形式注册为服务,以统一管理的方式对服务进行注册、发布、监控、停用的管理,同时,可利用知识图谱等形式对使用情况、业务模型进行知识归纳和共享,并将安全等级定义落实到数据的共享管理中,确保权限的正确分配、完成确权和审计要求。平台需要提供数据商城模块实现数据集的注册、发布,并实现API访问、下载等接口的开放。数据的共享流转流程成熟后,再对服务层进一步优化知识共享、平台衍化、数据重组等。

  • 数据资产运营能力域

既然企业已将数据要素定位为重要资产之一,那数据资产运营将会像企业运营一样重要。数据资产运营以数据资产管理为主线将数据资产开发、管控、服务三大能力域串联起来,抽象出最基本的引入、上架、运营、下架四个阶段对数据资产进行管理。平台需要提供基于元数据的数据集类资产引入、逻辑资产编目模组、对其他类型数据资产的管理和注册等能力。数据管理人员可通过资产导览的方式或全局搜索的方式查找希望引用的资产,打通资产到数据商城的关联,未来将通过数据需求,可以连通数据的开发、管控、服务的各管理接入点,通过智能化的资产打标、评价算法等功能以提升管理效率。

通过四个能力域的功能模组的不断完善,帮助企业培养起从一般职员到决策者都能基于数字化能力完成企业日常运营的思维模式,只有数据的使用便利、数据的内容详实,数据的结论准确、数据的应用全面,才能将变革成为习惯,这才是企业数字化转型成功的核心必要条件。

— 小结

本篇从数据平台建设和团队能力建设两方面,剖析了数据资产化建设所需的基础功能性能力和数据团队应具备的技术能力、思维模式等软实力。完成了数据资产化管理,已经完成了数字化转型的基础布局,那么如何完成数据共享与分析?如何实现数据产品对内的业务运营和对外的价值创造?下一篇为你揭秘。

企业如何两步实现数据资产化?相关推荐

  1. php中表格的美化,美化你的表格仅需两步!数据可视化必学!

    工作中需要用到图表的地方太多了,但凡跟数据打交道都离不开图表,俗话说:字不如表.表不如图,一个"性感的"图表不但能引起观看者的兴趣,更能让决策者迅速掌握数据中呈现的问题.可视化的呈 ...

  2. 用Abp实现两步验证(Two-Factor Authentication,2FA)登录(二):Vue网页端开发

    文章目录 发送验证码 登录 退出登录 界面控件 获取用户信息功能 项目地址 前端代码的框架采用vue.js + elementUI 这套较为简单的方式实现,以及typescript语法更方便阅读. 首 ...

  3. 三十而立|企业数据资产化管理的东软实践

    作者 | 中国软件网 海策 --- 数据的价值对于企业的重要性已无需赘述. 而随着企业数字化转型升级加速,数据的价值正在与数据的市场价值无限的接近,数据资产化发展已经开始进入数据要素市场变革期.巨变之 ...

  4. 同期对比图_Excel展示两组同期数据,这种左右对比图真好看,只需六步搞定

    Excel数据展示过程中,一幅好的图表不仅仅代表的是美观,而且也能更加显而易见的看清楚数据的情况.对两组同期数据做对比图,这种情况相信大家都见到过. 相信许多同学在进行这样的两组数据对比的时候,一般都 ...

  5. PYTHON爬虫神站——curl.trillworks 爬取数据只需两步!

    前不久作者因为需要爬取一些建筑类数据 于是又又又准备苦哈哈的打开百度搜索"如何爬取XX",然后看html,找到关键点再挨个循环访问.....以下省略. 但这次 这款朋友推荐网站拯救 ...

  6. 重新定义Wi-Fi功能,Wi-Fi 6为什么要分两步?

    来源:传感器技术 Wi-Fi 6重新定义Wi-Fi,先是双频并发,然后才是6GHz下的160MHz. Wi-Fi是什么?它是一个基于IEEE 802.11标准的无线局域网技术.如今,Wi-Fi已经覆盖 ...

  7. 两步搞定Hyperledger主打区块链解决方案Fabric

    区块链技术发展至今,形成了公有链和联盟链两种主流技术平台. 公有链 面向大众,用户可以匿名参与,非常方便,账本数据也公开,加上强大的智能合约,因此公有链极大地促进了区块链概念和技术的普及,比如比特币. ...

  8. 《2021中国数据资产化工具市场研究报告》隆重发布

    早在五年前,数据是21世纪"新石油"的口号就已响彻行业. 在2020年4月,我国首次将"数据"与土地.劳动力.资本.技术并列为五大生产要素,并提出要" ...

  9. vue从url中获取token并加入到 请求头里_轻流amp;amp;企业微信——获取打卡数据...

    企业微信开放了打卡应用的api,功能包括查询打卡数据,能获取到用户.地点.时间.打卡类型等信息,在轻流中可以基于以上数据做一段时间内的迟到/事假等统计,以及更深层数据处理,方便管理. 第一步:获取ac ...

最新文章

  1. php动态语言静态化
  2. 网络慢是带宽不足?优化网络带宽的5个小窍门
  3. 转载:配置nginx支持pathinfo功能
  4. SQL Server 数据类型转换函数
  5. JDBC——入门知识【转】
  6. 支付宝第三方授权登陆
  7. java adt入门教程_【教程】【多图详解】如何在Eclipse中离线安装ADT(Android Development Tools)...
  8. 不需要许可认证即可解决WIN2003不能超过2个远程终端用户试用120天的问题
  9. HDU4612+Tarjan缩点+BFS求树的直径
  10. 百度面试题:从海量日志中提取访问百度次数最多的IP
  11. LTE下行资源分配type0、type1、type2
  12. 泰坦尼克号数据挖掘项目实战——Task1 数据分析
  13. 如何查看本地服务器名称
  14. php把数组合并,php数组合并_php数组合并、追加与连接的方法、array_combine函数)
  15. 删除插件mysearchresult(chrome和firebox)
  16. InnerClass annotations are missing corresponding EnclosingMember annotations. Such InnerClas...
  17. 机器学习基本算法总结
  18. 机器学习中的Bias和Variance是指什么
  19. Python 实现ZmapScan 扫描
  20. 【驱动之四】Nt和Zw

热门文章

  1. 2021年P气瓶充装复审考试及P气瓶充装模拟试题
  2. linux挂载img镜像文件
  3. 在Visual Studio 中找不到Microsoft Word 11.0 Object Library的解决办法
  4. RabbitMQ GUI客户端工具(RabbitMQ Assistant)
  5. 腾讯后台面试经历(转)
  6. bootstrap修改样式表
  7. 中学计算机教室宣传标语,中小学教室、班级励志标语大全
  8. asp.net学校门户网站系统VS开发sqlserver数据库web结构c#编程计算机网页项目
  9. 【JavaScript 逆向】百度旋转验证码逆向分析
  10. Sliverlight调用WebService跨域问题解决