元数据与数据治理｜大数据治理（第九篇）

魅族大数据平台的一个技术分享活动,话题是《大数据治理之路》.魅族大数据平台工作人员分享了一些他们的大数据治理经验,很有内容。
首先,他们整理了一个治理流程,架构图

然后，依照架构图，大致讲了架构图中的每个模块，以及将模块串联起来的一个管理流程，流程图如下：

流程图上面，其中，“主数据管理” 模块是本人根据理解加的，下文会讲到。

接着，他们重点讲了“元数据管理” 模块。可能是做这方面，他们讲的细一些。主要是“自研”还是使用“开源解决方案”，其中，他们介绍使用了一种叫“Apache Atlas” 的开源框架，来做元数据的管理。他们有一个“元数据平台架构”，包括“多源数据采集”， “WEB UI” 调用”MetaData Api” 做数据展示，而“MetaData Core” 从底层，也就是“Apache Atlas” 获取数据。架构图细节比较多，如

元数据与数据治理｜大数据治理（第九篇）相关推荐

面向政府治理大数据的高性能计算系统
面向政府治理大数据的高性能计算系统吴维刚1, 常亮2, 任江涛1, 古天龙2 1 中山大学数据科学与计算机学院,广东广州 510006 2 桂林电子科技大学计算机与信息安全学院,广西桂林 541 ...
数据整理——大数据治理的关键技术
数据整理--大数据治理的关键技术杜小勇1,2, 陈跃国1,2, 范举1,2, 卢卫1,2 1. 中国人民大学信息学院,北京 100872: 2. 数据工程与知识工程教育部重点实验室(中国人民大学), ...
社会治理大数据平台怎么建_平度市社会治理大数据平台
单位简介申报单位:青岛城市大数据运营有限公司承建单位:青岛城市大数据运营有限公司,杭州数梦工场有限公司青岛城市大数据运营有限公司是由平度市城市开发集团有限公司与杭州数梦工场科技有限公司(独角兽企 ...
【正在直播】“政府治理大数据”线上论坛，听技术大咖解读数字政府
点击上方蓝字关注我们 "政府治理大数据"线上论坛论坛主题:政府治理大数据--建设数字政府,提升社会治理能力论坛时间:2020年6月24日(星期三) 9:00‒11:30 论坛 ...
【预告】“政府治理大数据”线上论坛，听技术大咖解读数字政府
点击上方蓝字关注我们 "政府治理大数据"线上论坛论坛主题:政府治理大数据--建设数字政府,提升社会治理能力论坛时间:2020年6月24日(星期三) 9:00‒11:30 论坛 ...
专题导读：政府治理大数据
专题导读:政府治理大数据十九届四中全会明确指出要推进国家治理体系和治理能力现代化.利用大数据手段提升政府治理能力是一条重要的途径,正在全国范围内开展的"最多跑一次"行政服务改革实 ...
管道过滤模式大数据_大数据管道配方
管道过滤模式大数据介绍 (Introduction) If you are starting with Big Data it is common to feel overwhelmed by t ...
数据中台=大数据平台+数据资产管理平台+数据服务平台
数据中台到底是什么?几年过去了,也一直众说纷纭. 笔者认为数据中台不应该是一个单纯的系统或者是一个软件工具,而应该是一套架构.一套数据流转模式. 数据中台需要采集数据作为原材料进行数据加工.数据建模, ...
大数据之大数据的典型应用
上一期我们从数据流转的过程对大数据采集技术.大数据存储技术.大数据处理技术.大数据建模和治理技术.大数据可视化等技术做了一个简要的介绍.下面,我们来看一下大数据几个典型的应用. 下面,开启第一讲:大数 ...
第一章数据与大数据
大数据导论昨天出去玩了回来之后实在是太困太困了,早上看了一些内容,在晚上的时候电脑都准备打开来写写,但是就完全睁不开眼睛了,今天来补一下.这两次看的都还是一些概念性的问题,没有关于技术的,实在是有点 ...

元数据与数据治理｜大数据治理（第九篇）

元数据与数据治理｜大数据治理（第九篇）相关推荐

最新文章

热门文章