什么是元数据?在前面的集成开发环境建设相关文章中,我们也提到过,元数据MetaData狭义的解释是用来描述数据的数据,广义的来看,除了业务逻辑直接读写处理的那些业务数据,所有其它用来维持整个系统运转所需的信息/数据都可以叫作元数据。

  大数据元数据管理系统功能:

  首先,实现元数据管理,我们就得先来了解元数据,那么什么又是元数据呢?

  (一)大数据——元数据之魅力。

  1.元数据的概念

  在软件动态复用、也即“软件即服务”的实践过程中,我们需要对一个具体软件模块的行为抽象,这个抽象实践就是软件工程里的handle,通常翻译为句柄,而描述该句柄的技术就是元数据。元数据的表达可以是任意形式,XML是其中一种适合的表达技术。

  2.元数据的表现分析

  根据handle所定义的图灵机模块内涵的不同元数据可以有不同的表现形式。当软件模块仅包含有函数而无内部变量时,软件实践就是早期面向过程的编程模型;当模块里只有变量而无函数时,软件实现就是管理系统,有人称此时的元数据定义为数据的数据;当模块里包含变量和函数2者时,其实践过程就是著名的面向对象编程了。

  ————说的简单来讲,元数据也就是用于描述数据属性的一类数据。

  (二)那么元数据管理系统又有哪些功能呢?

  元数据的管理也就是类似于数据的管理,随着信息技术的不断飞速发展,每个企业都需要处理大量的数据,而元数据作为描述数据的信息的作用变得越来越重要,成为信息资源的有效管理和应用的重要手段。

  (三)元数据的管理简单来分以下几点:

  1、元数据模型的建立,定义元数据模型,清晰展现元数据需求。

  2、采集:指从各种工具中,把各种类型的元数据采集进来,采集是元数据管理第一步。

  3、存储:采集之后需要相应的存储策略来对元数据进行存储,这需要在不改变存储架构的情况下扩展元数据存储的类型;

  4、分析:在采集和存储完成后,对已经存储的元数据进行管理分析。

  元数据管理系统由于避免了元数据的重复管理,以一致的元数据进行管理,其效率将得到提高。无需通过人工,可自动分析影响度,因此可降低作业时间,并提高精确度。通过元数据的历史记录管理,可提高可追溯性。由于对业务开发时的元信息应用,因此加大了业务开发的应用。

大数据元数据管理系统功能有哪些相关推荐

  1. 大数据-------元数据管理

    一.什么是元数据 元数据就是描述数据的数据,它为企业的各类数据提供了上下文环境,使企业能够更好地了解.管理和使用数据. 现在数据对于公司的决策十分的重要,随着业务的发展,业务线会慢慢庞大起来,随着开发 ...

  2. 大数据元数据管理系统有哪些功能

    一.大数据元数据管理系统功能 首先,实现元数据管理,我们就得先来了解元数据,那么什么又是元数据呢? (一)大数据--元数据之魅力. 1.元数据的概念 在软件动态复用.也即 " 软件即服务 & ...

  3. 浅谈大数据如何管理与分析

    构建面向海量信息的大数据管理平台,其本质上是要实现一套可软件定义的数据中心来通过对下层的基础架构进行有效的管理(存储.网络.计算以及相关资源的调度.分配.虚拟化.容器化等)以满足上层的业务与应用需求, ...

  4. apache atlas 案例_大数据元数据开源解决方案apache atlas

    [实例简介] 大数据元数据开源解决方案apache atlas,提供数据治理,元数据管理等功能 [实例截图] [核心代码] apache-atlas-1.1.0-sources.tar └── apa ...

  5. 【大数据】大数据 Hadoop 管理工具 Apache Ambari(HDP)

    文章目录 一.概述 二. Ambari 与 HDP 关系 三.Ambari 与 Cloudera manager 的对比 1)开源性 2)支持的发行版 3)用户界面 4)功能和扩展性 5)社区支持和生 ...

  6. 大快搜索城市运河大数据政务管理平台案例解读

    2019独角兽企业重金招聘Python工程师标准>>> 大快搜索城市运河大数据政务管理平台案例解读 大数据在政务当中的应用对于提高问题解决的效率可谓大有帮助,但政务大数据平台的应用开 ...

  7. web端业务数据管理平台+Axure运营数据管理平台+月度数据统计分析+年度排行榜数据统计页面分析+运营大数据统计管理后台+用户信息管理+Axure通用web端高保真交互业务数据管理平台

    作品介绍:原型内容包含:web端业务数据管理平台+Axure运营数据管理平台+月度数据统计分析+年度排行榜数据统计页面分析+运营大数据统计管理后台+用户信息管理+Axure通用web端高保真交互业务数 ...

  8. 战疫之下的“大数据+网格化”管理,谁在颠覆“智能城市”的路径?

    文 | 陈选滨 来源丨智能相对论(ID:aixdlun) 如果说过去"智能城市"的重点仍放在顶层设计架构,那么在此次防疫工作的紧急需求下,这一项目便不得不以另一种更快的方式下沉,落 ...

  9. 大数据权限管理sentry与Kerberos概述

    大数据权限管理sentry与Kerberos概述 常见的解决方案分为两部分 1. 管理用户身份*即用户身份认证 2. 用户身份和权限的映射关系管理 即授权 而Hadoop中常见的开源解决方案是Kerb ...

最新文章

  1. 【Linux】Linux简单操作之文件管理
  2. iOS开发笔记 8、真机调试和发布软件
  3. Linux(Ubuntu)设置环境变量(转载)
  4. ASCII码对照表(不可见字符)
  5. 操作系统 课堂练习题03【20道 经典题目】
  6. python 识别验证码
  7. Veeam Backup Replication试用(三):配置备份(Backup Job)与恢复(Restore)
  8. mysql bin.000013_mysql的binlog安全删除的一种方法
  9. Linux进程间通信(管道、消息队列、共享内存、信号、信号量)
  10. Java String compareTo()方法与示例
  11. vue接收索引_前端开发:Vue中findIndex() 方法的使用
  12. pip install urllib3[secure] 报错 error: ffi.h: No such file or directory
  13. 9.数据操作 数据收集器
  14. long 雪花算法_为什么 MySQL 不推荐使用 uuid 或者雪花 id 作为主键?
  15. linux下文本处理
  16. 初学vue,模仿个静态网站
  17. 杭州最新公交线路一览(150-)
  18. 单例模式与反射的攻防之【 道高一尺,魔高一丈 】
  19. 本地策略从网络访问此计算机没有guest,网络访问没有类型,无法访问共享、共享文件、共享打印机...
  20. CC00292.CloudKubernetes——|KuberNetes运维.V14|——|EFLK架构.v09|报错处理|

热门文章

  1. C++中的Overload、Override和Overwrite
  2. intellji External Libraries下依赖包找不到解决方法
  3. 剑指offer——面试题33:把数组排成最小数
  4. 剑指offer——面试题31:连续子数组的最大和
  5. 机器学习相关基本术语
  6. python中相对路径下文件的读取
  7. 【何之源-21个项目玩转深度学习】——Chapter3-3.2 数据准备-将图像数据转为tfrecord形式
  8. 列表查询数据交互简写形式
  9. struts1(转)
  10. Java中的try/catch/finally