大数据平台基本功能有哪些

　　在搭建数据分析平台之前，要先明确业务需求场景以及用户的需求，通过大数据分析平台，想要得到哪些有价值的信息，需要接入的数据有哪些，明确基于场景业务需求的数据平台要具备的基本的功能，从下至上可分为四个层次：

　　1）数据采集层：底层就是各种数据源，主要是对企业底层数据的采集和解析，将零散的数据整合起来，包括企业的核心业务数据、用户数据、日志数据、集团数据等等，通常有传统的ETL离线采集和实时采集两种方式

　　2）数据储存和处理层：有了数据底层的数据，然后根据需求和场景的不同进行数据预处理，储存到一个合适的持久化储存层中，比如说OLAP、机器学习、数据库等等

　　3）数据分析层：这里就要用到BI分析系统，如果是传统的数据挖掘还有SPSS，这一层主要是对数据进行加工，然后进行深层次的分析和挖掘。

　　4）数据应用层：根据业务需求不同划分出不同类别的应用，主要是对最终的数据进行展示和可视化，如上图的数据报表、仪表板、数字大屏、及时查询等等。

　　企业对数据、效率要求的逐步提高，也给大数据提供了展现能力的平台，企业构建大数据平台，归根到底是构建企业的数据资产运营中心，发挥数据的价值，支撑企业的发展。

大数据平台基本功能有哪些相关推荐

golang 大数据平台_大数据平台是什么？有哪些功能？如何搭建大数据平台？
大数据平台是为了满足企业对于数据的各种要求而产生的. 大数据平台: 是指以处理海量数据存储.计算及不间断流数据实时计算等场景为主的一套基础设施.典型的包括Hadoop系列.Spark.Storm.Fl ...
大数据平台有什么功能
大数据根基于互联网,数据仓库.数据挖掘.云计算等互联网技术的发展为大数据应用奠定基础.对于任何一个大数据的从业者或初接触者,或者都会有个共同的感触:大数据很有用!大数据该怎么用呢? 大数据平台: 是指 ...
大数据平台有什么功能作用
大数据根基于互联网,数据仓库.数据挖掘.云计算等互联网技术的发展为大数据应用奠定基础.对于任何一个大数据的从业者或初接触者,或者都会有个共同的感触:大数据很有用!大数据平台有什么功能特点? 大数据平台 ...
大数据平台安全标准设计
从应用角度看,需大数据平台提供如下4项安全功能: 图1 大数据平台安全功能 1.边界--限制只有合法用户身份的用户访问大数据平台集群 (1) 用户身份认证:关注于控制外部用户或者第三方服务对集群的访问 ...
我该建数仓、大数据平台还是数据中台？看完脑子终于清醒了
一.层出不穷的新名词现在各种新名词层出不穷: 顶层的有数字城市.智慧地球.智慧城市.城市大脑: 企业层面的有数字化转型.互联网经济,数字经济.数字平台: 平台层面的有物联网,云计算,大数据,5G,人 ...
从数据仓库到大数据平台再到数据中台（内附13张架构图）
现在,数据的新名词层出不穷,顶层的有数字城市.智慧地球.智慧城市.城市大脑-企业层面的有数字化转型.互联网经济,数字经济.数字平台- 平台层面的有物联网,云计算,大数据,5G,人工智能,机器智能,深度 ...
数据仓库、大数据平台、数据中台的区别
问题导读: 1.如何理解数据中台? 2.数据仓库.大数据平台.数据中台都是什么? 3.大数据平台硬件架构如何设计? 4.数据仓库.大数据平台.数据中台架构如何理解? 一.层出不穷的新名词现在各种新名 ...
巨变来了，金融大数据平台走向何方
作者:李静瑕来源:轻金融在"数据为王"的时代,金融大数据被誉为"待挖掘的金矿",其价值已经成为共识. 自从2014年大数据首次作为国家战略被写入政府工作报告 ...
大数据平台的3个核心功能
导读:大数据平台可以分为操作数据存储(ODS).数据仓库(DW)和数据集市(DM)三层,分别对应着数据清洗.数据管理和数据应用这三个核心功能. 作者:蔡主希来源:大数据DT(ID:hzdashuju ...

大数据平台基本功能有哪些

大数据平台基本功能有哪些相关推荐

最新文章

热门文章