大数据平台构建常见问题

　　大数据平台，是指大型企业用来担负数据存储、处理、分析业务和软硬件综合平台系统。大数据平台一般针对内部提供数据业务相关服务，常见的数据业务有数据仓库、数据可视化、推荐业务等。

　　无论是数据仓库还是大数据平台都可以对企业的运营发展产生不同的影响。下面我们就一起来了解一下大数据平台构建都有哪些常见问题。

　　平台层面的保障：

　　传统的权限控制通常是以系统功能为中心来进行设计，通过控制用户对功能的访问来达到权限控制的目的。这种控制方式在大数据中心已经捉襟见肘，比如对于同一个数据分析功能，不同产品的分析人员只能操作本产品的数据;

　　数据层面的保障：

　　大数据中心面向公司所有的产品负责提供数据处理的能力，那么业务数据每天都在平台上流转，如何合理控制数据平台工程师对业务数据的访问;

　　风险预防和审计：

　　产品的业务形态决定了其系统设计，在其不断演进过程中，数据模型也在不断演进，必然会持续产生一些脏数据，要保证数据的质量，在数据治理环节会加入更多的人工参与，也增加数据泄漏的风险;

　　流程和制度：

　　哪些数据可以公开、公开的范围是多广?数据可以给哪些人使用?某个业务部门想使用另外一个业务部门的数据，应该走什么样的流程?处理这些事情在很长一段时间都是见招拆招，看起来很灵活其实毫无规则可言。

　　构建一个全面、灵活的大数据平台，并非易事。对于开发者来说，如果你只专注于某一个数据模型，那么可能会陷入大数据的“坑”，未来大数据扩展会成问题。

大数据平台构建常见问题相关推荐

大数据平台构建_如何像产品一样构建数据平台
大数据平台构建重点 (Top highlight) Over the past few years, many companies have embraced data platforms as a ...
恒丰银行基于大数据平台构建数据仓库的研究与实践
恒丰银行原传统数据仓库是建立在IOE(IBM.ORACLE.EMC)传统架构体系上,已接入数据源系统有30多个,配套建立监管数据集市.数据分析集市,风险数据集市三个主要数据集市,负责十几个管理应用和监 ...
oracle 孙帅_农村居民点空间大数据平台构建方法研究
农村居民点空间大数据平台构建方法研究孙帅,王彪 (北方工业大学建筑与艺术学院,北京 100144 ) [摘要] 通过低空无人机实景建模技术,采集并构建农村居民点空间大数据平台.充分发掘海量空间数 ...
在线教育大数据营销平台实战（一）：大数据平台构建实战
作者介绍 Tigerhu 在线教育公司大数据营销产品线负责人. 本人目前在一家在线教育公司担任大数据营销产品负责人,由于一些机缘巧合,我同时负责了数据产品线和营销CRM产品线,因此给了我更多的机会去思 ...
腾讯大数据平台构建之道
点击上方 "大数据肌肉猿"关注, 星标一起成长点击下方链接,进入高质量学习交流群今日更新| 1052个转型案例分享-大数据交流群导读:腾讯作为国内体量最大的互联网公司之一,业 ...
大数据平台构建智慧城市赋能中心
城市大数据平台是城市治理架构中数据层的核心,连接着基础设施层与应用层,核心功能是归集.处理.分析城市数据资源,并支撑上层应用.目前,城市大数据平台已成为智慧城市的应用赋能中心,起到核心枢纽的作用. 城 ...
农业种植大数据平台构建
从事了10年的软件开发.项目管理工作,最近收集了一个农业种植大数据的需求,将其整理,形成一个种植大数据的项目需求.如下分几点去讲述需求并形成一个系统: 第一:影响种植的因素有哪些? 第二:其数据规模与 ...
《企业级大数据平台构建：架构与实现》阅读总结
目录基本结构 1. 网络虚拟化 1.1 大二层交换网络 1.2 SDN(Software Defined Network) 1.3 NFV(Network Function Virtualizati ...
利用智领云BDOS构建智能楼宇物联网大数据平台
智领云赋能智能建筑技术升级 --利用BDOS大数据操作系统构建智能楼宇物联网大数据平台随着云计算.大数据和物联网等先进技术逐渐融入到智能建筑中,"智能建筑"的概念已经不再局限于传 ...

大数据平台构建常见问题

大数据平台构建常见问题相关推荐

最新文章

热门文章