大数据技术经过近几年的快速发展,在企业数据中心的基础设施上已不鲜见,尤其是金融行业,大数据技术应用一直走在其它行业前面,它们在以数据湖、融合数仓、湖内数仓(Data LakeHouse)等一些典型的技术场景中,逐步将大数据生态技术应用到金融企业的风险控制、运营管理、信贷查询、信用卡征信和财务分析等领域。

另一方面,大数据云服务化已经提了很多年,但是目前多数大数据平台的服务能力依旧很弱,很多企业的大数据平台仅承担跑批业务,除了IT岗位的用户之外,其它的业务岗位根本感受不到大数据的存在,更谈不上通过从大数据技术设施得到业务的收益。

其本质原因是大数据基础平台软件并不具备云服务化的基础能力。

大数据云化,提升数据投资回报率

大数据的各个组件成为一种服务化的形态,主要是将一个大数据中心的服务能力进行虚拟化,多个用户群体可共用服务能力,单个用户群体有类似独占的使用体验,而且随着用户群体规模和类别的增加,资源可以轻量化弹性伸缩,自动发放与回收,底层基础架构的耦合比较轻,甚至解耦。

在这种架构下,用户的需求,可以更快地被响应和实现。

因为云原生技术可以有效地缩短应用交付的周期,让需求更快落地,最终为用户服务,动态实现价值。

所以,一个本地建设的大数据中心往往需要大量的资金、人力的投入,为单个用户群体建立专用中心是不现实的,因此大数据服务的云化在这些场景很有价值,也可能是必须的选择。

在当前的云计算产业商业模式下,未来金融企业的大数据基础设施向公有云或者混合云部署模式转变成为必然,随之而来的是用户对云服务提供商的合规和信息安全的要求会进一步提高。

当大数据被赋予云原生的含义后,大数据的真正业务价值才会逐步绽放,大数据固定资产投资才能真正变现,从而让更多的领域从大数据中获益,全面提升大数据的投资回报率。

某行大数据服务云BDSP案例

烟囱式的数据平台,导致“数据孤岛”

全行各业务线数据量不断增加,业务侧对数据需求非常迫切,旧有的模式是业务提需求给开发中心,开发中心安排开发资源管道,大量的需求积压,甚至由于开发周期太长导致需求已经没有了实际意义。

另外行内烟囱式的数据平台建设导致“数据孤岛”,给开发人员带来大量的数据拉取和整合的工作量。耗费了大量的人力物力以及时间,还导致了业务侧的投诉和抱怨,工作效率严重滞后。从投资成本来看,业务倒逼IT的烟囱式的数据平台的投资建设,耗费了庞大资金和人力投入,协同效能的提升问题凸显。

数据按照业务归入“一湖两库”

通过引入华为云EI智能数据湖FusionInsight提供的MRS+DWS大数据云服务化产品,将行内的基础数据需求按照业务划分为数据湖、数据仓库和集团信息库,即“一湖两库”为核心,通过不同的数据处理手段将数据持久化;通过华为MRS和DWS产品提供的组件将主流的数据处理引擎集成在大数据服务云平台中;再将这些数据服务以租户渠道方式作为接口开放,例如“数据集市”、“损益预查询”,最后用户通过自助或者固定的应用服务渠道来获得大数据服务,如“分析师工作台”。

平台全部尝试采用全国产化技术,基于ARM技术服务器和华为MRS产品构建了1000+节点的大数据云化服务集群。

在行内的大数据服务云场景中,真正提供服务核心的是一个全行共用的大数据基础平台(MRS+DWS),使用服务的是多个不同的用户群体,各用户群体以租户形式互相隔离(租户渠道层),单个租户在限定的范围内使用大数据的服务。

如上图,大数据服务云平台提供用户自服务的渠道,例如风险计量或者分析师工作台。用户自行管理租户资源池内可用的资源、数据等内容。在使用过程中平台提供用户的验证、访问的管控、审计,对资源使用的计费等衍生问题的处理。

最后

将大数据基础平台在云化基础设施上的部署,使得大数据系统降低了建设、部署、运维等环节的投入,体现在在多个租户间平摊大数据中心的建设、运维成本,提高大数据中心的使用效率。

而且基于存算分离的架构部署,有效的节约了存储成本,真正做到资源的“按需分配”。

对于单租户,省去了维护大数据系统带来的庞大资金和人力投入,使得大数据系统降低了建设、部署、运维等环节的使用门槛,助力普通员工轻松使用大数据应用。

华为云828企业上云节将带来更低的云上部署成本,你还在等什么?

点击关注,第一时间了解华为云新鲜技术~

银行大数据新玩法,构建“一湖两库”金融数据湖相关推荐

  1. 安卓关于健身的代码_亲子运动健身新玩法,娱乐享瘦两不误,让孩子不再沉迷电子产品...

    每次和姐妹逛街,看到那些漂亮小姐姐们在电玩城跳舞机上跳舞,心里都痒痒的想要自己上去试试,可就是因为不熟练,大庭广众之下害羞怕丢脸,最后放弃了.可每次路过还是会羡慕那些敢跳的姐姐们! 平常工作忙,压力大 ...

  2. 【2021年9月游戏行业网络关注度榜】大IP新玩法吸引玩家 网易再出爆款手游

    2021年9月,中国游戏行业继续稳步发展.新浪游戏联合微热点研究院&新浪舆情通推出<2021年9月游戏网络关注度分析报告>,以下为报告详情: 9月最热手游--王者荣耀 据微热点研究 ...

  3. 数据与智能武装营销飞轮,网易探索C2B时代营销新玩法

    新科技.新商业.新模式,电商行业历经多年的发展,已经不止于单一的线上交易模式了.在新技术大量应用于电商,催生新商业模式.新交互体验的环境下,电商竞争日趋激烈,新玩法层出不穷.如何借助数据与AI技术,找 ...

  4. ipad android tv,先河私有云持续大动作:继iPad/Android TV端/系统分享功能后,还有新玩法?...

    原标题:先河私有云持续大动作:继iPad/Android TV端/系统分享功能后,还有新玩法? 由5.1劳动节伊始,勤劳的先河小蜜蜂们(先河研发人员)可是忙疯了! 首先是经过连日来的挑灯夜战,5月18 ...

  5. 测网速还能拿奖励?测速 App 的新玩法

    图片付费下载于视觉中国 在刚刚召开的 2021 第二十届中国互联网大会上,工信部披露最新数据,我国 5G 基站已建设 91.6 万座,占全球 70%.5G 普及将带来更快网速,不过根据安迪比尔定律,移 ...

  6. 二手车 电商+互联网金融的三种新玩法

    本文讲的是二手车 电商+互联网金融的三种新玩法,高歌猛进的二手车电商行业仍然没有找到盈利模式.作为二手车交易的线上平台,仅仅依靠2%-3%的交易手续费或佣金,远不能覆盖其运营成本. 2015年上半年, ...

  7. 【转载】透视“专利恶霸”系列之二 蜕变后的苹果有了新玩法

     透视"专利恶霸"系列之二 蜕变后的苹果有了新玩法   来源:IPRdaily                             作者:陆峰 三.苹果恶霸行为的实证分析 ...

  8. 卡内基梅隆大学副教授张旆:传感系统新玩法,物理响应分析人的生老病死

    受访者 | 张旆 采访者 | 伍杏玲 出品 | CSDN(ID:CSDNnews) 随着万物相联时代来临,我们身边随处可见物联网技术:我们使用智能门锁进入房间,智能窗帘缓缓拉开,智能扫地机器人开始工作 ...

  9. 跟随弹幕停不下来?智慧文娱还有哪些新玩法 ​

    阿里妹导读:随着 5G 开启商用.机器智能愈发成熟,在技术发展的新阶段,我们在文娱的体验上将会有怎样的提升?本文将通过十个场景来分享技术革新下智慧文娱的新玩法. 文末福利:评论区留言送书. 一  修复 ...

最新文章

  1. c#获取应用程序目录
  2. loadrunner中自定义查找并替换函数
  3. 【Runtime Error】打开Matlib7.0运行程序报错的解决办法
  4. 开始报名丨CCF C³-05@亚马逊云科技:未来云计算之旅
  5. 封神-性能容量分析报告
  6. Pixhawk飞控源码目录结构及编译流程分析
  7. JavaScript特点、优缺点及常用框架
  8. your port 80 is actually used by server IIS解决办法
  9. FlvDownloader升级版DownloaderPlus发布
  10. [hashmap|空间换时间] leetcode 1 两数之和
  11. Java实现本地缓存
  12. VS 2010 快捷键
  13. IMU与Gyro及其它相关
  14. android 微信读书,微信读书(com.tencent.weread) - 5.4.3 - 应用 - 酷安
  15. 2022年调味品行业研究报告
  16. geek.exe是什么_How-To Geek正在雇用一名Geeky作家-以下是详细信息
  17. 网络安全基础(十四)
  18. 【SEO优化】SEO应该是我们现在理解的这样吗?
  19. Altium Designer PCB 插入图片logo的方法
  20. 如何生成一个二维码?

热门文章

  1. python office库使用_看完这篇Python操作PPT总结,从此使用Python玩转Office全家桶就没有压力了!...
  2. sql统计系统时间那一个月数量_关于BE00007图书借阅管理系统bug修复总结
  3. python包里面的dll是什么_使用R的程序包提示我们无法使用怎么回事?因为计算机丢失jvm.dll...
  4. 易语言不用oracle客户端_大叔学中文编程之易语言02
  5. java stringbuilder清空_Java中StringBuilder的清空方法比较
  6. macos 编译php,TODO:macOS编译PHP7.1
  7. php使用curl实现get和post请求的方法,数据传输urldecode和json
  8. vue动态设置文字布局方式_十大惊人的文字动画特效
  9. 线性表—顺序表-顺序表基本运算的实现
  10. 字符串和字符串数组和\0