2021年12月7日,Gartner最新研究揭示,基础设施和运营(I&O)领导人在未来12至18个月必须开始为六大趋势做好准备。其中,无论是准时化基础设施(Just-In-Time Infrastructure)、还是数据增生(Data Proliferation)、业务敏锐度(Business Acumen),都预示着企业需要拥有更具适应性和弹性、更实时的数据管理基础设施能力,从而支撑迅速作出更符合业务需求的决策和行动。

显然,山东城商行联盟已经为该趋势做好了充足准备。

近日,山东城商行联盟和DataPipeline数见科技共同宣布,山东城商行联盟为59家银行构建的数据库准实时数据采集系统正式投入使用,该系统基于DataPipeline企业级实时数据平台打造。该项目的实施对于推动城市商业银行实现企业数字化转型、数据规范化和集约化管理、赋能企业经营及增强其持久核心竞争力具有重要意义。

业务需求当先,拥抱实时数据管理

山东省城市商业银行合作联盟有限公司经原中国银监会批准成立,是目前全国唯一持有金融牌照的中小银行金融科技服务公司。公司为数十家成员行提供集核心业务系统、互联网金融系统、外联业务平台、大数据服务及运营、风控支持等全方位的信息科技解决方案以及培训、咨询、合作创新等多元服务,引领成员行通过科技创新推动业务发展和转型升级,是山东省大数据重点骨干企业。公司致力于打造赋能中小银行、开放共享的金融科技生态平台。

在云计算、大数据、人工智能快速发展背景下,金融行业适应客户需要的多样化和个性化场景不断涌现。经过10多年的电子化发展、信息化建设,山东城商行联盟积累了海量的数据,如何利用好这些数据成为了联盟应对新形势挑战、谋求转型发展的重要课题。相对于大型商业银行,降低运营成本、提升客户体验、提高营销能力等转型工作对于以山东城商行联盟为代表的的城市商业银行在科技创新发展上更为关键。

随着数据应用的深入,成员行业务部门不断提出更复杂的实时数据加工需求,新需求的加工复杂度持续升高、使用场景持续扩展、交付效率持续加快、运营质量要求持续提升。为提升实时数据支撑能力,山东城商行联盟开始启动实时数据体系建设。该体系需要实现综合业务系统CBUS、外联业务处理平台XBUS、ESB服务总线、电子银行等系统的数据实时采集、同步、分发。如何打通Oracle、IBM DB2、MySQL、Kafka等多种数据管理技术,实现每日产生的数亿条数据的整合,成为联盟亟待解决的问题。

打造金融级平台2.0,多场景落地

企业级数据库准实时数据采集系统架构图

山东城商行联盟在过往服务成员行过程中,业务端在取数时,首先需要将各数据源通过CDC模式将数据实时同步至中间库;其次,源端数据同步至中间库后,通过CDC实时下发至各个下游用数方。在该过程中,由于上游发版频繁,中间库的数据结构均需要相应变动,数据同步过程中系统维护工作量较大地影响了数据应用方的取数时效性。为了能够更好地服务联盟成员行,山东城商行联盟需要重新构建统一的数据库准实时数据采集系统,实现通过数据流平台近实时地向各外围系统供数的目的,进而及时高效地支持成员行的运营、市场、销售等实时业务需求。

山东城商行联盟通过产品调研、可行性分析、POC验证,选择DataPipeline数见科技作为合作伙伴共同完成数据库实时数据采集系统项目的实施。该方案三大核心能力与联盟实时数据管理体系整体策略高度契合:

01 多元异构

Oracle、IBM DB2、MySQL、Kafka等多种数据库进行近实时的数据采集功能,并对数据源建立高效的管理功能,实现对数据源、目的地的数据连接统一管理管理,通过界面进行数据源与目的地注册,删除数据源,同时根据需求不断迭代支持新的数据库。

02实时同步

利用解析数据库归档日志的方式,实现秒级的数据变更捕获,将解析的变更记录传送到数据目的地中,包括日志中提取数据变更的增、删、改等DML操作记录,以及新增表、删除表、添加字段、删除字段等自动同步到目的地中。

03标准管理

统一的可视化管理页面,提供平台级别的数据管理功能,包括产品权限、数据时效管理和安全管控等方面功能,为数据工程师、运维人员提供直观的数据任务地图,随时可以洞悉数据的最新动态,极大提升运维工作效率和效益。

面向未来,山东城商行联盟将持续利用实时数据管理技术,为成员行客户提供更多便捷、高效的金融服务,支撑智能化、定制化、更懂客户的数字银行服务。而DataPipeline也将加大对实时数据管理技术的投入力度,深化与金融业务的场景融合,助力金融行业的数字化变革升级。

点我了解DataPipeline更多信息并免费试用

「山东城商行联盟」数据库准实时数据采集系统上线,DataPipeline助力城市商业银行加快数字化转型相关推荐

  1. 神策数据首批入驻「WPS企业服务联盟」

    近几年,国内企业服务行业的创业浪潮可谓风起云涌,各种企业级服务公司如雨后春笋般大量涌现.国内企业服务市场之所以在近两年爆发,除了得益于资本的热捧之外,更主要的原因在于企业级服务市场在国内发展的条件日益 ...

  2. 陨算计算机技术有限公司,基于准实时数据的智能配电网理论线损计算.docx

    基于准实时数据的智能配电网理论线损计算李滨,杜孟远,韦维,韦化530004)(广西大学 电气工程学院,广西南宁摘要: 目前配电网自动化覆盖率低,可采集到的数据较少,因此提出一种基于准实时数据的理论线损 ...

  3. 进军东南亚市场,腾讯云数据库 TDSQL 助力印尼 BNC 银行数字化转型

    腾讯云数据库在助力金融核心系统分布式替换上,已经辐射到了东南亚市场. 东南亚最大的银行之一印尼BNC银行(Bank Neo Commerce)已正式完成新核心分布式迁移,使用腾讯云数据库TDSQL后, ...

  4. 统计app用户在线时长_「云工作普及系列」2.如何实时统计工作时长,提高工作效率

    记上节我们讲了[1.如何注册云工作平台]之后,接下来一起探索下该平台提供的各个产品功能.今天主要讲一下如何它的实时统计工作时长是怎么实现的? 我们先来了解一下它的工作时长实时统计的功能. 一,从web ...

  5. 「实在RPA·税务数字员工」助力税务乘上数字化转型快车

    中共中央办公厅国务印发<关于进一步深化税收征管改革的意见>表示:着力建设以服务纳税人缴费人为中心.以发票电子化为改革突破口.以税收大数据为驱动力的具有高集成功能.高安全性能.高应用效能的智 ...

  6. 「Python爬虫系列讲解」七、基于数据库存储的 BeautifulSoup 招聘爬取

    本专栏是以杨秀璋老师爬虫著作<Python网络数据爬取及分析「从入门到精通」>为主线.个人学习理解为主要内容,以学习笔记形式编写的. 本专栏不光是自己的一个学习分享,也希望能给您普及一些关 ...

  7. 「Python爬虫系列讲解」八、Selenium 技术

    本专栏是以杨秀璋老师爬虫著作<Python网络数据爬取及分析「从入门到精通」>为主线.个人学习理解为主要内容,以学习笔记形式编写的. 本专栏不光是自己的一个学习分享,也希望能给您普及一些关 ...

  8. 「Python爬虫系列讲解」十二、基于图片爬取的 Selenium 爬虫

    本专栏是以杨秀璋老师爬虫著作<Python网络数据爬取及分析「从入门到精通」>为主线.个人学习理解为主要内容,以学习笔记形式编写的. 本专栏不光是自己的一个学习分享,也希望能给您普及一些关 ...

  9. 「Python爬虫系列讲解」十四、基于开发者工具 Network 的数据抓包技术

    本专栏是以杨秀璋老师爬虫著作<Python网络数据爬取及分析「从入门到精通」>为主线.个人学习理解为主要内容,以学习笔记形式编写的. 本专栏不光是自己的一个学习分享,也希望能给您普及一些关 ...

最新文章

  1. 002 在大数据中基础的llinux基本命令
  2. Git 新建仓库推送远程技巧
  3. 手机端召唤Debug
  4. 字节流通向字符流的桥梁:InputStreamReader
  5. Thread、Runnable和Callable
  6. Eclipse中Errors occurred during the build最简单的解决方法
  7. 电脑关机很慢是怎么回事
  8. php 字符串进行计算_PHP eval() 函数把字符串按照 PHP 代码来计算
  9. YII 1.0 隐藏单入口index.php 设置路由与伪静态
  10. 指向类成员的指针并非指针
  11. HTML学生网页设计作业成品~化妆品官方网站设计与实现(HTML+CSS+JS)共8个页面
  12. Java—筛选法求素数
  13. 【安全问道】系列:阿里带你3分钟掌握一个互联网安全知识
  14. js实现学生信息表案例--详细教程
  15. CheckM-Options-zn
  16. 预防死锁,检测死锁,避免死锁,解除死锁....
  17. 我和CSDN的故事(CDSN成立20周年———准程序员响应号召)
  18. ssm框架外卖订餐系统
  19. 机器学习笔记(十)——这样推导SMO算法才易理解
  20. html 设置整体字体,HTML字体的设置

热门文章

  1. 夫妻一方未经授权代签贷款合同不具法律效力
  2. NSSearchPathForDirectoriesInDomains对文件的操作
  3. 考试椅的全球与中国市场2022-2028年:技术、参与者、趋势、市场规模及占有率研究报告
  4. mock.js如何使用?简单易懂,一学就会,一篇文章即可出师
  5. DeFi收益来源全面概述
  6. odoo点击按钮弹出确认操作提示框
  7. 中国医用类金刚石碳涂层(DLC)行业市场供需与战略研究报告
  8. ab-web压力测试
  9. python - 啃书 第五章 函数
  10. Transformer课程 业务对话机器人Rasa 3.x Tuning Your NLU Model(二)