作为 Hadoop 原生的企业级 OLAP 大数据分析产品,Kyligence 是 IBM Cognos 在大数据场景下的最佳迁移方案,已经成为金融企业替换 IBM Cognos 技术的主流选择!

本文将通过剖析金融企业使用 Cognos 中碰到的瓶颈问题,结合 Kyligence 在某保险企业与某大型金融公司的实际应用为例,为大家展示 Kyligence 是如何替换Cognos OLAP 后台服务,提供基于分布式架构的大数据 OLAP 能力,突破 Cognos 固有的支持维度数少、性能低、没有单元格级别的 ACL 能力,无法连接大数据平台等局限,并与 Cognos 报表工具无缝集成,帮助企业实现海量大数据上的亚秒级查询体验,赋能企业整体分析和决策效率。

前言

随着企业向“互联网+”和“金融科技”的转型,数据量和数据分析需求都成爆发式增长,面对来自经营分析、客户管理、精准营销、风险防控等业务的分析需求, Cognos OLAP 组件在数据量、维度数量、维度基数、查询速度、构建性能、并发能力等方面的不足以及高昂的使用成本使得企业用户无法基于其平台充分应对大数据多维分析的挑战。

如某全国性金融机构,Cognos 的单次查询时间平均在15分钟,最长超过1小时,数据分析人员无法进行多维分析,只能查看预先生成的固定报表。另外某国有银行,为了减少权限变动导致的数据刷新次数,同样的分析主题需要为每个分行单独构建 Cube,导致全行 Cube 数量超过 2,000 个,开发和运维压力非常大。因此将企业级 OLAP 分析平台从传统技术迁移到适用超大规模数据集,特别是基于 Hadoop 平台、原生的 OLAP 技术成为越来越多国内外金融企业的选择。

IBM Cognos 是传统的商务智能(Business Intelligence)产品,进入市场早,功能较完善和稳定,成为当时业界公认的主流 OLAP(Online Analytical Processing,联机分析处理)产品之一,在银行、保险、证券、电信等传统行业有着广泛的使用。

最近几年,很多企业开始基于 Hadoop 技术建设大数据分析平台,以更好的支持企业对业务数据、用户行为数据、日志数据,外部数据的融合分析,但 Cognos BI 对于 Hadoop 技术的兼容性差,以及 Cognos Power Cube 本身的技术局限性,使得企业缺乏在大数据平台上进行 OLAP 多维交互式分析的能力。Kyligence 的产品作为 Hadoop 原生的企业级 OLAP 大数据分析组件,能够提供 PB 级数据集上的亚秒级多维交互式查询能力,目前已成为金融企业替换 Cognos OLAP 技术的主流选择。

保险案例Kyligence +Cognos BI融合分析实践

以某国内大型保险公司为例。在产险公司保费增速和综合成本率双优目标背景下,企业期望以管理会计的全新视角归集财务成本,整合车险、非车险、渠道、费用等近4亿业财数据进行细粒度多维分析,为财务部门提供保单级数据多维经营分析和成本考核。然而传统 Cognos Power Cube 由于本身技术架构的局限性,无法对业财整合后的海量数据实现高效分析,跨年多维分析的延迟常常慢到分钟级;无法满足对业财融合数据的数百个维度和指标进行灵活高效分析的需求,分析维度和分析指标偏少,单个分析场景仅能支持10个以内的维度的灵活组合分析;且分析时效滞后,分析预见性差以及回溯分析困难。

Kyligence 基于 Hadoop 分布式技术框架,则将 Cube 能力提升到一个崭新的层次——单一 Cube 支持数百TB甚至PB级源数据,Cube 维度和指标数目敏捷扩展,支持百万级高基数维度分析,支持高并发数据查询。Kyligence Cube 能够作为数据源无缝连接 Cognos BI,在保留业务用户使用习惯的同时,提升多维分析性能和体验。

以绩效考核分析场景为例,财务人员能够从分公司/中支公司/支公司/科室/经办人、渠道、条线、代理点、等分赔付等 40+ 维度对作业成本项目进行责任单位的无限细分,秒级获取 200+ 指标结果,有力地改善作业成本管理,实现精准绩效考核和精益化管理。

金融案例Kyligence替换Cognos,成为企业OLAP平台的新选择

国内某大型金融公司从2007年开始将多维分析理念引入数仓系统,支撑了大量业务分析应用,2012年以后,随着数据量增长,基于 Cognos OLAP 的多维分析平台的一些弊端和技术限制开始显现,例如日/月报数据准备时间长,月报构建时间超过三天,查询性能不稳定,查询延迟从秒到分钟级,甚至小时级,给业务带来极大的困扰。另一方面,整个平台的运维工作量也越来越大,有1,200个 Cube 支撑80%的分析应用,超过5,000个任务调度,给开发和运维带来了巨大的负担。另外,平台在编程和扩展性,权限管理方面都存在瓶颈。

2018年,该企业在其建设的 Hadoop 大数据平台上部署了 Kyligence 公司的智能数据分析平台,向企业内外部提供大数据多维探索和分析服务。日批量由15小时减到2小时,数据准备时间缩减80%;通过1个 Kyligence Cube 替换数百个 Cognos Cube,IT 运维成本缩减90%;实现90%查询响应小于3秒,业务分析效率得到了显著提升;支持在千万级商户粒度进行高性能交互式分析与数据探索,成功推动业务创新。

Kyligence + Cognos极大提升企业分析与决策效率

Kyligence 的产品是基于 Apache Kylin 的企业级智能大数据分析平台,为用户提供PB级数据集上的亚秒级查询能力。作为 OLAP 数据源,Kyligence Cube 能够快速迁移和替换企业原有的 Cognos Power Cube,且无缝对接 Cognos 前端分析和展现组件,例如 Report Studio 和 Analysis Studio,在支持原有业务的同时,大幅增强对新需求、新业务的支撑能力,提升用户在多维探索时的体验。以下是 Kyligence 与 Cognos 的集成架构图:

这里实现了在 Kyligence 和 Cognos 的集成架构中使用同一套用户和数据权限管理机制,显著提升了管理效率,避免用户多次登录。Kyligence 支持将传统 RDBMS 数据库作为数据源,进行 Cube 构建,使得用户无须搬迁底层数据,无须改变前端应用,采用快速而敏捷的方式加速业务交互式查询体验,赋能企业整体分析和决策效率。

以下是 Kyligence Cube 替换 Cognos PowerCube 后的架构对比图。除了Cognos BI,Kyligence 也能和其他BI工具例如 Tableau,Qlik,Power BI 进行无缝集成。

  • 本方案使用 Kyligence Cube 替换传统Cognos Power Cube,突破了传统多维分析在容量、性能、实时性、并发能力方面的瓶颈,该方案具备以下优势和收益:

  • 无缝集成Cognos BI或其他前端展现工具,业务应用无须改变,而是底层数据源实现快速切换;

  • 显著降低Cube设计的复杂度,节省大量重复的开发和运维人力成本,将IT资源聚焦到更多有价值和创新的技术和业务上;

  • 提供智能化方法敏捷迁移现有Cube,实现业务分析体验和效率的提升,大大加速项目部署周期;

  • Cube日增量构建通常能在1小时内完成,大大提升了从数据到业务结果呈现的时效性;

  • 基于PB级数据,无需IT团队事先准备汇总场景,用户可进行灵活拖拽、筛选过滤、钻取等自助分析操作,提供更好的用户体验,加速业务获得数据的效率;

  • 支持读写分离架构,提供稳定的并发性能,满足大量用户同时访问的需求,赋能企业将数据分析和决策能力渗透到企业各个层级。

关于 Kyligence

Kyligence 由首个来自中国的 Apache 软件基金会顶级开源项目 Apache Kylin 核心团队组建,是专注于大数据分析领域创新的数据科技公司。Kyligence 提供基于 Apache Kylin 的企业级大数据智能分析产品 Kyligence Enterprise,以及基于公有云的托管式 Kylin 在线服务 Kyligence Cloud。目前,Kyligence 已赢得了海内外多家金融、保险、证券、电信、制造、零售、广告等企业级客户。

【案例】Cognos + Kyligence:打造大数据时代的OLAP解决方案相关推荐

  1. Apache Kylin 大数据时代的OLAP利器

    1. OLAP简介 OLAP的历史与基本概念 OLAP全称为在线联机分析应用,是一种对于多维数据分析查询的解决方案.典型的OLAP应用场景包括销售.市场.管理等商务报表,预算决算,经济报表等等. 最早 ...

  2. 【Apache Kylin 】 大数据下的OLAP解决方案(原理篇)

    前言 在现在的大数据时代,Hadoop已经成为大数据事实上的标准规范,一大批工具陆陆续续围绕Hadoop平台来构建,用来解决不同场景下的需求. 让我们来想想有哪些业务需求呢? 比如Hive是基于Had ...

  3. 大数据时代:数据保护与流动规则

    作者:王融 书号:978-7-115-43919-2 定价:¥89.00元 <大数据时代:数据保护与流动规则>-京东图书<大数据时代:数据保护与流动规则>-当当图书了解更多详情 ...

  4. 案例 | 即刻智能助力合肥燃气集团迈入“燃气大数据时代”

    随着燃气行业的高速发展,信息化已成为提高燃气企业运营水平的重要手段.为适应未来的发展需求,燃气集团开始积极建设统一的信息化平台,以促进企业的管理流程标准化.管理过程精细化.决策过程智慧化. 企业概况 ...

  5. 大数据时代,谁的眼神锁定你?

    数据时代当前,欢迎来到楚门的世界. 双十一余韵未歇,刚处理完一波售后及退件等"剁手后遗症"的各方人马也已经为再战双十二做好了准备.截至 12 日零点,天猫双十一成交额达 2135 ...

  6. 一线大厂!真实!近距离!接触大数据时代

    2015年,阿里提出中台战略,构建符合大数据时代的"大中台,小前台"组织机制和业务机制.大数据迎来了爆发期,在商业上产生了巨大的价值.可以说因为大数据的发展,才有智能商业的发展,新 ...

  7. 大数据时代的新型数据库 — 图数据库 Neo4j 的应用

    概览 微云数聚(北京)科技有限公司是一家实力雄厚的大数据技术公司,由移动互联网技术专家团队.大数据专业团队和建模博士团队组成.微云数聚专注于研究图数据库技术及其应用,是世界领先的图数据库Neo4j在中 ...

  8. AI、大数据时代,智能安防在智慧城市建设中的发展与应用趋势

    佳都新太科技股份有限公司 袁名人 AI.大数据时代,智能安防在智慧城市建设中的发展现状 智慧城市是充分运用信息通信技术(ICT)感知.分析.整合和处理城市核心系统中的各类信息,对城市规划.建设和运营管 ...

  9. 积极适应大数据时代要求 提升科技化和智能化水平

    10月13日,最高人民检察院副检察长李如林率队来筑调研. 贵州省人民检察院党组副书记.常务副检察长何冀,市委常委.常务副市长陈少荣陪同调研. 李如林一行先后调研了贵阳市公安局块数据指挥中心.贵州大数据 ...

最新文章

  1. [原创]软件测试过程改进的内容和注意事项
  2. python语言及其应用下载_Python语言及其应用 中文pdf完整版[13MB]
  3. oracle中将number类型毫秒值转为时间类型
  4. 第九周项目实践3 利用二叉树遍历思想解决问题
  5. 热模块替换html,热模块替换启用,但不能正常工作http:// localhost:3000/__ webpack_hmr...
  6. 2016-08-05
  7. 在 iOS创建 第一个Cordova 项目
  8. 朱建辉php,朱建辉/laravel-bjyblog
  9. 本地方法(JNI)——编码签名
  10. 意外断电后,Zabbix_proxy 重启无任何相关进程,如何处理?
  11. JavaScript创建对象的三种方式之利用new object创建对象及使用方法(2)
  12. 推荐系统之协同过滤(CF)算法详解和实现
  13. 【协同任务】基于matlab多无人机目标搜索与围捕【含Matlab源码 1205期】
  14. Win32的setlocale详解
  15. Spring Cloud【Finchley】实战-05配置中心的搭建(配合使用Eureka)和Config Server高可用
  16. 使用Springboot+Feign Clients快速搭建REST客户端应用
  17. 应知应会的Word图片技巧(转)
  18. 水下环境线结构光传感器的校正模型
  19. 360手机刷机:360N7pro刷机
  20. 基于入侵杂草和花授粉混合算法的WSN节点部署优化

热门文章

  1. 2020中国人工智能【语音识别】TOP20企业
  2. 网络安全 payload、shellcode、exp、poc
  3. 【noip2016十连测round3】T3 涂色游戏 【矩阵快速幂优化dp】
  4. 3c认证是什么 什么是3C认证
  5. (Latent Space)理解机器学习中的潜在空间
  6. vue js判断长按触发及手指的上滑、下滑、左滑、又滑
  7. 【Unity3D日常BUG】Unity3D中导入Obi插件出现的错误:DLLNotFouindException:libOni
  8. 如何在Unity中画抛物线
  9. iphone6实际屏幕大小_5个最佳免费iPhone游戏(实际上是免费的)
  10. 南京工业大学计算机学院院长,南京工业大学计算机学院副院长宫宁生一行来我校调研...