艾瑞咨询发布《2021年中国数据库行业研究报告》,可同时实现海量大数据联机交易和联机分析的「湖仓一体」创新架构成为数据库未来发展新趋势。

上周,艾瑞咨询首次发布中国数据库行业研究报告。《2021年中国数据库行业研究报告》梳理了各种类型数据库的技术架构和适用场景,从供需双方视角分析了中国数据库市场的存量增量、市场格局、选型指标以及行业典型应用实例,并基于上述研究讨论了数据库市场的挑战与未来趋势。报告全文请点击「链接」下载。

《2021年中国数据库行业研究报告》中指出,“政策和数字化持续释放需求,中国数据库市场进入百花齐放的快速发展期。2020年,国内数据库市场总规模达247.1亿元,较2019年增长16.2%,CAGR(2020-2025e)达15.6%,未来三年预计将保持高增长。国产数据库在分布式改造、国产化、数据迁移、跨库管理、软硬结合等多方面仍面临挑战,湖仓一体、DBaaS等五大趋势将成为中国数据库市场未来发展的必然趋势。”

SequoiaDB 巨杉数据库的湖仓一体融合数据平台入选该报告的典型厂商案例。基于「湖仓一体」架构,巨杉数据库打通了不同业务类型、不同数据类型之间的技术壁垒,实现交易分析一体化、流批一体化、多模数据一体化,最终降低数据流动带来的开发成本及计算存储开销,提升企业运作的“人效”和“能效”。

Cloudera退市,湖仓一体或引领大数据的下半场

同样是在上周,据 TechCrunch 报道,KKR 和 CD&R 将以 53 亿美元收购 Cloudera,Cloudera 将私有化。2008年,Hadoop 顺利通过孵化器成为 Apache 的顶级项目,包含众多子项目。同年,第一家 Hadoop 商业化公司 Cloudera 成立,创始人来自 Google、FaceBook 和 Yahoo!。随着不断发展和融资,Cloudera 在 2014 年的市值达到近50亿美元的顶峰,是Hadoop生态系统中规模最大、知名度最高的公司。在 Hadoop 最鼎盛的阶段,几乎所有公司的大数据平台都使用了Cloudera、Hortonworks 和 MapR 的 Hadoop 发行版。但随着Hadoop逐渐受到公有云和数据湖等技术的冲击,Cloudera 的股价也随之不断缩水。2018年 Cloudera 宣布与 Hortonworks 合并,但这并未挽救颓势。2021年4月 Apache 宣布关闭13个与大数据有关的 Apache 项目,其中10个项目属于 Hadoop 生态系统,如今 Cloudera 也即将私有化,这也许代表着 Hadoop 已辉煌不再,那么谁将引领大数据的下半场?

同时,艾瑞咨询《2021年中国数据库行业研究报告》指出,“1980s以来,数据仓库技术不断发展,尤其MPP架构使得DBMS能够处理大量数据,满足企业通过数据分析来支持商业决策的需求。但随着互联网的发展,许多企业需要同时处理非结构化数据,半结构化数据以及海量结构化数据。数据湖随之诞生,它可以直接存储各种格式的原始数据,根据用户需求进行计算,具有灵活弹性的优点。但是,数据湖虽然适用于存储多元化数据,却缺少一些企业级功能,在实际执行时也存在许多挑战:数据缺少加工,难以实现实时分析,数据查询性能差;不支持ACID事务等。而湖仓一体实现架构创新,作为中国数据库行业市场新趋势之一,能够同时实现海量大数据的联机交易和联机分析。”

面对海量大数据场景下的联机交易、非结构化数据治理等需求,以及数据仓库和数据湖存在的不足,以Snowflake、Databricks及巨杉数据库为代表,聚焦于新一代“湖仓一体”架构的数据库厂商,开始在面向全新海量联机业务的场景中快速崛起。“湖仓一体”由数据湖和数据仓库概念延伸而来,融合了两者的架构特性。在传统独立构建数据湖及数据仓库模式的基础上,“湖仓一体”演进出对不同数据类型(结构化、半结构化与非结构化)的存储和联机处理能力,为企业提供裸数据存储、数据加工、数据分析展现等能力的统一平台。

在巨杉数据库的典型应用架构中,企业通常基于其产品「湖仓一体」的架构特性,构建数据基础设施平台型,以整合以往分散管理的结构化、半结构化和非结构化数据。巨杉数据库充分兼容包括:MySQL、MariaDB、PostgreSQL、MongoDB、Apache Spark、S3、NAS、SDB API在内的8种接口,其特有的跨引擎事务一致性能力,可以有效简化多团队开发流程中对不同引擎及结构的ACID管理,提升业务开发、数据处理、运维管理多方面提升企业的综合数据管理效率,避免了传统数据湖、数据仓库独立建设带来的ETL延迟及数据冗余存储,降低了技术栈的复杂性。另外,该平台提供丰富的生态对接,支持包括Tableau、Power BI、帆软、SmartBI等国内外分析工具,提供数据分析报表、商业智能决策等。

相比数据湖,巨杉数据库湖仓一体架构能够支撑联机交易和联机分析的场景,弥补了通过Hadoop技术在数据库实时处理能力方面的重大不足。随着企业数字化转型的深化,尤其是在数据中台、智能化应用进行微服务改造的过程中,企业内部出现了大量需要同时访问多个不同业务系统(几个到几百个)数据的联机交易场景,底层数据库具备大规模实时联机处理能力显得尤其重要。

相比数据仓库,巨杉数据库湖仓一体架构作为支持联机处理的统一数据底座,多类型的可以实时打通,避免不同平台间的数据移动,大大降低了数据处理的时间成本。企业可以对不同岗位的研发及业务人员开放自由查询能力,无需通过IT部门人员进行复杂建模,大大提升了应用开发的敏捷性,让业务从T+1走向T+0。

基于湖仓一体架构,巨杉数据库提供对机器学习和AI算法的支持,实现数据湖+数据仓库的闭环,极大地提升业务的效率,有效帮助企业增强数据复用能力,全方位提升管理及开发效率。

相关阅读

巨杉数据库入选广州金融科技创新监管工具第二批创新应用项目(转自中国人民银行广州分行)

巨杉数据库成为2021年全球数据库领域顶会ACM SIGMOD钻石赞助商

数字化转型浪潮下,湖仓一体如何支撑企业走向数据智能 | 爱分析洞见

艾瑞咨询中国数据库行业研究报告正式发布,湖仓一体架构获业界认可相关推荐

  1. 数据 3 分钟 | 《数据安全法》即将施行;ACM SIGMOD在西安举办;艾瑞咨询发布数据库行业报告...

    数据 3 分钟 由 ACDU (中国 DBA 联盟) 与墨天轮联合出品的全新视频节目上线啦-三分钟带你来了解数据行业动态,节目内容主要包含数据行业最新的产品发布.公司大事件.行业新闻等. 本期内容概览 ...

  2. 数据 3 分钟 | ShardingSphere 核心团队获融资、巨杉数据库发布湖仓一体架构多款产品...

    数据 3 分钟 由 ACDU (中国 DBA 联盟) 与墨天轮联合出品的全新视频节目上线啦-三分钟带你来了解数据行业动态,节目内容主要包含数据行业最新的产品发布.公司大事件.行业新闻等. 本期内容概览 ...

  3. 湖仓一体助力金融科技,巨杉数据库入选艾瑞咨询“2021年中国FinTech TOP 50企业”

    12月29日,艾瑞咨询重磅发布<2021年中国FinTech行业发展洞察报告>,对金融科技行业的发展现状及趋势进行了深度洞察.同时,报告发布了"iResearch-FinTech ...

  4. 巨杉数据库(湖仓一体)荣登粤港澳大湾区金融科技飞鱼企业20强

    近期,首届粤港澳大湾区金融科技飞鱼企业20评选活动(下称"飞鱼20评选活动")顺利完成,并于4月9日发布<2021年粤港澳大湾区金融科技飞鱼企业20评选报告>(下称&q ...

  5. 国产数据库哪家强?除了阿里华为,还有湖仓一体的SequoiaDB巨杉数据库!

    在过去的30多年,国产数据库一直都是跟随在国外数据库之后,Oracle.MySQL.SQLServer.PostgreSQL及MongoDB等国外厂商一直都霸占着最受欢迎数据库的榜单,但经过10年打磨 ...

  6. 「湖仓一体」释放全量数据价值!巨杉数据库亮相2022沙丘大会

    近日,由数字化研究与知识服务平台沙丘社区主办的2022·沙丘大会成功举办,巨杉数据库受邀出席大会,并在湖仓一体专场进行<湖仓一体释放全量数据价值>的主题演讲. 近日,由数字化研究与知识服务 ...

  7. 深度解析艾瑞咨询《2017年度中国商业智能行业研究报告》

    近日,艾瑞咨询发布了2017年度<中国商业智能行业研究报告>,聚焦于人工智能和商业智能的行业应用,即人工智能技术如何应用于商业智能决策,以及如何实现商业经营的智能化与自动化. 该报告指出, ...

  8. 【报告分享】汽车产业变革的浪潮之巅-中国智能驾驶行业研究报告-艾瑞咨询(附下载)

    摘要:智能驾驶技术的发展不仅将改变多年来人类驾驶车辆的行为习惯,更重要的是将在交通安全.运输成本.用车效率和空气污染等方面推动整体社会的发展和进步,是一场由工业领域和交通领域共同拉动的产业革新.在智能 ...

  9. 【报告分享】2021年中国游戏直播行业研究报告-艾瑞咨询(附下载)

    摘要:我国游戏直播行业起步较晚但是发展迅速,目前行业已经进入了成熟发展期,从2017年开始,不论是我国游戏直播行业的市场规模还是用户规模都呈现出快速增长的趋势,2020年的市场规模达到了300亿元,同 ...

最新文章

  1. 使用进程池模拟多进程爬取url获取数据,使用进程绑定的回调函数去处理数据...
  2. .NET Core 使用 nlog 进行日志记录
  3. Win10 通过升级安装完成后出现了中文字体忽大忽小的问题解决。
  4. Android之layout属性介绍
  5. 一直对zookeeper的应用和原理比较迷糊,今天看一篇文章,讲得很通透,分享如下(转)...
  6. 软化边硬化边_启示录:做完线雕第三天特别丑、边哭边讲线雕有什么副作用?...
  7. php key sort,PHP中的sort(), rsort(),asort(),arsort(),ksort(),krsort()函数
  8. GetRows的用法详解
  9. STM32CAN波特率简易计算
  10. 等价类划分法用例设计
  11. lol大脚一直卡在读取服务器信息,英雄联盟大脚 - 英雄联盟 - LOL英雄联盟官网 - 英雄联盟攻略 - 英雄联盟专题站...
  12. 数据挖掘十大经典算法
  13. 如何将纸质书怎么弄成电子版?如何将纸质文档变成电子文档,下面教你方法
  14. Maya测量尺寸python脚本Mesh Resizer
  15. 秒杀活动总结(秒杀之一)
  16. 通过空气质量指数AQI学习统计分析并进行预测(上)
  17. 年轻计算机科学家,15岁最年轻科学家具体什么情况? 谈方琳个人资料介绍有何成就...
  18. 某位算法工程师对自己工作的反思
  19. 你和阿里资深架构师之间,差的不仅仅是年龄(进阶必看) 1
  20. mysql约束表达式大全_SQL常用约束语句

热门文章

  1. PageOffice在线只读打开word文件并禁止复制
  2. Robi改造计划更新---框架可以动了
  3. 26-类的静态成员函数
  4. 以新增用户为例子解释前后端整体连接方式详解(Service、Mapper、Controller、Entity)
  5. 关于单片机内存解释的整理(学习笔记篇)
  6. 数字图像处理(冈萨雷斯版)学习笔记(3)第3,6章
  7. FastDFS图片服务器实践
  8. 理解Spring定时任务@Scheduled的两个属性fixedRate和fixedDelay以及固定时间的定时cron
  9. linux oracle配置远程连接
  10. OpenHarmony HDF 框架介绍