新一代云原生数据库的设计与实践
数据库与操作系统、中间件组成了基础软件的三驾马车,也是企业 IT 系统必不可少的核心技术。从上世纪 60 年代诞生至今,不论是互联网行业还是银行、电信、制造等传统行业,都依赖着数据库技术的演进。
在步入云原生时代以后,传统数据库在服务可用性、数据可靠性、系统安全性、数据库备份、软硬件投入、系统托管、维护成本、部署扩容、资源利用率等关键方面都有所欠缺。在此背景下,分布式数据库系统获得了令人振奋的发展,云基础设施和数据库进一步整合,弥补了传统数据库的痛点,带来了高可扩展性、全面自动化、快速部署、节约成本、管理便捷等优势。关于数据库技术的讨论焦点已经从上云( On Cloud )到如何与云原生真正结合( In Cloud ),这是一种从外向内的转变,对于数据库而言,拥抱云原生似乎是显而易见又十分正确的道路。
业务种类繁多、数据存量大,成本居高不下;业务增速快,诉求不断变化的挑战,对数据库底层技术能力带来了更高的要求,如何设计一个面向未来的、云原生化的数据库系统?数据湖技术带来了怎样的新特性?运维告警如何智能分析与诊断?这些问题都有赖数据库与云原生工程师们的巧思妙手。
在7月22日即将举办的2022稀土开发者大会上,由字节跳动数据库技术负责人张雷作为出品人的《新一代云原生数据库》专场演讲,将诚邀各个大厂的核心业务专家为开发者们带来自身从业云原生数据库使用探索中的宝贵经验分享。本届开发者大会免费报名中,点击文末阅读原文或识别海报二维码即可与各位牛人分享交流。
演讲主题:云原生数据库技术趋势与英特尔最佳实践
传统的数据库系统基于紧耦合的设计方式,系统的灵活性和伸缩性受到很大的限制。随着云原生时代的到来,资源池化,计算和存储解耦,可以按需按量使用、弹性调度资源,云原生技术下的数据库系统也成为未来技术的主流方向。云原生与分布式结合的新一代云原生数据库具备了高扩展性、易用性、迭代快速、成本降低等特点。本演讲分析了常用云原生数据库的技术流行趋势和技术架构,同时也分享了用户的云原生数据库部署的案例分析,包括如何采用英特尔在数据库技术上的从硬件到软件的整体能力,来帮助用户优化其云原生数据库的解决方案。
演讲大纲:
云原生数据库技术发展趋势
云原生数据库技术生态
典型云原生分布式数据库方案及英特尔最佳实践
演讲嘉宾:任晓蕾 英特尔数据中心与 AI 事业部解决方案架构师
接近 20 年的 IT 工作经验,目前在英特尔公司担任解决方案架构师,主要的技术领域是大数据分析/数据库,在数据库和大数据类软件的架构设计和系统优化方面具有丰富的经验。
演讲主题:Apache Doris 的数据湖分析技术与应用实践
Apache Doris 是一款基于 MPP 架构的开源分析型数据库。依托其强大的并行处理能力和高性能算子,可以在海量数据集上提供亚秒级的交互式查询体验。而近年来,随着数据湖技术飞速发展,越来越多的企业开始依托数据湖技术构建其基础数据的存储架构,并利用数据湖提供的批流一体,事务隔离和数据更新能力,沉淀了大量企业数据。本次分享,将介绍如何基于 Apache Doris 对数据湖中的数据进行快速分析,以及 Doris 在多源数据联邦查询方面的功能和进展。帮助听众了解 Apache Doris 的数据湖分析技术细节以及如何快速构建高效的查询分析体系。
演讲大纲:
Apache Doris 简介及核心功能一览
Apache Doris 数据湖分析技术内幕
基于 Apache Doris 构建统一的多源数据分析系统
Apache Doris 社区及未来规划
演讲嘉宾:李继炳 SelectDB 高级软件研发专家、Apache Doris Contributor
SelectDB 高级研发专家,主要从事 Apache Doris 查询层优化和数据湖相关研发工作,具有超过 10 年的大数据系统和数据库内核领域的设计与研发经验。加入 SelectDB 前,曾任百度大数据部高级研发工程师,负责 Apache Doris 元数据模块的设计与开发。后加入 AWS,负责 AWS Snowmobile EB 级数据迁移服务的设计与实现。
演讲主题:字节云原生数据库(MySQL)的优秀技术实践
字节云原生数据库(veDB for MySQL)自 2020 年 4 月推出以来,已经在字节内部业务大量上线并即将在火山引擎平台正式公测,但由于内部业务大都从 MySQL + 本地 NVME SSD 迁移而来,使用过程中也碰到了不少的问题。比较突出的是,计算存储拉远后造成的性能问题。如何克服这些问题同时又不影响业务侧体验及口碑非常重要。本次演讲会挑选几个典型的技术案例,深入介绍 veDB (for MySQL)技术上是如何克服这些挑战的。
演讲大纲:
字节云原生数据库(MySQL)简介
技术案例一:Fast DDL
技术案例二:Hot (Extended) Buffer Pool
技术案例三:Quick Resharding
技术案例四:Parallel Query
未来技术发展方向
演讲嘉宾:聂愿愿 字节跳动软件工程师
毕业于武汉华中科技大学,有 10 余年的数据库内核开发经历,曾供职于IBM/Teradata/华为,2019 年加入字节跳动基础架构团队,目前负责 veDB (for MySQL) 技术方向及所在团队。主要关注分布式数据库、分布式存储技术方向。加入字节跳动后,从无到有参与构建了 veDB (for MySQL) 产品,并已在字节内部大量上线应用。
演讲主题:云时代下的数据库自治体系建设与实践
伴随业务的高速扩张,美团私有云数据库出现井喷,伴随而来的是大量的告警。这些告警的根因往往需要运维人员长时间的分析,并带来了不可控的时间成本以及误判风险,由此造成的小故障扩大成大事故的案例数不胜数。因此,本次的主题将会介绍如何利用实时计算能力 (Flink/Spark) 构建海量监控数据的计算和存储、基于海量数据丰富数据库的可观测性、结合专家经验 + AI 实现数据库异常发现和根因定位、让决策和处理联动提升故障自愈的能力。
演讲大纲:
数据库实例高速增长下,团队面临的主要矛盾
PB 级的海量监控数据实时计算和存储能力建设
完善数据库可观测性(全量 SQL/Transaction/Lock 等)
基于 AI 的数据库异常发现、根因定位和故障自愈
实际场景中的经典案例展示
演讲嘉宾:蔡金龙 美团基础研发平台数据库研发主管
美团数据库平台研发组负责人,负责过 SRE、KV 和 DBA 相关运维团队,主导了美团关系数据库变更和管控平台 RDS、数据库自治服务 DAS 和数据库安全防火墙 DBSS 相关项目从 0-1 的建设。目前正在构建新一代数据库智能运维平台,借助 AI 实现数据库高度自治。
演讲主题:Google Cloud 在云原生数据库上的实践和探索
云原生数据库的发展日新月异,“向左走,还是向右走”?Google Cloud 作为全球数据库的领导者,构建了一个日益完整的云原生数据库体系,通过持续创新、引领潮流,协助我们的用户解决诸多数据计算、存储、分析、管理所面临的挑战和问题,激发业务活力。
演讲大纲:
云原生数据库的概览
Spanner 数据库带来的创新
AlloyDB 在 Log is database 的探索
讲师信息:郭斌 Google Cloud 数据库架构师
多年数据库技术实践经验,精通主流关系型数据库和 NoSQL 数据库,对各类新的数据库技术有着深入的理解和丰富的实战经验,特别是近两年来和游戏公司合作较多,对游戏公司的数据库需求吃得很准,钻得很深。加入谷歌之前,曾在 Elastic、MongoDB、Oracle 担任架构师、咨询工程师等职位。
本届大会策划的专题除新一代云原生数据库以外,还包括了开源和商业化探索、大前端、低代码、业务背后的架构演进、微服务和Serverless、云原生技术架构和变革等十数个技术专场,由来自字节、阿里、腾讯、快手等公司具备技术影响力与洞察力的行业专家负责议题把控,目前大会出品人已全部集齐,讲师阵容即将确认完毕。除了为期两天的沉浸式内容体验,稀土开发者大会还为万千开发者朋友们准备了丰厚的奖品,报名参会的开发者将有机会参与抽奖,赢取丰厚大奖,敬请期待。
点击下方阅读原文,即刻免费报名抢占最佳观景位!
新一代云原生数据库的设计与实践相关推荐
- 大数据、分布式、中台、云原生数据库架构设计与实践 | DAMS 2020
5年前,大数据浪潮的来袭唤起了国内企业对数据作为核心资产的新认知,为了推动国内数据管理加速发展,DAMS中国数据智能管理峰会携手产学研各界权威力量开启了对企业数字化转型的探索与助力. 5年后,我们看到 ...
- 精彩回顾 | 苏州农商银行新一代云原生信息科技架构体系实践
11月18日,2022年第五届中国金融科技产业大会暨第四届中新(苏州)数字金融应用博览会"基础软件与云原生系统软件"分论坛成功举办.该论坛由由中国计算机学会CTO CLUB(苏州) ...
- 浅析小程序云原生数据库的设计与应用
作者 腾讯TEG云架构平台部 研发工程师 杨哲.刘翔 腾讯CSIG云产品部 前端工程师 王伟嘉 导语 小程序云开发拥有易接入.高性能.高可用等特性,提供完整的原生云端能力支持,可有效降低后端与运维成本 ...
- 小程序云原生数据库的设计与应用,想要知道的都在这里!
小程序云开发拥有易接入.高性能.高可用等特性,提供完整的原生云端能力支持,可有效降低后端与运维成本,帮助开发者更专注于业务,实现快速上线与迭代.其中,小程序云开发的数据库是一个既可在小程序前端操作.也 ...
- 云盘数据库设计mysql_一份最实用的云数据库架构设计与实践指南(内含PPT)
原标题:一份最实用的云数据库架构设计与实践指南(内含PPT) Tips:点击文末[阅读原文]或登陆云盘:http://pan.baidu.com/s/1bo9Ni7l 即可下载5月21日DBAplus ...
- 解读华为云原生数据库设计原则,打破传统数据库上云瓶颈
摘要:一个优秀的自研数据库产品应该要具备哪些特性呢? 在云计算技术不断成熟的背景之下,云数据库开始崛起,并因为按需扩展.按需付费等优异特性获得中小企业及互联网客户的青睐. 虽然数据库上云是必然,但并不 ...
- 传统数据库逐渐“难适应”,云原生数据库脱颖而出
前言 数据库一直是应用开发中非常重要的一部分.从MySQL到亚马逊的RDS(关系型数据库服务,Relational Database Service),业界有很多数据库系统供开发者存储.查询和管理数据 ...
- 加码云原生数据库 2.0,阿里云又放大招
在 Garter 发布的< 2011-2020 全球 DBMS 市场份额排行榜>中,最为引人瞩目的是微软超越 Oracle 位居全球数据库的榜首,这是十年来 Oracle 首次失去冠军位置 ...
- 云原生数据库如荼如火,未来可期
文章目录 一.云原生数据库解读 1.1 什么是云原生 1.2 什么是云数据库 1.3 云数据库VS传统数据库 二.云数据库技术 2.1 容器化技术 2.2 存算分离 2.2.1 关于存算分离的划分 2 ...
最新文章
- python数字组合算法_面试宝典_Python.常规算法.0001.在圆圈和框框分别填入1~8数字各一次?...
- Linux学习总结(四十七)NFS服务配置 上篇
- DCMTK:CT位置FG类测试
- 面向对象语言的技术特点
- OAuth 2.0系列教程(八) 授权码授权
- Windows Phone
- Eclipse快捷键_10个最高效的快捷键
- HDU 5980 2016ICPC大连 J: Find Small A
- 项目验收文档模板(二)
- android oppo 驱动,Android Studio无法连接OPPO
- BoundsChecker用法
- 了解一下PMO项目管理岗
- tf.data.Dataset.from_tensor_slices
- 『IT视界』 [原创评论]揪出"程序员"身上的"六宗罪"
- 大学多宗持续灵异事件
- 如何在 Excel 中筛选数据透视表中的数据?
- 【Matlab车牌识别】BP神经网络车牌识别【含GUI源码 669期】
- 【毕业设计_课程设计】基于python的微信公众平台机器人的设计与实现
- MySQL inet aton函数_MySQL INET_ATON()用法及代码示例
- 春哥博客 - Day01 - Python基础之print