分布式数据库架构及企业实践(基于Mycat中间件)——1
第一章 数据库中间件与分布式数据库的实现
1.1 分布式系统
- 分布式系统是指其组件分布在网络上,组件之间通过传递消息进行通信和动作协调的系统
- 特点:透明性、扩展性、可靠性、高性能
- 缺点:节点通信开销大,线程安全问题复杂;过分依赖网络;有潜在的数据安全和网络安全性问题
- 分布式系统和集中式系统的区别:
分布式系统 | 集中式系统 | 备注 |
---|---|---|
并行计算 | 串行计算 | 本质区别 |
性价比高 | ||
可靠性高 | ||
可扩展性强 | ||
计算能力强 |
1.2为什么需要分布式数据库
集中式数据库面对大规模数据处理有局限性,因此需要一种能够快速处理数据和及时响应用户的访问的方法,也希望对数据进行集中分析,管理和维护
- 分布式数据库是指在物理上分布而在逻辑上集中管理的数据库系统
物理上分布 逻辑上集中管理 在物理位置不同并由网络连接的节点或站点上 各数据库节点之间在逻辑上是一个整体,并由统一的数据库管理系统管理 - 特点:透明性、数据冗余性(通过冗余实现系统的可靠性,可用性,改善其性能;多个节点存储副本防止数据破坏数据丢失;节点受损坏自动切换防止系统整体被破坏;热点数据的就近分布原则减少消耗)、易于扩展性、自治性;经济,性能优越、响应速度更快、灵活的体系结构、抑郁集成现有系统等特点
- 缺点:依赖高速网络,对事物的处理远没有传统数据库成熟
1.3分布式数据库系统的实现原理
分布式数据库应有4个优势:数据分片及复制管理、具有事务的可靠性存取、良好的性能、易于扩展。所以分布式数据库在设计上需要实现分布式数据库的目录管理、数据分片、分布式查询处理、分布式并发控制、分布式存储、分布式网络架构、分布式安全管理等
- 分布式数据库的目录管理:可分为全局目录、分布式目录、全局与本地混合目录
- 数据分片:将存放在同一个数据库实例中的书库分散存放到多个数据库实例(主机)上,进行多台设备存取以提高性能,在切分数据的同时可以提高系统整体的可用性。书库分配是指将数据全局的划分为相关的逻辑片段,有水平切分(按照数据将表划分到各个节点上),垂直切分(按照业务将表进行分类分不到不同节点上),混合切分(水平和垂直混合)三种类型
- 分布式查询处理:分布式查询处理的任务就是把一个分布式数据库上的高层次查询映射为在本地数据库上的操作,查询的解析必须拆分为代数查询的关系运算序列,将要查询的数据定位到各节点,使得查询在各节点进行,最后通过网络通信的操作汇聚查询结果
分布式并发控制:目的是保证分布式数据库中的多个事务并发高效,正确的执行。进行并发控制的方法主要由三种:加锁并发控制(容易发生死锁),时间戳控制(需要有全局的统一时钟,否则发生冲突会重启),乐观并发控制(对冲突多的系统效率低下)
1.4 Mycat数据库中间件简介
1.4.1 Mycat的历史与未来规划
1.4.2 Mycat与其他中间件的区别
1.4.3 Mycat的优势:支持透明的读写分离机制,减轻了写库的压力,提高了数据库的并发查询能力,支持各种MySQL集群,包括标准的主从异步集群、MySOL Galera Cluster多主同步集群等,提升了数据库的可用性与性能,支持分布式存储和秒级的并行查询能力,内建数据库集群故障切换机制,实现了自动切换,可满足大部分应用的高可用性要求。
1.4.4 Mycat的适用场合:
- 高可用性与MySQL读写分离
- 业务数据分级存储保障
- 100亿大表水平分片,集群并行计算
- 数据库路由器
- 整合多种数据源
分布式数据库架构及企业实践(基于Mycat中间件)——1相关推荐
- Mycat社区出版: 分布式数据库架构及企业实践——基于Mycat中间件
书名: 分布式数据库架构及企业实践--基于Mycat中间件 作者:周继锋 冯钻优 陈胜尊 左越宗 ISBN:978-7-121-30287-9 出版年月:2016年11月 定价:79元 开本:787× ...
- 分布式数据库架构及企业实践--基于Mycat中间件pdf
下载地址:网盘下载 内容提要 编辑 <分布式数据库架构及企业实践--基于Mycat中间件>由资深 Mycat 专家及一线架构师.DBA 编写而成.全书总计 8 章,首先简单介绍了分布式系统 ...
- 分布式数据库架构及企业实践——基于Mycat中间件
名: 分布式数据库架构及企业实践--基于Mycat中间件 作者:周继锋 冯钻优 陈胜尊 左越宗 ISBN:978-7-121-30287-9 出版年月:2016年11月 定价:79元 开本:787×9 ...
- MyCat笔记(九):书籍:分布式数据库架构及企业实践-基于Mycat中间件.pdf
分布式数据库架构及企业实践-基于Mycat中间件.pdf 地址:https://pan.baidu.com/s/190PtgMfj_dORfXydHeoZkg 仅用作备份,个人学习使用
- 读《分布式数据库架构及企业实践》---笔记一
分布式系统采用的是并行计算,而单点式的系统采用的串行计算.分布式系统的特点:高性能,可靠性,扩展性和透明性. 分布式数据库是指数据在物理上分布而在逻辑上集中管理的数据库系统. ...
- 巨杉TechDay回顾 | 微服务下的分布式数据库架构演进与实践
内容整理自2019年6月2日巨杉TechDay技术沙龙活动. 演讲概述 当前,微服务架构已经成为应用架构转型的主流方向.本次分享,将深入解析在应用架构微服务化的趋势下,底层数据架构如何演进,分布式数据 ...
- 黄东旭:Cloud-Native 的分布式数据库架构与实践
19 日,我司 CTO 黄东旭同学在全球云计算开源大会上,发表了<Cloud-Native 的分布式数据库架构与实践>主题演讲,以下为演讲实录~~ 大家好,今天我的题目是 Cloud-Na ...
- 基于内存数据库的分布式数据库架构
[摘要] 本文提出了一种通过引入内存数据库层,建立两层多分区分布式数据库架构.此方案用于解决海量高并发系统的数据存储和访问问题,尤其适用于电子商务等数据模型复杂且业务复杂的互联网站. 这些年互联网站发 ...
- 阿里P8架构师进阶心得:分布式数据库架构MyCat学习笔记送给你
前言: MyCat 是一个数据库分库分表中间件,使用 MyCat 可以非常方便地实现数据库的分库分表查询,并且减少项目中的业务代码.今天我们将通过数据库架构发展的演变来介绍 MyCat 的诞生背景,以 ...
最新文章
- 转载:python3 安装pycrypto
- 多线程还是多进程的选择及区别
- 经典论文复现 | InfoGAN:一种无监督生成方法
- Oracle根据年份分组
- Protobuffer教程
- python3简单代码_python3实现简单汉诺塔的代码教程
- js分享微信 ,微博 ,qq空间
- 考上985能改变命运吗_2021艺考生:文化课成绩一般,有机会考上985、211吗?
- linux命令学习——tar
- hmcl启动器java下载_HMCL启动器|Hello Minecraft! Launcher 3.2 —— Win/Mac苹果系统/Ubuntu|2亿次使用...
- 如何利用python计算即期利率_QuantLib 金融计算——案例之固息债的价格、久期、凸性和 BPS...
- 【通信工程】大三下课程设计-5G核心网功能设计与部署
- 超全汇总 | 基于Camera的3D目标检测算法综述!(单目/双目/伪激光雷达)
- NiFi Processors概述
- 将Excel表格转换为MarkDown表格
- JavaScript对象的取值
- 自动对焦模块理论基础及其硬件实现浅析(二)
- FTP传输大文件丢包损坏严重,怎么解决?
- 熔断器熔断时间标准_正确认识熔断器的熔断时间
- 线性回归使用的基本条件