文章目录

  • 前言
  • MySQL读写分离原理
  • 搭建MySQL读写分离集群
    • MySQL8.0之前
    • MySQL8.0之后
  • 后记

前言

上一期介绍并实现了MySQL的主从复制,由于主从复制架构仅仅能解决数据冗余备份的问题,从节点不对外提供服务,依然存在单节点的高并发问题

所以在主从复制的基础上,演变出了MySQL读写分离集群!

MySQL读写分离原理

在MySQL读写分离中:master节点专门用来做数据的修改操作(如create、update、insert、delete等),在主库上写,然后主库通过主从复制把数据的更改通过binlog同步到所有从库上

再将所有的查询操作都映射到从库上,这样就可以很好的分摊读写的压力,不用全部请求都集中在主库上,这样MySQL的并发处理能力就能得到极大的提高

**在MySQL8.0之前:**这个过程需要一个中间件(如MyCatSharding-JDBC等),识别解析客户端的所有请求,将所有的写操作映射到master节点,而读操作都转到slave从库上

MySQL8.0之后:MySQL自身已支持读写分离(支持一主多从的读写分离,多主多从的还是需要引入中间件实现)

一主多从的读写分离:

注意:MySQL8.0之后该一主多从的读写分离可不依赖中间件

搭建MySQL读写分离集群

MySQL8.0之前

1、下载MyCat安装包

下载MyCat:http://dl.mycat.org.cn

2、分别配置schema.xmlserver.xml

我这里配置虚拟库meet0and1-schema映射到主从节点上的meet0and1真实库

<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/"><!-- 定义MyCat的虚拟逻辑库,dataNode:映射真实数据节点  -->   <schema name="meet0and1-schema" checkSQLschema="false" sqlMaxLimit="800" dataNode="meet0and1Node" /><!-- 定义MyCat的数据节点,name必须和dataNode值一致,dataHost映射真实主机,database映射真实的库 --><dataNode name="meet0and1Node" dataHost="meet0and1Host" database="meet0and1" /><!-- 配置数据主机,name必须和dataHost一致 --><dataHost name="meet0and1Host" maxCon="1000" minCon="10" balance="1"writeType="0" dbType="mysql" dbDriver="native" switchType="-1"  slaveThreshold="100"><!--心跳检测--><heartbeat>select user()</heartbeat><!--主节点(写)--><writeHost host="hostM1" url="192.168.31.161:3306" user="root" password="123456"><!--从节点(读)--><readHost host="hostS1" url="192.168.31.162:3306" user="root" password="123456" /></writeHost></dataHost>
</mycat:schema>
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mycat:server SYSTEM "server.dtd">
<mycat:server xmlns:mycat="http://io.mycat/"><!-- 这里配置的都是一些系统属性--><system><!-- 默认的sql解析方式 --><property name="defaultSqlParser">druidparser</property><property name="charset">utf8mb4</property></system><!-- 配置登录mycat的用户信息 --><user name="root"><property name="password">123456</property><!-- 该用户可以操作哪个逻辑库 --><property name="schemas">meet0and1-schema</property></user>
</mycat:server>

3、启动MyCat

在mycat的bin目录下,启动MyCat

# 以前台窗口启动
./mycat console
# 以后台守护进程启动
./mycat start
./mycat status
./mycat stop
./mycat restart


4、MyCat实现MySQL读写分离

修改properties连接MySQL配置

# MyCat的server.xml中配置的用户和密码
spring.datasource.username=root
spring.datasource.password=123456
# MyCat服务的端口8066,meet0and1-schema:MyCat中配置映射到meet0and1的虚拟库
spring.datasource.url=jdbc:mysql://192.168.31.161:8066/meet0and1-schema?serverTimezone=GMT%2B8&useUnicode=true&characterEncoding=utf-8
spring.datasource.type=com.alibaba.druid.pool.DruidDataSource
spring.datasource.driver-class-name=com.mysql.cj.jdbc.Driver

**注意:**Spring中事务是支持传播的,MyCat为避免在一个查询中又执行了更新操作,而将连接请求转到slave从库导致主从数据不一致的情况,所以MyCat会开启了事务的连接请求都转到master主库

如下面的findAll方法,查询操作应该走从库,但由于在类上开启了事务,若方法上的事务传播属性不设置为SUPPORTS,执行这个方法就会走master主库

@Service
@Transactional(rollbackFor = Exception.class)
public class SysUserService {@Autowiredprivate SysUserDao sysUserDao;/*** Propagation.SUPPORTS:支持事务的传播* 有事务则融入:如其他含有事务的方法调用这个方法时,融入调用方的事务* 没有则不开启事务:它自身的方法不开启事务,且这里覆盖了类上配置的事务* (方法上的事务优先级大于类上开启的事务)*/@Transactional(propagation = Propagation.SUPPORTS)public List<SysUser> findAll() {return sysUserDao.findAll();}/*** 执行写操作,会走master主库*/public void save(SysUser sysUser) {sysUserDao.save(sysUser);}}

MySQL8.0之后

MySQL8.0之后一主多从的读写分离,可不再依赖任何中间件

1、连接MySQL时只有url配置有变化

# 语法:默认配置的第一个节点为主(写)库,后面的都为从(读)库
jdbc:mysql:replication://主(写)库,从(读)库1,从(读)库2,从(读)库N/库名

示例:

spring.datasource.url=jdbc:mysql:replication://192.168.31.161:3306,192.168.31.162:3306/meet0and1?serverTimezone=GMT%2B8&useUnicode=true&characterEncoding=utf-8

2、只有显示设置方法的事务为只读(readOnly = true),并且单独执行它时才会走从(读)库

只有事务为只读的查询操作才走从(读)库

为保证主从节点数据的一致性:当有其它service方法调用时,无论他们是否包含事务,即使不包含更新操作(insert/update/delete),走的都是主(写)库,如下面几种

@Service
public class SysUserService {@Autowiredprivate SysUserMapper sysUserMapper;/*** 这里只有设置事务为只读,且单独执行该方法时才走从(读)库*/@Transactional(readOnly = true)public List<SysUser> findAll(){return sysUserMapper.findAll();}@Transactionalpublic void hasTranFind(){// 走主(写)库findAll().forEach(System.out::println);}public void notTranFind(){// 走主(写)库findAll().forEach(System.out::println);}public void notTranSave(SysUser sysUser){// 走主(写)库findAll().forEach(System.out::println);sysUserMapper.save(sysUser);}/*** 该方法执行会报错:Connection is read-only. Queries leading to data modification are not allowed* (设置只读的事务方法中,不能有非查询操作)*/@Transactional(readOnly = true)public List<SysUser> findAll2(SysUser sysUser){sysUserMapper.save(sysUser);return sysUserMapper.findAll();}}

后记

现在MyCat的社区和项目维护不是很友好,MySQL8.0之后自身虽支持一主多从的读写分离

但在并发极高的大型项目中要实现分库分表读写分离分布式主键等功能还是推荐Sharding-JDBC



MySQL8读写分离集群相关推荐

  1. 数据库高性能读写分离集群操作说明

    1.系统概述 在一个高并发的事务型系统中,当写事务占的比例相对读事务相对较小时,可以借助DM7的主备系统备机可读的特点,将读事务转移到备机执行,减少单节点的并发压力,通过增加备机节点资源,提高系统的并 ...

  2. Windows 2012 always on 读写分离集群搭建配置

    Windows 2012 always on 读写分离集群搭建配置. Always on简介 AlwaysOn 可用性组 (SQL Server) AlwaysOn 可用性组功能是一个提供替代数据库镜 ...

  3. 金仓数据库KingbaseES主备和读写分离集群使用手册(日常运维管理)

    对应10小节作的整改,包括但不限于一键启动的检查项目.对属于一键启动的检查项作个说明即可,比如 本检查属于一键启动默认检查项. 目录 7.1. 集群启停 ¶ 7.1.1. 一键启停方式 ¶ 7.1.2 ...

  4. Maxscale读写分离集群过渡PXC集群

    一.实验环境 第一次写博客,欢迎大家交流指正!!! 不喜勿喷!!! 操作系统 : Centos7.5虚拟机 数据库软件 : mysql-5.7.17 主机名 ip地址 角色 web33 192.168 ...

  5. Maxscale Keepalived MySQL实现高可用读写分离集群

    图片是模拟两个从节点down是否正常提供服务 访问http://ip:8989端口,登录名admin,密码mariadb 环境说明: IP地址 数据库服务 读写分离代理服务 负载均衡服务 虚拟IP 1 ...

  6. 达梦-主备与读写分离集群

    DM8-主备与读写分离集群 文章目录 DM8-主备与读写分离集群 1. 基本概念 1.1 DM集群 1.2 DM归档类型 2. 数据守护集群 2.1 概念 2.2 数据守护集群架构及原理 2.3 守护 ...

  7. 三、kylin读写分离集群部署

    1.部署图 注意: 1.在kylin服务机器上hbase shell 作为存储Hbase集群的客户端,配置需要存储集群的客户端配置,cdh 的hbase配置路径在/etc/hbase/conf下,hb ...

  8. DM数据守护读写分离集群

    1 安装环境 操作系统:CentOS Linux release 7.9.2009 x64 硬盘空间:20G 软件版本:DM8企业版 1.1 服务器信息 IP地址 节点类型 操作系统 备注 192.1 ...

  9. mysql主从复制、读写分离集群/etc/my.cnf配置文件

    master1和master2做主高可用 node1和master1组成主从复制,读写分离 node2和master2组成主从复制,读写分离 下面给出配置文件 1. master1: /etc/my. ...

最新文章

  1. JS-undefined与null的区别
  2. CNN中的局部连接(Sparse Connectivity)和权值共享
  3. 网站静态化的实现以及纯伪静态优缺点
  4. ASM元数据备份与恢复:md_backup和md_restore
  5. |Tyvj|NOIP2004|堆|贪心|P1066 合并果子
  6. rest spring_带有Spring的REST的ETag
  7. mysql索引(b+tree)小记
  8. MongoDB 教程索引 (附有视频)
  9. mysql with
  10. 回文问题‪‬‪‬‪‬‪‬‪‬‮‬‭‬‪‬‪‬‪‬‪‬‪‬‪‬‮‬‪‬‫‬‪‬‪‬‪‬‪‬‪‬‮‬‫‬‭‬‪‬‪‬‪‬‪‬‪‬‮‬‭‬‪‬‪‬‪‬‪‬‪‬‪‬‮‬‪‬‭‬‪‬‪‬‪‬‪‬‪‬‮‬‫‬‪‬
  11. [DSF] Devices Syndication Foundation Architecture V1
  12. Linux是怎么来的?终于有一篇文章讲清楚了
  13. 梁宁——产品的场景(阅读总结)
  14. 【100个 Unity踩坑小知识点】| Unity调用API ,动态获取Android权限,附带所有Android权限表格
  15. springboot+redis实现登录失败次数限制
  16. 客户贷后还款提醒优化项目
  17. Mac上出现多个版本选择打开edge浏览器
  18. 《乔布斯传》英文原著重点词汇笔记(六)【 chapter four 】
  19. CSR8675的DSP学习笔记——a2dp_sink工程的matlab仿真
  20. 【智慧农业】如何建造智能温室大棚

热门文章

  1. 2021-04-01 微信发红包测试用例点
  2. oracle 查看表结构
  3. iframe 跨越访问_js iframe跨域访问
  4. 网络安全-拒绝服务(DDOS)
  5. python常用机器学习框架(torch、paddlepaddle、MindSpore)的安装方法
  6. windows 分屏
  7. Pytorch使用tensorboard监视网络训练过程
  8. vim-python使用教程_vim配置python编程环境及YouCompleteMe的安装教程
  9. 杰里之AD150 VBAT 检测【篇】
  10. uboot图形化配置界面