Mycat读写分离实战

一、主从复制搭建

1.实验环境

  • 搭建一主一从的部署架构,master(主库)运行在阿里云服务器 47.108.136.201,slave(从库)运行在 IP 地址为 12.168.149.128 的Ubuntu虚拟机中
  • 两台机器均安装了 MySQL 5.7(MySQL 5.7 版本复制性能比较强,且不同版本的数据库搭建主从复制,需要一些额外的复杂配置)
  • 两台机器能够Ping通

2.主库配置

(1)修改数据库配置参数

#vi /etc/mysql/my.cnf 或 vim /etc/mysql/mysql.conf.d/mysqld.cnf[mysqld]log-bin=mysql-bin   #[必须]启用二进制日志server-id=100       #[必须]服务器唯一ID,默认是1,一般取IP最后一段binlog_format=row

重启 MySQL 服务,查看服务号,已经更改为 100

root@Ubuntu2004:~# systemctl restart mysql
root@Ubuntu2004:~# mysql -u root -p
mysql> show global variables like 'server\_id';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| server_id     | 100   |
+---------------+-------+
1 row in set (0.00 sec)

(2)进入主库,建立复制账号并授权

不同 MySQL 版本,需要执行不同的授权操作

mysql> grant replication client on *.* to 'xiaogesync'@'%' identified by 'Chen_2877';
mysql> flush privileges;

MySQL 8 执行以下操作

mysql> create user xiaogesync identified by 'Chen_2877';
mysql> grant replication client on *.* to 'xiaogesync'@'%';
mysql> flush privileges;

重启

root@Ubuntu2004:~# systemctl restart mysql

在虚拟机终端执行 MySQL 远程连接,输入授权账户和密码,即可远程访问主库了

root@ubuntu:/home/chen# mysql -h 47.108.136.201 -uxiaogesync -p
Enter password:
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 22
Server version: 5.7.36-log MySQL Community Server (GPL)

2.从库配置

(1)修改数据库配置参数

跟主库同样的操作,但 server-id 必须唯一,用于标识语句最初是由哪个 server 写入,server-id 设为相同的话,同步可能会陷入死循环

#vi /etc/mysql/my.cnf 或 vim /etc/mysql/mysql.conf.d/mysqld.cnf[mysqld]log-bin=mysql-bin   #[必须]启用二进制日志server-id=101       #[必须]服务器唯一ID,默认是1,一般取IP最后一段binlog_format=row

(2)在服务器终端查看主库master状态

需要注意 File: mysql-bin.000005 和 Position: 1224 这两个值,待会配置从服务器会用得到。这个时候不要去动主数据库,会影响 Position 的值

mysql> show master status\G;
*************************** 1. row ***************************File: mysql-bin.000005Position: 1224Binlog_Do_DB: Binlog_Ignore_DB:
Executed_Gtid_Set:
1 row in set (0.00 sec)

(3)启动服务器复制功能

mysql> start slave;

(4)从库查看主从复制状态

根据 File 和 Position 的值,在从库上执行 MySQL 配置主从命令。Slave_IO_Running和
Slave_SQL_Running 状态均为 YES,说明主从复制成功。

mysql> show slave status\G;
*************************** 1. row ***************************Slave_IO_State: Waiting for master to send eventMaster_Host: 47.108.136.201Master_User: xiaogesyncMaster_Port: 3306Connect_Retry: 60Master_Log_File: mysql-bin.000005Read_Master_Log_Pos: 1224Relay_Log_File: ubuntu-relay-bin.000004Relay_Log_Pos: 320Relay_Master_Log_File: mysql-bin.000004Slave_IO_Running: YesSlave_SQL_Running: Yes

(5)测试主从复制功能

主库上创建数据库,如果从库也查询得到,说明同步成功,主库:

mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| sys                |
+--------------------+
mysql> create database test_sync;

从库:能够查询 test_sync 数据库(从库中原本数据库不受影响)

mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| ssmiot             |
| sys                |
| test_sync          |
| wsn                |
+--------------------+

至此, MySQL 主从复制搭建完成,采用的是默认的异步复制过程,也就是说master上的 I/O Thread 线程将二进制日志写入 binlog 文件之后就返回客户端结果,不会考虑二进制日志是否完整传输到 slave 以及是否完整存放到从 slave 的relay-log 日志中。相应的,还有全同步复制半同步复制

如果要禁用主从复制的话,只需要在从库上执行 stop slave 命令就可以,执行reset slave all 可以清空从库所有配置信息。

二、Mycat 读写分离

Mycat 读写分离是建立在主从复制配置好的MySQL集群基础上(当然,也支持 Oracle、PostgreSQL,从 1.3 版本开始支持 SequoiaDB 及 MongoDB等NoSQL)。

(一)Mycat 安装部署

我是在自己 Win11 笔记本上安装的 Mycat,用的 1.6.7.4 版本。因为 Mycat 是用 Java 开发的,所以事先需要安装 Java,官网建议 jdk 1.7 及以上版本。然后还需要关闭主库 Linux 防火墙。

1.下载

Mycat下载地址:http://dl.mycat.org.cn/1.6.7.4/Mycat-server-1.6.7.4-release/Mycat-server-1.6.7.4-release-20200105164103-win.tar.gz

2.解压

3.配置环境变量


(二)Mycat 配置和启动

Mycat 采用本地 xml 的方式实现配置,最重要的配置文件有 server.xml、schema.xml 和 rue.xml,配置文件均保存在安装目录的 /conf 文件夹下

1.server.xml 配置

server.xml 管理着 Mycat 的系统配置信息,如用户、密码及权限等,这里配置登录 Mycat 的用户名为 root,密码为 123456,可以访问的 schema(逻辑库) 只有 TESTDB

 <user name="root" defaultAccount="true"><property name="password">123456</property><property name="schemas">TESTDB</property><property name="defaultSchema">TESTDB</property></user>

2.schema.xml 配置

schema.xml 管理着 Mycat 的逻辑库、表、分片规则、dataNode 等。

(1)分片配置

dataNode 标签定义了 Mycat 中的数据节点,也就是数据分片,< dataNode name=“dn1” dataHost=“localhost1” database=“db1” /> 意思就是说使用名字为 localhost1 数据库实例上的 db1 物理数据库,组成一个数据分片,用 dn1 来标识这一分片

<schema name="TESTDB" checkSQLschema="true" sqlMaxLimit="100" randomDataNode="dn1"><!-- auto sharding by id (long) --><!--splitTableNames 启用<table name 属性使用逗号分割配置多个表,即多个表使用这个配置--><table name="travelrecord,address" dataNode="dn1,dn2,dn3" rule="auto-sharding-long" splitTableNames ="true"/><!-- <table name="oc_call" primaryKey="ID" dataNode="dn1$0-743" rule="latest-month-calldate"/> --></schema><!-- <dataNode name="dn1$0-743" dataHost="localhost1" database="db$0-743"/> --><dataNode name="dn1" dataHost="localhost1" database="db1" /><dataNode name="dn2" dataHost="localhost1" database="db2" /><dataNode name="dn3" dataHost="localhost1" database="db3" />

(2)连接配置

dataHost 是 Mycat 最底层的标签,直接定义分片所属的数据库实例,其中子标签 writeHost 指定了 MySQL 后端写数据库(主库)。接下来需要对上一步的 localhost1 进行连接配置,首先将 url 设为主库所在地址,在这里就是阿里云服务器的 ip。账号密码及相应权限需要主库为其授权,为避免麻烦,我为主机和从机的 root 账户均分配了所有远程访问权限

mysql> grant replication client on *.* to 'root'@'%' identified by 'Chen_2877';
mysql> flush privileges;
 <dataHost name="localhost1" maxCon="1000" minCon="10" balance="0"writeType="0" dbType="mysql" dbDriver="native" switchType="1"  slaveThreshold="100"><heartbeat>select user()</heartbeat><!-- can have multi write hosts --><writeHost host="hostM1" url="47.108.136.201:3306" user="root" password="Chen_2877"><readHost host="hostS1" url="192.168.149.128:3306" user="root" password="Chen_2877"></readHost></writeHost></dataHost>

3.启动

(1)创建实体数据库

在主库中分别创建 db1、db2和db3 三个数据库

mysql> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| db1                |
| db2                |
| db3                |
| mysql              |
| performance_schema |
| sys                |
| test_cgx           |
| test_sync          |
+--------------------+
9 rows in set (0.00 sec)

(2)安装 Mycat

以管理员身份启动 cmd,运行 mycat install

C:\WINDOWS\system32>mycat install
wrapper  | CreateService failed - 指定的服务已存在。 (0x431)

(3)启动 Mycat

继续执行 mycat start

C:\WINDOWS\system32>mycat start
wrapper  | Starting the Mycat-server service...
wrapper  | Mycat-server started.

运行命令 mycat status,查看 mycat状态,Running 状态为 YES,则启动成功

C:\WINDOWS\system32>mycat status
wrapper  | The Mycat-server Service is installed.
wrapper  |   Start Type: Automatic
wrapper  |   Interactive: No
wrapper  |   Running: Yes

4.测试

(1)在主库创建相应数据表

在主库 db1、db2、db3、创建表 travelrecord

CREATE TABLE `travelrecord` (
`id`  int(11) NOT NULL AUTO_INCREMENT ,
`uid`  int(11) NULL ,
PRIMARY KEY (`id`)
);

(2)连接 mycat,插入数据

在 cmd 中连接 mycat,其实跟使用 MySQL 一样的操作

C:\WINDOWS\system32>mysql -uroot -P8066 -p --default_auth=mysql_native_password
Enter password: ********
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 18
Server version: 5.6.29-mycat-1.6.7.4-release-20200105164103 MyCat Server (OpenCloudDB)
Copyright (c) 2000, 2020, Oracle and/or its affiliates. All rights reserved.Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.mysql>

查看当前数据库实例

mysql> show databases;
+----------+
| DATABASE |
+----------+
| TESTDB   |
+----------+
1 row in set (0.00 sec)mysql> use TESTDB;
Database changed
mysql> show tables;
+------------------+
| Tables in TESTDB |
+------------------+
| address          |
| travelrecord     |
+------------------+
mysql> desc travelrecord;
+-------+---------+------+-----+---------+----------------+
| Field | Type    | Null | Key | Default | Extra          |
+-------+---------+------+-----+---------+----------------+
| id    | int(11) | NO   | PRI | NULL    | auto_increment |
| uid   | int(11) | YES  |     | NULL    |                |
+-------+---------+------+-----+---------+----------------+
2 rows in set (0.03 sec)

插入数据

mysql> INSERT INTO `travelrecord` (`id`, `uid`) VALUES(1, 1);
Query OK, 1 row affected (0.03 sec)mysql> INSERT INTO `travelrecord` (`id`, `uid`) VALUES(501, 501);
Query OK, 1 row affected (0.03 sec)mysql> INSERT INTO `travelrecord` (`id`, `uid`) VALUES(5000001, 5000001);
Query OK, 1 row affected (0.03 sec)mysql> INSERT INTO `travelrecord` (`id`, `uid`) VALUES(10000001, 100000001);
Query OK, 1 row affected (0.03 sec)

(3)读取数据

在从库中,分别查询数据库 db1、db2、db3 中的数据表 travelrecord,可以看到刚插入的数据存储在了不同的数据库里面,说明Mycat 自动对其实现了分片,并实现了主从同步,而这一切对前端应用都是透明的

当然也可以通过数据库管理工具进行相关操作,默认端口 8066。使用方式与 MySQL 一样



参考

分布式数据库中间件 MyCat 搞起来!
Windows下安装Mycat
面试官你好,我已经掌握了MySQL主从配置和读写分离,你看我还有机会吗?
MySQL 主从复制简单搭建配置(简单,绝对能用)
《MySQL性能优化和高可用架构实战》——宋立桓

Mycat 读写分离实战相关推荐

  1. MYSQL+MYCAT读写分离实战

    ****1.实战MYSQL+MYCAT读写分离实战,实现MYSQL数据库1主2从架构.**2.写出MYSQL 1主2从架构部署过程和MYCAT实战全部过程,将所有部署过程写出来和划出架构图. 1.配置 ...

  2. MySQL MyCAT 读写分离实战

    1.MySQL读写分离概念: MYSQL读写分离的原理其实就是让Master数据库处理事务性增.删除.修改.更新操作(CREATE. INSERT.UPDATE.DELETE),而让Slave数据库处 ...

  3. mycat读写分离配置

    为什么使用MyCat         如今随着互联网的发展,数据的量级也是撑指数的增长,从GB到TB到PB.对数据的各种操作也是愈加的困难,传统的关系性数据库已经无法满足快速查询与插入数据的需求.这个 ...

  4. 运维之道 | Mysql主从复制+mycat读写分离

    运维之道 | Mysql主从复制 + Mycat读写分离 1.什么是读写分离 读写分离,基本的原理是让主数据库处理事务性增.删.改操作(INSERT.UPDATE.DROP),而从数据库处理SELEC ...

  5. MyCat读写分离-笔记(四)

    概述 Mycat能够实现数据库读写分离,不能实现主从同步,数据库的备份还是基于数据库层面的.Mycat只是数据库的中间件: Mycat读写分离配置 在MySQL中间件出现之前,对于MySQL主从集群, ...

  6. mycat读写分离部署步骤

    1.下载mycat: https://raw.githubusercontent.com/MyCATApache/Mycat-download/master/1.5-RELEASE/Mycat-ser ...

  7. 应用 | 同学,该学MyCat实际应用案例与MyCat读写分离了

    Hi!我是小小,一个双鱼座的佛系程序猿,今日的blog将会写关于MyCat最后一点学习内容,读写分离,与MyCat实际应用案例和一个小小的例子. MyCat 读写分离 MyCat的读写分离是建立在My ...

  8. 【Spring Boot 实战】数据库千万级分库分表和读写分离实战

    一. 前言 前几天时间写了如何使用Sharding-JDBC进行分库分表和读写分离的例子,相信能够感受到Sharding-JDBC的强大了,而且使用配置都非常干净.官方支持的功能还很多功能分布式主键. ...

  9. Mycat读写分离笔记Windows

    Mycat读写分离笔记Windows 自己搭了一个运用Mycat中间件搭建了一个读写分离的demo,昨晚还在奋战当中,因为连接mycat的时候老是报错:No Mycat DataBases selec ...

最新文章

  1. 高效搭建Storm全然分布式集群
  2. 不想 CRUD 干到老,就来看看这篇 OOM 排查的实战案例!
  3. 如何在 CentOS 上启用 软件集 Software Collections(SCL)
  4. ccot 目标跟踪全称_Siamese:CVPR 2019 接收论文作者为你解读视频跟踪领域 | CVPR 2019...
  5. Microsoft Expression Studio 4 Ultimate 中文版发布
  6. Android的简介
  7. SQL Sever 错误和异常处理
  8. BeautifulSoup4 find_all搜索包含指定文本内容的标签返回空list的问题
  9. plsql中oracle定时任务日志,速掌握一个简单的Oracle定时任务
  10. C中文件的输入输出与C++的文件流
  11. 只用两行代码,我让Transformer推理加速了50倍
  12. 小榕重复数据清除器xp 怎么用
  13. 【嵌入式系统—ARM指令集】快速了解
  14. Kindle wifi 连接不上的问题
  15. 如何在Ubuntu18.4中设置ERPNEXT开源ERP生产环境开机运行
  16. 图像处理之对比度增强
  17. 图神经网络(GNN)必读论文及最新进展跟踪
  18. JS验证18位身份证号的正确性
  19. 《UnityAPI.ParticleSystem粒子系统》(Yanlz+Unity+SteamVR+云技术+5G+AI+VR云游戏+Particle+loop+Emit+立钻哥哥++OK++)
  20. 【CV】Swin Transformer:使用 Shifted Windows 的分层视觉 Transformer

热门文章

  1. 控制物体运动模长来销毁物体(transform.position.magnitude)
  2. 劲爆!javaweb架构中视图层作用
  3. RSA 加密解密算法实现(简单,易懂)!!!
  4. 全网喊你退个税,蓝税提醒你注意了
  5. 33岁,年薪30万:“幸亏我被裁员了”
  6. ChatGPT实战100例 - (10) 提前体验ChatGPT的多模态绘图功能
  7. idea不能设置包名为con
  8. linux字符修改时间,字符集修改、Linux时间同步、调整文件描述符
  9. 02.telnet远程登录鸿蒙
  10. Vue:生命周期函数的作用