为什么要做主从复制?

1、在业务复杂的系统中,有这么一个情景,有一句sql语句需要锁表,导致暂时不能使用读的服务,那么就很影响运行中的业务,使用主从复制,让主库负责写,从库负责读,这样,即使主库出现了锁表的情景,通过读从库也可以保证业务的正常运作。

2、做数据的热备

3、架构的扩展。业务量越来越大,I/O访问频率过高,单机无法满足,此时做多库的存储,降低磁盘I/O访问的频率,提高单个机器的I/O性能。

这里我们利用两台服务器动手搭建一个主从复制的mysq数据库。

10.10.172.61 master mysql01

10.10.172.62 slave mysql02

两台服务器分别安装mysql8.0.22安装方法可参照我的上篇:范松伟:mysql8 rpm安装 centos​zhuanlan.zhihu.com

一、配置master服务器:

修改配置文件/etc/my.cnf为:

[mysqld]

server-id=1

log-bin=master-bin

#log_bin_index=master-bin.index

#binlog_do_db=baohedata ##dbnam

#binlog_ignore_db=mysql

datadir=/var/lib/mysql

socket=/var/lib/mysql/mysql.sock

log-error=/var/log/mysqld.log

pid-file=/var/run/mysqld/mysqld.pid

server-id 要唯一 binlog要开启

为master添加用于同步复制的用户master并授权远程登录

CREATE USER 'master'@'%' IDENTIFIED WITH mysql_native_password BY 'baohe';

GRANT REPLICATION SLAVE ON *.* TO 'master'@'%';

flush privileges;

重启master后查看master的状态

记下这个file和position从服务器要从这里同步复制

二、配置slave

配置/etc/my.cnf为

[mysqld]

server-id=2

log-bin=slave-bin

#relay-log=slave-relay-bin

#relay-log-index=slave-relay-bin.index

datadir=/var/lib/mysql

socket=/var/lib/mysql/mysql.sock

log-error=/var/log/mysqld.log

pid-file=/var/run/mysqld/mysqld.pid

重启mysql服务并登录mysql并配置从服务器连接主服务器的信息

change master to master_host='10.10.172.61', master_port=3306, master_user='master', master_password='baohe', master_log_file='master-bin.000002', master_log_pos=156;

这里面就到了在主服务器中配置的master用户和记录的file和position了,这里要保证从服务器能够远程连接主服务器

start slave

查看从服务状态

show slave status\G;

我们看到从库的I/O线程和SQL线程都正常启动并且已经开始同步

三、测试主从复制功能

我们在主服务器创建名为baohe 的数据库

创建之前的状态两台服务器的数据库情况

我们在主数据库中使用

CREATE DATABASE baohe DEFAULT CHARACTER SET utf8 COLLATE utf8_general_ci;

创建数据库后

可以看到mysql02从服务器也出现了baohe

其实对于所有主数据库DDL和DML都会被从数据复制。

下面分享一篇不错的博文:

MySQL主从复制原理探索

Jul 11, 2017 • hoohack

上一篇文章里面,讲到了遇到mysql主从延迟的坑,对于这次的坑多说两句,以前也看过这样的例子,也知道不能够写完之后马上更新,但是真正开发的时候还是没有注意到这一点,道理大家都懂,但是还是会犯错,只有等到自己亲生体验到该错误之后,才真正的掌握到该道理。

经历过一次mysql主从延迟之后,就开始思考,主从复制是什么东西?它是怎么实现的呢?它的原理是什么?于是乎就开始查阅资料、文章,现将自己理解到的内容总结在此,加深印象。

为什么要做主从复制?

1、在业务复杂的系统中,有这么一个情景,有一句sql语句需要锁表,导致暂时不能使用读的服务,那么就很影响运行中的业务,使用主从复制,让主库负责写,从库负责读,这样,即使主库出现了锁表的情景,通过读从库也可以保证业务的正常运作。

2、做数据的热备

3、架构的扩展。业务量越来越大,I/O访问频率过高,单机无法满足,此时做多库的存储,降低磁盘I/O访问的频率,提高单个机器的I/O性能。

mysql主从复制的原理是什么?

binlog: binary log,主库中保存所有更新事件日志的二进制文件。

主从复制的基础是主库记录数据库的所有变更记录到binlog。binlog是数据库服务器启动的那一刻起,保存所有修改数据库结构或内容的一个文件。

mysql主从复制是一个异步的复制过程,主库发送更新事件到从库,从库读取更新记录,并执行更新记录,使得从库的内容与主库保持一致。

在主库里,只要有更新事件出现,就会被依次地写入到binlog里面,之后会推到从库中作为从库进行复制的数据源。

binlog输出线程。每当有从库连接到主库的时候,主库都会创建一个线程然后发送binlog内容到从库。 对于每一个即将发送给从库的sql事件,binlog输出线程会将其锁住。一旦该事件被线程读取完之后,该锁会被释放,即使在该事件完全发送到从库的时候,该锁也会被释放。

在从库里,当复制开始的时候,从库就会创建两个线程进行处理:

从库I/O线程。当START SLAVE语句在从库开始执行之后,从库创建一个I/O线程,该线程连接到主库并请求主库发送binlog里面的更新记录到从库上。 从库I/O线程读取主库的binlog输出线程发送的更新并拷贝这些更新到本地文件,其中包括relay log文件。

从库的SQL线程。从库创建一个SQL线程,这个线程读取从库I/O线程写到relay log的更新事件并执行。

可以知道,对于每一个主从复制的连接,都有三个线程。拥有多个从库的主库为每一个连接到主库的从库创建一个binlog输出线程,每一个从库都有它自己的I/O线程和SQL线程。

从库通过创建两个独立的线程,使得在进行复制时,从库的读和写进行了分离。因此,即使负责执行的线程运行较慢,负责读取更新语句的线程并不会因此变得缓慢。比如说,如果从库有一段时间没运行了,当它在此启动的时候,尽管它的SQL线程执行比较慢,它的I/O线程可以快速地从主库里读取所有的binlog内容。这样一来,即使从库在SQL线程执行完所有读取到的语句前停止运行了,I/O线程也至少完全读取了所有的内容,并将其安全地备份在从库本地的relay log,随时准备在从库下一次启动的时候执行语句。

查看主从复制的状态

当主从复制正在进行中时,如果想查看从库两个线程运行状态,可以通过执行在从库里执行”show slave status\G”语句,以下的字段可以给你想要的信息:

Master_Log_File — 上一个从主库拷贝过来的binlog文件 Read_Master_Log_Pos — 主库的binlog文件被拷贝到从库的relay log中的位置 Relay_Master_Log_File — SQL线程当前处理中的relay log文件 Exec_Master_Log_Pos — 当前binlog文件正在被执行的语句的位置

整个主从复制的流程可以通过以下图示理解:

步骤一:主库db的更新事件(update、insert、delete)被写到binlog

步骤二:从库发起连接,连接到主库

步骤三:此时主库创建一个binlog dump thread,把binlog的内容发送到从库

步骤四:从库启动之后,创建一个I/O线程,读取主库传过来的binlog内容并写入到relay log

步骤五:还会创建一个SQL线程,从relay log里面读取内容,从Exec_Master_Log_Pos位置开始执行读取到的更新事件,将更新内容写入到slave的db

注:上面的解释是解释每一步做了什么,整个mysql主从复制是异步的,不是按照上面的步骤执行的。

mysql8主从复制集群_mysql8主从复制服务器搭建相关推荐

  1. mysql8主从复制集群_rancher 2.X 搭建小型web集群+mysql主从复制

    一,环境配置 rancher 2.1.6 二,配置harbor私有仓库 见上文 三,配置私有镜像 01,总文件 dockerfile 为主配置文件,html 为站点文件wordpress.,官网下载更 ...

  2. CentOS服务器Mysql主从复制集群的搭建

    在配置Mysql数据库主从复制集群的时候要保证: 1.主从服务器操作系统版本和位数一致. 2.Mysql版本一致. 为了保证稳定性,最好服务器操作系统和Mysql数据库环境一致. CentOS服务器上 ...

  3. docker mysql日志写入本地_Docker Compose搭建MySQL主从复制集群

    转载自https://zhuanlan.zhihu.com/p/45193580 前言 随着应用业务数据不断的增大,应用的 响应速度不断下降,在检测过程中我们不难发现大多数的请求都是 查询操作.此时, ...

  4. NoSQL(3) 之Redis主从复制、哨兵和集群介绍及详细搭建步骤

    文章目录 一.主从复制 1.1 主从复制的概念 1.2 主从复制的作用 1.3 主从复制的流程 1.4 部署Redis 主从复制步骤 1)首先要搭建redis,在之前的博客写过, 具体可参考:NoSQ ...

  5. Docker学习总结(43)——Docker Compose 搭建Mysql主从复制集群

    前言 随着应用业务数据不断的增大,应用的 响应速度不断下降,在检测过程中我们不难发现大多数的请求都是 查询操作.此时,我们可以将数据库扩展成 主从复制模式,将 读操作 和 写操作 分离开来,多台数据库 ...

  6. 基于 k8s 搭建 mysql 5.7 主从复制集群

    关于 k8s 集群环境的搭建可以参考我的另一篇博客 k8s 集群之使用 kubeadm 在 Centos8 上部署 kubernetes 1.20 关于 nfs 网络存储如何搭建和使用可以参考我的另一 ...

  7. 深入学习 Redis 之第 1 篇 —— Docker 安装 Redis 并搭建主从复制集群

    环境要求:CentOS7 X64 位,Redis6.0+ 理论基础 1.什么是 Redis 的主从复制? Redis 的复制功能支持多个库之间的数据同步.一类是主库(master),另一类是从库(sl ...

  8. 高可用的Redis主从复制集群,从理论到实践

    作者:Sicimike blog.csdn.net/Baisitao_/article/details/105545410 前言 我们都知道,服务如果只部署一个节点,很容易出现单点故障,从而导致服务不 ...

  9. redis集群之主从复制+哨兵模式

    文章目录 一.redis集群之主从复制 1.1.集群介绍 1.2.搭建过程 1.3.验证 二.redis集群之哨兵模式 2.1.部署过程 1.搭建主从复制集群 2.设置哨兵模式的配置文件 3.启动哨兵 ...

最新文章

  1. Springboot 日志、配置文件、接口数据如何脱敏?老鸟们都是这样玩的!
  2. 【Open Search产品评测】-- 淘点点:基于OpenSearch,轻松实现一整套O2O类
  3. 理解 Android 的 Binder 机制
  4. 蓝牙4.0技术分析1-广播者角色
  5. 160个Crackme040
  6. java前后端数据交互_前后端数据交互(示例代码)
  7. rust(14)-if let,while let
  8. 【struts2】struts2配置文件—struts.xml
  9. Spring框架(1)
  10. 在php中默认访问权限修饰符是,php中访问修饰符的知识点总结
  11. [蓝牙 4.0 CC2541 开发] BLE架构与OSAL
  12. RS485通讯上下拉电阻的选择
  13. Dell 服务器阵列扩容【经验分享(转)】
  14. Java--获取xml头encoding编码方式
  15. 2022年九款大数据数据分析软件工具推荐
  16. Everything To Byte And To Tensor -- Welcome to age of AI
  17. Codeforces Gym 100339B Diversion 树形DP + LCA
  18. 100层楼,2个鸡蛋问题
  19. php-fpm彻底解决502(php-fpm多开、nginx限制并发、定时重启)解决网站卡顿的终极奥义
  20. 怎样用excel按进行分类求和,最后再根据一列对其他列进行排序

热门文章

  1. 荣耀30s鸿蒙5g,麒麟820四大5G亮点加持 荣耀30S月底发布
  2. mysql decimal
  3. tensorflow示例代码注释2
  4. (CVPR 2019)PointPillars: Fast Encoders for Object Detection From Point Clouds
  5. 纳米软件之电机自动测试系统
  6. 当本本遇上蓝牙手机——玩转蓝牙无线上网、无线控制
  7. 关于LTE中为什么需要做UE上行同步(TA,Timing Advance)最好的解释【摘自博友】
  8. ​ 数据库约束【mysql】
  9. php富友表单提交接口对接
  10. 通过IPV6上QQ及自建IPV6代理的方法