文章目录

  • 一、MySQL的日志管理
    • MySQL的日志分类
    • 2、MySQL的日志开启
    • 3、进入数据库里查看相对应的日志是否开启
      • 1、查看通用查询日志是否开启
      • 2、查看二进制日志是否开启
      • 3、查看慢查询日志相关功能
  • 二、MySQL完全备份与恢复
    • 数据备份的重要性
    • 造成数据丢失的原因
    • 1、数据库备份的分类
      • 1、从物理与逻辑的角度分类
      • 2、从数据库的备份策略角度分类
    • 2、 常见的备份方法
      • 1、物理冷备
      • 2、专用备份工具mydump或mysqlhotcopy
      • 3、启用二进制日志进行增量备份
      • 4、第三方工具备份
  • 三、数据库冷备份与恢复及完全备份与恢复的基本命令
    • 1、物理冷备份与恢复
    • 2、mysqldump 备份与恢复
      • 1、完全备份一个或多个完整的库（包括其中所有的表）
      • 2、完全备份 MySQL 服务器中所有的库
      • 3、完全备份指定库中的部分表
      • 4、查看备份文件
  • 四 MySQL 完全恢复
    • 1、恢复数据库
    • 2、恢复数据表
  • 五、MySQL 增量备份与恢复的方法
    • 1、MySQL 增量备份
      • 1、开启二进制日志功能
      • 2、可每周对数据库或表进行完全备份
      • 3、可每天进行增量备份操作，生成新的二进制日志文件(例如 mysql-bin.000002)
      • 4、插入新数据，以模拟数据的增加或变更
      • 5、再次生成新的二进制日志文件(例如 mysql-bin.000003)
      • 6、查看二进制日志文件的内容
    • 2、MySQL 增量恢复
      • 1、一般恢复
      • 断点恢复
      • 基于时间点恢复

一、MySQL的日志管理

MySQL 的日志默认保存位置为/usr/local/mysql/data

MySQL的日志分类

  • 错误日志
    用于记录MySQL启动、停止或运行时发生的错误信息，默认已开启
指定日志的保存位置和文件名
log-error=/usr/local/mysql/data/mysql_error.log
  • 二进制日志
    用来记录所有更新了数据或者已经潜在更新了数据的语句，记录了数据的更改，可用于数据恢复
log-bin=mysql-bin
或
log_bin=mysql-bin
  • 中继日志
    一般情况下它在MySQL主从同步、读写分离集群的从节点才开启，主节点一般不需要这个日志。
  • 慢查询日志
    用来记录所有执行时间超过long_query_time秒的语句，可以找到哪些查询语句执行时间长，以便于优化，默认是关闭的
slow_query_log=ON
slow_query_log_file=/usr/local/mysql/data/mysql_slow_query.log     #指定文件路径和名称
long_query_time=5       #设置执行超过5秒的语句会被记录，缺省时间为10秒systemctl restart mysqld

2、MySQL的日志开启

通过对MySQL的配置文件进行永久性修

vim /etc/my.cnf
[mysqld]
##错误日志，用来记录当MySQL启动、停止或运行时发生的错误信息，默认已开启
#指定错误日志的保存位置和文件名
log-error=/usr/local/mysql/data/mysql_error.log##通用查询日志，用来记录MySQL的所有连接和语句，默认是关闭的
general_log=ON
general_log_file=/usr/local/mysql/data/mysql_general.log##二进制日志(binlog)，用来记录所有更新了数据或者已经潜在更新了数据的语句，记录了数据的更改，可用于数据恢复，默认已开启
log-bin=mysql-bin
#也可以 log_bin=mysql-bin##慢查询日志，用来记录所有执行时间超过long_query_time秒的语句，可以找到哪些查询语句执行时间长，以便于优化，默认是关闭的
slow_query_log=ON
slow_query_log_file=/usr/local/mysql/data/mysql_slow_query.log
long_query_time=5  #设置超过5秒执行的语句被记录，缺省时为10秒systemctl restart mysqld.service


3、进入数据库里查看相对应的日志是否开启

首先进入MySQL数据库

mysql -u root -p

1、查看通用查询日志是否开启

show variables like 'general%';

2、查看二进制日志是否开启

3、查看慢查询日志相关功能

（1）查看慢查询日志功能是否开启

show variables like '%slow%';


（2）查看慢查询时间设置

二、MySQL完全备份与恢复

数据备份的重要性

  • 备份的主要目的是灾难恢复
  • 在生产环境中，数据的安全性至关重要
  • 任何数据的丢失都可能产生严重的后果

造成数据丢失的原因

  • 程序错误
  • 人为操作错误
  • 运算错误
  • 磁盘故障
  • 灾难（如火灾、地震）和盗窃

1、数据库备份的分类

1、从物理与逻辑的角度分类

（1）物理备份
-对数据库操作系统的物理文件（如数据文件、日志文件等）的备份

  • 冷备份（脱机备份）：是在关闭数据库的时候进行的
  • 热备份（联机备份）：数据库处于运行状态，依赖于数据库的日志文件mysqldump
  • 温备份：数据库锁定表格（不可写入但可读）的状态下进行备份操作
    （2）逻辑备份
  • 对数据库逻辑组件（如：表等数据库对象）的备份,表示为逻辑数据库结构（CREATE DATABASB，CREATBTABLE语句)和内容(INSERT语句或分隔文本文件）的信息。这种类型的备份适用于可以编辑数据值或表结构较小的数据量，或者在不同的机器体系结构上重新创建数据

2、从数据库的备份策略角度分类

（1）完全备份
每次对数据进行完整的备份，即对整个数据库、数据库结构和文件结构的备份，保存的是备份完成时刻的数据库的数据库，是差异备份与增量备份的基础。完全备份的备份与恢复操作都非常简单方便，但是数据存在大量的重复，并且会占用大量的磁盘空间，备份的时间也很长。
（2）差异备份

差异备份:备份那些自从上次完全备份之后被修改过的所有文件，备份的时间节点是从上次完整备份起，备份数据量会越来越大。恢复数据时，只需恢复上次的完全备份与最近的一次差异备份。
（3）增量备份
增量备份:只有那些在上次完全备份或者增量备份后被修改的文件才会被备份。以上次完整备份或上次增量备份的时间为时间点，仅备份这之间的数据变化，因而备份的数据量小，占用空间小，备份速度快。但恢复时，需要从上一次的完整备份开始到最后一次增量备份之的所有增量依次恢复，如中间某次的备份数据损坏，将导致数据的丢失。

2、 常见的备份方法

1、物理冷备

备份时数据库处于关闭状态，直接打包数据库文件
备份速度快，恢复时也是最简单的

2、专用备份工具mydump或mysqlhotcopy

mysqldump常用的逻辑备份工具
mysqlhotcopy仅拥有备份MyISAM和ARCHIVE表

3、启用二进制日志进行增量备份

进行增量备份，需要刷新二进制日志

4、第三方工具备份

免费的MySQL热备份软件Percona XtraBackup

三、数据库冷备份与恢复及完全备份与恢复的基本命令

1、物理冷备份与恢复

systemctl stop mysqld
yum -y install xz                   #xz是一个压缩工具
#压缩备份
tar Jcvf /opt/mysql_all_$(date +%F).tar.xz /usr/local/mysql/data/
#解压恢复
tar Jxvf /opt/mysql_all_2021-02-05.tar.xz -C /usr/local/mysql/datasystemctl start mysqld




2、mysqldump 备份与恢复

1、完全备份一个或多个完整的库（包括其中所有的表）

#导出的备份文件就是数据库脚本文件
mysqldump -u root -p[密码] --databases 库名1 [库名2] … > /备份路径/备份文件名.sql
例：
mysqldump -u root -p --databases school > /opt/school.sql
mysqldump -u root -p --databases mysql school > /opt/mysql-school.sql


2、完全备份 MySQL 服务器中所有的库

mysqldump -u root -p[密码] --all-databases > /备份路径/备份文件名.sql
例：
mysqldump -u root -p --all-databases > /opt/all.sql

3、完全备份指定库中的部分表

mysqldump -u root -p[密码] [-d] 库名 [表名1] [表名2] … > /备份路径/备份文件名.sql
#使用“ -d ”选项，说明只保存数据库的表结构
#不使用“ -d ”选项，说明表数据也进行备份
例：
mysqldump -u root -p school class > /opt/school_class.sql

4、查看备份文件

cat /opt/备份的文件 |grep -v "^--" | grep -v "^/" | grep -v "^$"例：
cat /opt/school_class.sql |grep -v "^--" | grep -v "^/" | grep -v "^$"

四 MySQL 完全恢复

1、恢复数据库

#“-e”选项，用于指定连接 MySQL 后执行的命令，命令执行完后自动退出
mysql -u root -p -e 'drop database school;'
mysql -u root -p -e 'show databases;'mysql -u root -p < /opt/school.sql
mysql -u root -p -e 'show databases;'

2、恢复数据表

  • 当备份文件中只包含表的备份，而不包含创建的库的语句时，执行导入操作时必须指定库名，且目标库必须存在。
mysql -u root -p -e 'drop table school.data;'
mysql -u root -p -e 'show tables from school;'mysql -u root -p school < /opt/school_data.sql
mysql -u root -p -e 'show tables from school;'

五、MySQL 增量备份与恢复的方法

1、MySQL 增量备份

二进制日志（binlog）有三种不同的记录格式
STATEMENT（基于SQL语句）
binlog format=STATEMENT默认
每一条涉及到被修改的sql都会记录在binlog中。
缺点:日志量过大,如sleep()函数， last_insert_id()>，以及user-definedfunctions(udf)、主从复制等架构记录日志时会出问题会出现问题

ROW（基于行）
shell binlog format=ROw
只记录变动的记录，不记录sql的上下文环境。
缺点:如果遇到updata … set … where true那么就binlog的数据量就变大

binlog format=M工XED推荐使用
一般的语句使用statement,函数使用ROW方式存取

1、开启二进制日志功能

vim /etc/my.cnf
[mysqld]
log-bin=mysql-bin
server-id = 1
binlog_format = MIXED              #指定二进制日志(binlog)的记录格式为 MIXED#二进制日志(binlog)有3种不同的记录格式：STATEMENT(基于SQL语句)、ROW(基于行)、MIXED(混合模式)，默认格式是STATEMENTsystemctl restart mysqld.service
ls -l /usr/local/mysql/data/mysql-bin.*


2、可每周对数据库或表进行完全备份

  • 这种定时任务可以结合crontab -e 计划性任务来执行
#手动执行备份
mysqldump -u root -p school class > /opt/school_class_$(date +%F).sql
mysqldump -u root -p --all-databases > /opt/allmysql_$(date +%F).sql#使用crontab -e 计划性任务来执行；每周1凌晨2点对表class和所有的库进行备份
0 2 * * 1 mysqldump -u root -p school class > /opt/school_class_$(date +%F).sql
0 2 * * 1 mysqldump -u root -p --all-databases > /opt/allmysql_$(date +%F).sql

3、可每天进行增量备份操作，生成新的二进制日志文件(例如 mysql-bin.000002)

mysqladmin -u root -p flush-logs

4、插入新数据，以模拟数据的增加或变更

mysql -u root -p
use school;
insert into data values (*);
insert into data values (*);

5、再次生成新的二进制日志文件(例如 mysql-bin.000003)

mysqladmin -u root -p flush-logs
#之前的步骤4的数据库操作会保存到mysql-bin.000002文件中，之后数据库数据再发生变化则保存在mysql-bin.000003文件中

6、查看二进制日志文件的内容

cp /usr/local/mysql/data/mysql-bin.000002 /opt/
mysqlbinlog --no-defaults --base64-output=decode-rows -v /opt/mysql-bin.000002
#--base64-output=decode-rows：使用64位编码机制去解码并按行读取
#-v：显示详细内容

2、MySQL 增量恢复

1、一般恢复

（1）模拟丢失更改的数据的恢复步骤

mysql -u root -p
use school;
delete from data  where id=3;
delete fromdata where id=4;
select * from data;
quitmysqlbinlog --no-defaults /opt/mysql-bin.000002 | mysql -u root -p
mysql -u root -p -e "select * from school.data;"


断点恢复

create table test (id int(5),name varchar(10),age int(5))
/*!*/;
##-------------解释：at xxx 表示位置点------------------------------------------------
# at 502
##--------------解释：开头210416 15:14:16表示时间，其他的现在用不到--#210416 15:14:16 server id 1  end_log_pos 637 CRC32 0xe8270d0a     Query   thread_id=12   exec_time=0    error_code=0
#
SET TIMESTAMP=1618557256/*!*/;  <------------建立时间戳
##--------------解释：这里是执行的操作语句---------------------
insert into test values (1,'zhangsan',10),(2,'wanger',30)
/*!*/;<-------向表中插入数据
# at 637
#210416 15:14:16 server id 1  end_log_pos 668 CRC32 0x30d8ffde  Xid = 154
COMMIT/*!*/;
# at 668
#210416 15:14:51 server id 1  end_log_pos 733 CRC32 0x436ac45e  Anonymous_GTID  last_committed=2   sequence_number=3  rbr_only=no
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
# at 733
#210416 15:14:51 server id 1  end_log_pos 816 CRC32 0x391b85be  Query   thread_id=12   exec_time=0    error_code=0
SET TIMESTAMP=1618557291/*!*/;
BEGIN
/*!*/;
# at 816
#210416 15:14:51 server id 1  end_log_pos 934 CRC32 0xe8cba556  Query   thread_id=12   exec_time=0    error_code=0
SET TIMESTAMP=1618557291/*!*/;
insert into test values (3,'zhaoliu',19)
/*!*/;
# at 934
#210416 15:14:51 server id 1  end_log_pos 965 CRC32 0xa7c46971  Xid = 155
COMMIT/*!*/;
# at 965
#210416 15:15:28 server id 1  end_log_pos 1030 CRC32 0x14687e87     Anonymous_GTID  last_committed=3   sequence_number=4  rbr_only=no
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
# at 1030
#210416 15:15:28 server id 1  end_log_pos 1113 CRC32 0xb9ff61f6     Query   thread_id=12   exec_time=0    error_code=0
SET TIMESTAMP=1618557328/*!*/;
BEGIN
/*!*/;# at 1113
#210416 15:15:28 server id 1  end_log_pos 1218 CRC32 0xc9351a7a     Query   thread_id=12   exec_time=0    error_code=0
SET TIMESTAMP=1618557328/*!*/;
delete from test where id=1
/*!*/;
# at 1218
#210416 15:15:28 server id 1  end_log_pos 1249 CRC32 0x670e6ca5     Xid = 157
COMMIT/*!*/;
# at 1249
#210416 15:16:18 server id 1  end_log_pos 1314 CRC32 0x8226cd64     Anonymous_GTID  last_committed=4   sequence_number=5  rbr_only=no
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
# at 1314
#210416 15:16:18 server id 1  end_log_pos 1397 CRC32 0xd69261d7     Query   thread_id=12   exec_time=0    error_code=0
SET TIMESTAMP=1618557378/*!*/;
BEGIN
/*!*/;
# at 1397
#210416 15:16:18 server id 1  end_log_pos 1512 CRC32 0x4b701396     Query   thread_id=12   exec_time=0    error_code=0
SET TIMESTAMP=1618557378/*!*/;
insert into test values (4,'liu1',77)
/*!*/;
# at 1512
#210416 15:16:18 server id 1  end_log_pos 1543 CRC32 0x5f7ec3b2     Xid = 158
COMMIT/*!*/;
# at 1543
#210416 15:26:45 server id 1  end_log_pos 1590 CRC32 0xd4c83148     Rotate to mysql-bin.000005  pos: 4
SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
# End of log file
/*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

（1）基于位置恢复

  • 仅恢复到位置点为“1113”之前的数据，即不恢复“id=1”的数据
恢复到操作ID为‘1116’之前的数据，就是不执行删除id=1的操作
mysqlbinlog --no-defaults --stop-position='1113' /usr/local/mysql/data/mysql-bin.000004 | mysql -uroot -p123456
意思就是跳过我们删除的操作其余的都恢复
mysqlbinlog --no-defaults --start-position='1543' /usr/local/mysql/data/mysql-bin.000004 | mysql -uroot -p123456操作前首先要删除需要备份的表


基于时间点恢复

  • 删除school库中的test表，先基于完整备份的恢复，在基于时间点恢复
#仅恢复到17:12:40之前的数据，就是不执行删除id=1的操作直接跳过
mysqlbinlog --no-defaults --stop-datetime='2021-04-16 15:15:28 ' /usr/local/mysql/data/mysql-bin.000004 | mysql -uroot -p123456
#跳过17:12:40的数据恢复之后的数据
mysqlbinlog --no-defaults --start-datetime='2021-04-16 15:26:45' /usr/local/mysql/data/mysql-bin.000004 | mysql -uroot -p123456


数据库之MySQL日志管理、备份与恢复相关推荐

  1. MySQL日志管理、备份与恢复

    MySQL日志管理.备份与恢复 前言 一.MySQL日志管理 (1)日志分类 ①错误日志 ②通用查询日志 ③二进制日志 ④慢查询日志 ⑤中继日志 (2)日志配置 (3)日志查询 ①查询通用日志是否开启 ...

  2. 【MySQL 日志管理、备份与恢复】

    目录 一.数据库备份的分类 1.从物理与逻辑的角度 1.1.物理备份: 对数据库操作系统的物理文件(如数据文件,日志文件等)的备份 1.2.逻辑备份 2.从数据库的备份策略角度 3.常见的备份方法 3 ...

  3. 数据库（mysql）之备份与恢复

    目录 一.MySQL日志管理 1.日志类型与作用 1.redo (重做日志) 2.undo(回滚日志) 3.errorlog(错误日志)☆ 4.slow query log(慢查询日志)☆ 5.bin ...

  4. MySQL日志管理、备份

    MySQL日志管理.备份 在生产中,数据的重要性尤其的高,在我们听过的各种生产上的事故中,关于数据丢失误删的占了大多数,并导致了很严重的后果,所以数据备份对于我们来说非常重要. MySQL日志管理 M ...

  5. Linux命令：MySQL系列之十一--MySQL日志管理

    MySQL日志管理 SHOW GLOBAL VARIABLES LIKE '%log%':查看关于log的全局变量 一.日志分类 1.错误日志   2.一般查询日志   3.慢查询日志 4.二进制日志 ...

  6. linux下mysql日志管理及mysql备份还原

    linux下mysql日志管理及mysql备份还原 1.SHOW GLOBAL VARIABLES LIKE '%log%';  显示所有日志相关的选项 2.错误日志:log_error和log_wa ...

  7. mysql日志管理及主从复制

    mysql主从复制 一.mysql日志管理 二.日志备份恢复与迁移 三.搭建主从复制 三.主从复制工作原理 以192.168.25.131为例 一.mysql日志管理 MYSQL日志管理: binlo ...

  8. mysql数据库日志存储位置_MySQL数据库之mysql日志文件在哪 如何修改MySQL日志文件位置...

    本文主要向大家介绍了MySQL数据库之mysql日志文件在哪 如何修改MySQL日志文件位置 ,通过具体的内容向大家展现,希望对大家学习MySQL数据库有所帮助. MySQL日志文件相信大家都有很多的 ...

  9. mysql 日志记录 archive_完美起航-Mysql日志管理、备份与恢复

    一.Mysql日志分类 MySQL的默认日志保存位置为/usr/local/mysql/data vim /etc/my.cnf 1.错误日志 说明: 在对应的数据目录中,以主机名+.err命名的文件 ...

  10. mysql日志管理_关于MySQL的日志管理（binlog）

    关于MySQL的日志管理(binlog) 一.查看binlog的启用状态 最常用的mysql版本是5.7,默认不开启binlog,可以在登录mysql之后,利用以下命令查看当前的binlog启用状态: ...

最新文章

  1. python下requests的安装、测试、入门资料、官方资料
  2. C#中保存Gif文件设置透明无效果
  3. python 离散数据时间序列图_每个人都学的会的数据分析
  4. 管理服务器文件绿色版本,Services.msc服务器文件官方版
  5. 美国计算机科学联赛获奖,【竞赛获奖】西安高新一中国际班学子在2018-2019美国计算机科学联赛 (ACSL)积分赛中创造历史！...
  6. 资源下载！5本从Python入手机器学习的必备电子书！（附下载链接）
  7. 使用POI生成Excel文件，可以自动调整excel列宽
  8. 为什么黑客都用python-为什么如此多的黑客都用python？
  9. android多屏互动方案,史上最实用的多屏互动教程之PC投屏安卓篇
  10. 鹏业软件CAD云服务转图纸没反应的说明
  11. Hibernate 学习的书-夏昕（2）
  12. CSV文件打开看到双引号
  13. leaflet怎么获取矩形的中心点位 getCenter()
  14. 鹿晗关晓彤公开恋情，是如何把微博服务器搞炸的？ 鹿晗关晓彤公开恋情，是如何把微博服务器搞炸的？ 题图：《盗墓笔记》 鹿晗关晓彤公开恋情，是如何把新浪微博的服务器搞垮的？ 知友：苏莉安（200+
  15. matlab中主程序如何调用其它子程序,主程序怎样调用子程序
  16. insmod等模块命令
  17. win7计算机无法连接投影仪,win7系统下投影仪无法输出信号到电脑的解决方法
  18. UnityWebRequest 下载服务器图片显示红色问号解决方案
  19. CSGO怎么录制自己的demo？
  20. 看一眼就能学会---使用link让docker容器互相通信

热门文章

  1. office 2017 （或2007）如何在方框里打钩 或 插入可打钩的方框
  2. 快速上手 Android 蓝牙串口 SPP 开发
  3. C/C++打印百分号 %
  4. 在web上制作动画(css3)
  5. MMORPG服务器架构
  6. 使用Xmanger/Xbrowser 远程桌面Ubuntu 12.04 LTS
  7. 玩转PS路径，轻松画logo！
  8. 如何绘制日式厚涂插画_厚涂样式
  9. MATLAB中图像索引和抖动转换
  10. 微信小程序入门（一）：小程序账号注册 + 微信开发者工具安装