innobackupex和Xtrabackup备份和恢复MySQL数据
innobackupex备份和恢复MySQL数据
当MySQL数据量很小时,我们可以使用mysqldump来备份,无论是myisam引擎还是innodb引擎都是没有问题的。
但数据量很大,比如上百GB甚至上TB时,再使用mysqldump备份就会很鸡肋了,试想光备份一次全量备份要耗费10几个小时,那就别干别的了。因为,毕竟mysqldump时是会锁表的。
还好我们有xtrabakcup这个工具来备份量级比较大的数据,上百G的数据,仅仅几十分钟搞定,这主要取决于磁盘的I/O效率。不过xtrabackp默认只支持备份innodb,而myisam引擎的数据就不友好了。
不过,没有关系,我们还有一个xtrabackup的变种工具–innobackupex,它不管是innodb还是myisam都通吃。 下面是innobackup工具的安装以及使用方法。
1 安装官方的yum源
rpm -ivh http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm
2 安装innobackupex包
yum install percona-xtrabackup
3 授权一个专门用来备份的用户
GRANT RELOAD, LOCK TABLES, REPLICATION CLIENT ON *.* TO 'bakuser'@'localhost' identified by 'yourpassword';
4 全量备份
innobackupex --defaults-file=/etc/my.cnf --user=bakuser --password='yourpassword' /bakdir/
说明:defaults-file指定配置文件,它需要通过配置文件来获取一些mysql服务的信息,比如datadir在哪里。user和password就是刚刚授权的用户和密码,最后面的/bakdir为备份数据存放目录。
备份完成后,会在/bakdir生成一个以年月日时间为命名的目录,这个里面就是备份的数据。假如备份的目录为2017-06-07_17-26-39
5 数据恢复
innobackupex --use-memory=2G --apply-log 2017-06-07_17-26-39
innobackupex --defaults-file=/etc/my.cnf --use-memory=2G --copy-back /bakdir/2017-06-07_17-26-39/
说明:第一步为恢复前的准备工作,这一步不做是没法恢复的。第二步执行之前,需要把mysqld服务关闭,而且datadir要清空。
Xtrabackup实现数据的备份与恢复
Xtrabackup介绍
Xtrabackup是由percona开源的免费数据库热备份软件,它能对InnoDB数据库和XtraDB存储引擎的数据库非阻塞地备份(对于MyISAM的备份同样需要加表锁);mysqldump备份方式是采用的逻辑备份,其最大的缺陷是备份和恢复速度较慢,如果数据库大于50G,mysqldump备份就不太适合。
Xtrabackup安装完成后有4个可执行文件,其中2个比较重要的备份工具是innobackupex、xtrabackup
1)xtrabackup 是专门用来备份InnoDB表的,和mysql server没有交互;
2)innobackupex 是一个封装xtrabackup的Perl脚本,支持同时备份innodb和myisam,但在对myisam备份时需要加一个全局的读锁。
3)xbcrypt 加密解密备份工具
4)xbstream 流传打包传输工具,类似tar
Xtrabackup优点
Xtrabackup优点
1)备份速度快,物理备份可靠
2)备份过程不会打断正在执行的事务(无需锁表)
3)能够基于压缩等功能节约磁盘空间和流量
4)自动备份校验
5)还原速度快
6)可以流传将备份传输到另外一台机器上
7)在不增加服务器负载的情况备份数据
Xtrabackup备份原理
备份原理
备份开始时首先会开启一个后台检测进程,实时检测mysq redo的变化,一旦发现有新的日志写入,立刻将日志记入后台日志文件xtrabackup_log中,之后复制innodb的数据文件一系统表空间文件ibdatax,复制结束后,将执行flush tables with readlock,然后复制.frm MYI MYD等文件,最后执行unlock tables,最终停止xtrabackup_log
输出如下提示信息
xtrabackup: Transaction log of lsn (2543172) to (2543181) was copied.
171205 10:17:52 completed OK!
Xtrabackup增量备份介绍
xtrabackup增量备份的原理是:
1)、首先完成一个完全备份,并记录下此时检查点LSN;
2)、然后增量备份时,比较表空间中每个页的LSN是否大于上次备份的LSN,若是则备份该页并记录当前检查点的LSN。
增量备份优点:
1)、数据库太大没有足够的空间全量备份,增量备份能有效节省空间,并且效率高;
2)、支持热备份,备份过程不锁表(针对InnoDB而言),不阻塞数据库的读写;
3)、每日备份只产生少量数据,也可采用远程备份,节省本地空间;
4)、备份恢复基于文件操作,降低直接对数据库操作风险;
5)、备份效率更高,恢复效率更高。
Xtrabackup安装
下载安装xtrabackup
wget https://www.percona.com/downloads/XtraBackup/Percona-XtraBackup-2.4.9/binary/redhat/6/x86_64/Percona-XtraBackup-2.4.9-ra467167cdd4-el6-x86_64-bundle.tar
[root@centos ~]# ll
total 703528
-rw-r--r-- 1 root root 654007697 Sep 27 09:18 mysql-5.7.17-linux-glibc2.5-x86_64.tar.gz
-rw-r--r-- 1 root root 65689600 Nov 30 00:11 Percona-XtraBackup-2.4.9-ra467167cdd4-el6-x86_64-bundle.tar
[root@centos ~]# tar xf Percona-XtraBackup-2.4.9-ra467167cdd4-el6-x86_64-bundle.tar
[root@centos ~]# yum install percona-xtrabackup-24-2.4.9-1.el6.x86_64.rpm -y
[root@centos ~]# which xtrabackup
/usr/bin/xtrabackup
[root@centos ~]# innobackupex -v
innobackupex version 2.4.9 Linux (x86_64) (revision id: a467167cdd4)
#已经安装完成
创建测试数据
mysql> create database test;
Query OK, 1 row affected (0.00 sec)
mysql> use test;
Database changed
mysql> create table T1 (name varchar(10) not null,sex varchar(10) not null);
Query OK, 0 rows affected (0.15 sec)
mysql> insert into T1 values('zhang','man');
Query OK, 1 row affected (0.01 sec)
mysql> insert into T1 values('zhan','man');
Query OK, 1 row affected (0.01 sec)
mysql> insert into T1 values('sun','woman');
Query OK, 1 row affected (0.00 sec)
Xtrabackup全量备份与恢复
[root@centos ~]# innobackupex --defaults-file=/etc/my.cnf --user=root --password="123456" --backup /root
从备份过程截图可以看出会创建一个时间的目录
[root@centos ~]# ll /root/2017-12-04_13-57-29/
total 12352
-rw-r----- 1 root root 425 Dec 4 13:57 backup-my.cnf
-rw-r----- 1 root root 322 Dec 4 13:57 ib_buffer_pool
-rw-r----- 1 root root 12582912 Dec 4 13:57 ibdata1
drwxr-x--- 2 root root 4096 Dec 4 13:57 mysql
drwxr-x--- 2 root root 4096 Dec 4 13:57 performance_schema
drwxr-x--- 2 root root 12288 Dec 4 13:57 sys
drwxr-x--- 2 root root 4096 Dec 4 13:57 test
-rw-r----- 1 root root 22 Dec 4 13:57 xtrabackup_binlog_info
-rw-r----- 1 root root 113 Dec 4 13:57 xtrabackup_checkpoints
-rw-r----- 1 root root 537 Dec 4 13:57 xtrabackup_info
-rw-r----- 1 root root 2560 Dec 4 13:57 xtrabackup_logfile
#这里面就是相关的备份文件,同样也可以看到我们创建的库的名称
[root@centos ~]#innobackupex --apply-log /root/2017-12-04_13-57-29/
#使用此参数使用相关数据性文件保持一致性状态
mysql> drop table T1;
Query OK, 0 rows affected (0.01 sec)
mysql> select * from T1;
ERROR 1146 (42S02): Table 'test.T1' doesn't exist
接下来准备恢复误删除数据
#恢复数据之前需要保证数据目录是空的状态
[root@centos ~]# innobackupex --defaults-file=/etc/my.cnf --copy-back /root/2017-12-04_13-57-29/
#具体看日志截图
[root@centos ~]# /etc/init.d/mysqld start
Starting MySQL. SUCCESS!
[root@centos ~]# lsof -i :3306
COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME
mysqld 5935 mysql 21u IPv6 21850 0t0 TCP *:mysql (LISTEN)
mysql> use test;
Database changed
mysql> select * from T1;
+-------+-------+
| name | sex |
+-------+-------+
| zhang | man |
| zhan | man |
| sun | woman |
+-------+-------+
3 rows in set (0.00 sec)
##恢复成功
Xtrabackup增量备份与恢复
#需要注意的是,增量备份仅能应用于InooDB或XtraDB表,对于MyISAM表,增量与全备相同
mysql> select * from T1;
+-------+-------+
| name | sex |
+-------+-------+
| zhang | man |
| zhan | man |
| sun | woman |
| susun | woman |
| sige | man |
| mgg | man |
+-------+-------+
6 rows in set (0.00 sec)
创建用于增量备份的数据,用来模拟删除掉了全备后的数据,能否通过增量备份文件来恢复
[root@Vcentos ~]# innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 --incremental /backup/ --incremental-basedir=/root/2017-12-04_13-57-29
#--incremental /backup/ 指定增量备份文件备份的目录
#--incremental-basedir 指定上一次全备或增量备份的目录
[root@Vcentos ~]# ll /backup/2017-12-05_09-27-06/
total 312
-rw-r----- 1 root root 425 Dec 5 09:27 backup-my.cnf
-rw-r----- 1 root root 412 Dec 5 09:27 ib_buffer_pool
-rw-r----- 1 root root 262144 Dec 5 09:27 ibdata1.delta
-rw-r----- 1 root root 44 Dec 5 09:27 ibdata1.meta
drwxr-x--- 2 root root 4096 Dec 5 09:27 mysql
drwxr-x--- 2 root root 4096 Dec 5 09:27 performance_schema
drwxr-x--- 2 root root 12288 Dec 5 09:27 sys
drwxr-x--- 2 root root 4096 Dec 5 09:27 test
-rw-r----- 1 root root 21 Dec 5 09:27 xtrabackup_binlog_info
-rw-r----- 1 root root 117 Dec 5 09:27 xtrabackup_checkpoints
-rw-r----- 1 root root 560 Dec 5 09:27 xtrabackup_info
-rw-r----- 1 root root 2560 Dec 5 09:27 xtrabackup_logfile
[root@centos ~]# cd /backup/2017-12-05_09-27-06/
[root@centos 2017-12-05_09-27-06]# cat xtrabackup_binlog_info
mysql-bin.000001 945
[root@centos 2017-12-05_09-27-06]# cat xtrabackup_checkpoints
backup_type = incremental
from_lsn = 2542843
to_lsn = 2547308
last_lsn = 2547317
compact = 0
recover_binlog_info = 0
删除一条数据来测试增量恢复
mysql> delete from T1 where name='susun';
Query OK, 1 row affected (0.06 sec)
增量恢复操作过程如下
[root@centos ~]# innobackupex --apply-log --redo-only /root/2017-12-04_13-57-29/
[root@centos ~]# innobackupex --apply-log --redo-only /root/2017-12-04_13-57-29/ --incremental-dir=/backup/2017-12-05_09-27-06/
恢复全部数据
[root@centos ~]#innobackupex --defaults-file=/etc/my.cnf --copy-back /root/2017-12-04_13-57-29/
[root@centos ~]# /etc/init.d/mysqld start
Starting MySQL.. SUCCESS!
[root@centos ~]# lsof -i :3306
COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME
mysqld 23217 mysql 21u IPv6 283226 0t0 TCP *:mysql (LISTEN)
查看恢复的数据完整性
参考链接 :
innobackupex备份和恢复MySQL数据 : https://mp.weixin.qq.com/s/ch3NGfCtECvtI-GW6Q8_6Q
Xtrabackup实现数据的备份与恢复 https://mp.weixin.qq.com/s/khHbIkwTiWkV7Aviw3R2jA
innobackupex和Xtrabackup备份和恢复MySQL数据相关推荐
- mysql is not empty_MySQL数据库之Xtrabackup恢复mysql数据时候报错:Original data directory is not empty!...
本文主要向大家介绍了MySQL数据库之Xtrabackup恢复mysql数据时候报错:Original data directory is not empty! ,通过具体的内容向大家展现,希望对大家 ...
- mysql xtrabackup恢复_MySQL Xtrabackup备份和恢复
http://instance.iteye.com/blog/1454027 2.安装Xtrabackup ,下载Xtrabackup 配置源 #vi /etc/yum.repos.d/percona ...
- xtrabackup 备份与还原 mysql数据库
xtrabackup 备份与还原 mysql数据库 安装 官网地址: xtrabackup centos (apt,tar解压安装方式见上链接) $ yum install http://www.pe ...
- mysql怎么备份和恢复_如何优雅的备份和恢复Mysql数据库?
谢邀,个人认为从标题看,是个比较大而且值得数据库从业者思考的问题:从问题描述看,又是一个比较浅显的问题. 先从问题描述看,mysqldump 备份和恢复时往往会有各种错误,如何避免?mysqldump ...
- php备份mysql页面_如何用PHP的页面备份、恢复Mysql数据库_php
//备份数据 $i = 0; $crlf="/r/n"; $dbname="xgtqr"; global $dbconn; http://www ...
- 如何在K8S上备份和恢复MySQL
如何在K8S上备份和恢复MySQL 越来越多的生产系统和关键应用运行在K8S上.在生产系统运行有状态应用,并不是一件容易的事情,它需要我们仔细的计划并部署.我们之前有一篇文章专门介绍如何在K8S上运行 ...
- 备份和恢复IMail数据/IMail的服务端口
1.备份和恢复IMail数据 首先你需要备份它的系统文件.方法是将"\imail"整个目录树复制下来. 其次还需要备份它的注册表.可选"localhost→General ...
- MySQL Xtrabackup备份和恢复
简介 Xtrabackup是由percona提供的mysql数据库备份工具,据官方介绍,这也是世界上惟一一款开源的能够对innodb和xtradb数据库进行热备的工具.特点: (1)备份过程快速.可靠 ...
- xtrabackup备份mysql_xtrabackup备份和恢复MySQL
xtrabackup有两个主要的工具:innobackupex和xtrabackup,xtrabackup只能备份InnoDB和XtraDB数据表,innobackupex封装了xtrabackup, ...
最新文章
- 3D打印产业化机遇与挑战
- ONOS项目首赢11000次下载 Oracle发布云路由
- 什么是document对象?如何获取文档对象上的元素?_javascript自学记录:Document类型...
- 探索性数据分析,这8个流行的 Python可视化工具就够了
- 面试经历-19-03-14
- jsp的include两种使用方法
- 惠普服务器c盘格式化提示win7系统盘,通过U盘重装系统,已经格式化C盘提示如下...
- oracle+in+多,Oracle in子句过多的硬编码引发的故障
- mcisendString制作播放器
- C语言复习——投票问题——动态数组(2021.11.20)
- 湖南省中职计算机应用教资面试流程?
- 多帧图像增强 matlab,MATLAB中图像增强技术的实现
- 计算机远程控制安全吗,远程控制电脑危险吗?向日葵远程控制软件安全吗?
- 曾国藩家训:三个地方看一个家庭的兴败
- 【转】App应用内搜索:移动搜索的新入口
- 电脑录屏快捷键是什么?电脑录屏是什么键
- html背景只向x轴扩散,地球化学(复习资料)
- 【和ChatGPT对话】帮助新手批量提取图片文字信息到文件
- Linux中mysql的重启
- VB6语言语音通知接口DEMO示例
热门文章
- [译] Sklearn 与 TensorFlow 机器学习实用指南
- linux下硬盘安装ubuntu,Ubuntu硬盘安装
- mysql swarm_【Docker】 Swarm简单介绍
- Normalization的总结框架
- java mac 怎么删_做java服务器开发,并发布到linux,那MacBookPro开发是绝佳工具
- 某大型银行深化系统之十八:性能设计之三
- 浅谈UWB室内定位(三)
- 提高计算机技能操作水平,计算机操作技能比赛方案
- 餐饮新零售品牌后位悬虚已久,喜茶能否凤袍加身入主中宫?
- 12、SpringBoot------activeMq的简单使用