mysql binlog 增量备份
一,什么是增量备份
增量备份,就是将新增加的数据进行备份。假如你一个数据库,有10G的数据,每天会增加10M的数据,数据库每天都要备份一次,这么多数据是不是都要备份呢?还是只要备份增加的数据呢,很显然,我只要备份增加的数据。这样减少服务器的负担。
二,启用binlog vi my.cnf
log-bin=/var/lib/mysql/mysql-bin.log,如果是这样的话log-bin=mysql-bin.log默认在datadir目录下面 [root@BlackGhost mysql]# ls |grep mysql-bin mysql-bin.000001 mysql-bin.000002 mysql-bin.000003 mysql-bin.000004 mysql-bin.000005 mysql-bin.000006 mysql-bin.index
启动后会产生mysql-bin这样的文件,每启动一次,就会增加一个或者多个。 mysql-bin.000002这样文件存放的是数据库每天增加的数据,所有数据库的数据增量都在这里面。
三,查看mysql-bin.000002这样的文件里面到底是什么东西 [root@BlackGhost mysql]#
mysqlbinlog /var/lib/mysql/mysql-bin.000002 > /tmp/add.sql 下面还有一个重要索引文件就是mysql-bin.index [root@BlackGhost mysql]# cat mysql-bin.index 四,增量备份和增量还原 1,增量备份
既然我们知道了,mysql里面新增加的数据在mysql-bin这样的文件里面,我们
只要把mysql-bin这样的文件进行备份就可以了。 cp /var/lib/mysql/mysql-bin* /data/mysql_newbak/ 2,增量还原,讲几个常用的,比较有用的 a),根据时间来还原 –start-date,–stop-date mysqlbinlog –start-date=”2010-09-29 18:00:00″ –stop-date=”2010-09-29 23:00:00″ \
/var/lib/mysql/mysql-bin.000002 |mysql -u root -p b),根据起始位置来还原,–start-position,–stop-position
mysqlbinlog –start-position=370
–stop-position=440 /var/lib/mysql/mysql-bin.000002 |mysql -u root -p
mysqlbinlog –start-position=370
–stop-position=440 /var/lib/mysql/mysql-bin.000002
–start-position=370 –stop-position=440 这里面数字从哪儿来的呢? 日志文件 # at 370
#100929 21:35:25 server id 1 end_log_pos440
Query thread_id=1 exec_time=0 error_code=0 SET TIMESTAMP=1285767325/*!*/;
上面的红色加粗的就是,一个是start-position,一个是stop-position c),根据数据库名来进行还原 -d
在这里是小写的d,请不要把它和mysqldump中的-D搞混了。哈哈。 mysqlbinlog -d test /var/lib/mysql/mysql-bin.000002 d),根据数据库所在IP来分-h
mysqlbinlog -h 192.1681.102 /var/lib/mysql/mysql-bin.000002 e),根据数据库所占用的端口来分-P
有的时候,我们的mysql用的不一定是3306端口,注意是大写的P mysqlbinlog -p 13306 /var/lib/mysql/mysql-bin.000002 f),根据数据库serverid来还原–server-id
在数据库的配置文件中,都有一个serverid并且同一集群中serverid是不能相同的。
mysqlbinlog –server-id=1 /var/lib/mysql/mysql-bin.000002
注意:上面的几个例子,我都是一个一个说的,其实可以排列组合的。例如 mysqlbinlog –start-position=”2010-09-29 18:00:00″ -d test -h 127.0.0.1 /var/lib/mysql/mysql-bin.000002 |mysql -u root -p 五,后续
增量备份的时候,有一点让人不爽,就是mysql-bin这样的文件,每启动一次mysql就会增加一些,如果你不去管他的话,时间长了,他会把你的磁盘占满。 ./mysqldump –flush-logs -u root myblog > /tmp/myblog.sql 备份myblog数据库,清除增量备份里面的有关myblog的数据 ./mysqldump –flush-logs -u root –all-databases > /tmp/alldatabase.sql 备份所有数据库,清除增量备份
mysql-bin.index的起索引作用,因为增量的数据不一定在一个mysql-bin000这样的文件里面,这个时候,我们就要根据mysql-bin.index来找mysql-bin这样的增量文件了。
如果mysql里面做了这样的配置binlog-do-db=test1,增量备份里面只会有test1这个数据库的数据
转载于:https://blog.51cto.com/changlongde/1424551
mysql binlog 增量备份相关推荐
- mysql binlog增量备份脚本_实现mysqlldump+binlog日志全量备份和增量备份脚本
实现mysqlldump+binlog日志全量备份和增量备份脚本 #!/bin/bash ####################################################### ...
- linux mysql定时增量备份_Mysql 日常备份和增量备份脚本(Linux)
适合对象 本文是在linux下,mysql 4.1.14版本下测试的,经过适当修改可能适合mysql 4.0,5.0及其其他版本. 本文适合于没有启动复制功能的mysql,如果启动了复制,可能不需要采 ...
- mysql定时增量备份_Mysql日常自动备份和增量备份脚本
序 你是否在寻找一个MySQL备份脚本? 适合对象 本文是在Linux下,mysql 4.1.14版本下测试的,经过适当修改可能适合mysql 4.0,5.0及其其他版本. 本文适合于没有启动复制功能 ...
- kafka对接mysql_【Canal】利用canal实现mysql实时增量备份并对接kafka
简介 canal 1.1.1版本之后, 默认支持将canal server接收到的binlog数据直接投递到MQ, 目前默认支持的MQ系统有: kafka: https://github.com/ap ...
- MySQL 数据增量备份
目录 MySQL 数据增量备份 binlog日志 日志概述 启用日志 自定义日志存储目录和日志文件名 手动生成新的日志文件 清理日志(删除已有的日志文件) 查看日志文件内容 使用binlog日志恢复数 ...
- 实战-MySQL定时增量备份(2)
阅读本文大约需要 9 分钟 实战-MySQL定时全量备份(1) 实战-MySQL定时增量备份(2) 实战-将MySQL备份上传到私有云(3) 概要 引言 增量备份 恢复增量备份 定时备份 引言 在产品 ...
- mysql binlog 大数据_后起之秀 | MySQL Binlog增量同步工具go-mysql-transfer实现详解
一. 概述 工作需要研究了下阿里开源的MySQL Binlog增量订阅消费组件canal,其功能强大.运行稳定,但是有些方面不是太符合需求,主要有如下三点: 需要自己编写客户端来消费canal解析到的 ...
- MySQL Binlog增量同步工具go-mysql-transfer实现详解
go-mysql-transfer产品手册:https://www.kancloud.cn/wj596/go-mysql-transfer/2111996 一. 概述 工作需要研究了下阿里开源的MyS ...
- 实验——MySQL数据库增量备份恢复
目录 一.MySQL数据库增量备份恢复 1.1 物理冷备份,开启服务 1.2 开启二进制日志文件 1.3 创建库和表,进行完全备份和增量备份 1.4 进行正常操作和误操作,进行增量备份 1.5 查看增 ...
最新文章
- 神策数据:游戏买量与长线运营的数据宝典
- 英伟达jetson TX1的caffe-ssd配置
- 深入理解CachingConnectionFactory
- 神经网络(补充)(第五章)
- yii1.0性能调优之改善并发数
- C++基础知识(一)—— C++程序结构
- tf.nn.dropout
- Python爬虫过程中验证码识别的三种解决方案
- mysql 连接 分组_MySQL 基础 (四) 分组查询及连接查询
- 移动端适配的基础知识
- Windows Server 2012 R2 服务器管理器介绍和配置使用
- 解决Arduino开发板管理器下载esp8266开发包失败和速度慢的方法
- 极域电子教室软件怎么脱离控制_如何制定职业发展目标,才能避免“现实发展脱离职业规划”的问题...
- 面试官:说说你最大的优缺点? (25题汇总版)
- 华为虚拟一键部署服务器,服务器一键部署
- CAD调试时抛出“正试图在 os 加载程序锁内执行托管代码。不要尝试在 DllMain 或映像初始化函数内运行托管代码”异常的解决方法...
- 人脸识别常用数据集大全(12/20更新)
- mysql 数据连续不走索引6_MySql组合索引最左侧原则失效
- D3 CSV表格文件的读取详解
- 计算机网络基础之应用层