linux下mysql日志管理及mysql备份还原

1.SHOW GLOBAL VARIABLES LIKE '%log%';  显示所有日志相关的选项

2.错误日志：log_error和log_warnings

3.一般查询日志：general_log general_log_file log log_output

4.慢查询日志：long_query_time log_slow_queries={YES|NO} slow_query_log low_query_log_file

5.二进制日志：任何引起或可能引起数据库变化的操作；复制和即时点恢复；

二进制日志的格式：binlog_format

基于语句: statement

基于行: row

混合方式: mixed

二进制日志事件：产生的时间 和 相对位置

二进制日志文件：索引文件 和 二进制日志文件

mysql> SHOW MASTER STATUS;#查看当前正在使用的二进制日志文件

mysql> SHOW BINARY LOGS; #查看所有日志文件:

mysql> SHOW BINLOG EVENTS IN '二进制日志文件' [FROM 位置]；#查看事件:

例如:SHOW BINLOG EVENTS IN 'mysql-bin.000004' FROM 107;

删除二进制日志文件: 删除指定二进制日志文件之前的所有日志文件

mysql> PURGE BINARY LOGS TO '二进制日志文件'

查看日志信息:mysqlbinlog命令选项如下:

--start-datetime  --stop-datetime

--start-position  --stop-position

举例:mysqlbinlog --start-position 177 --stop-position 331 mysql-bin.000004;

mysqlbinlog --start-datetime='16-07-07 13:32:07' mysql-bin.000004;

滚动二进制日志:FLUSH LOGS;

6.中继日志：从主服务器的二进制日志文件中复制而来的事件，并保存为的日志文件；

7.事务日志：事务性存储引擎用于保证原子性、一致性、隔离性和持久性；

innodb_flush_log_at_trx_commit:

0: 每秒同步，并执行磁盘flush操作；

1：每事务同步，并执行磁盘flush操作；

2: 每事务同步，但不执行磁盘flush操作；

8.mysqldump备份和还原数据库工具

8.1.备份单个数据库，或库中特定表

格式:mysqldump 数据库名 [表1] [表2]

--master-data={0|1|2}

0: 不记录二进制日志文件及路位置；

1：以CHNAGE MASTER TO的方式记录位置，可用于恢复后直接启动从服务器；

2：以CHANGE MASTER TO的方式记录位置，但默认为被注释；

--lock-all-tables：锁定所有表

--flush-logs: 执行日志flush；

--single-transaction启动热备；如果指定库中的表类型均为InnoDB

8.2.备份多个库：

--all-databases: 备份所有库

--databases DB_NAME,DB_NAME,...: 备份指定库

--events 事件调度器

--routines 存储过程和存储函数

--triggers 触发器

单个数据库备份 方法一:

mysql>FLUSH TABLES WITH READ LOCK;

mysql>FLUSH LOGS;

mysql>SHOW BINARY LOGS;

#mysqldump -u root -p --master-data=2 jiaowu>/root/jiaowu.sql #备份并没有创建数据库的语句

mysql>UNLOCK TABLES;

mysql>CREATE DATABASE jiaowu;  #必须手动创建数据库

#mysql jiaowu < /root/jiaowu.sql  #指定还原至指定数据库

单个数据库备份方法二:

#mysqldump -u root -p --lock-all-tables --flush-logs --masterdata=2 jiaowu>/root/jiaowu.sql

所有数据库完全备份：

#mysqldump -u root -p --lock-all-tables --flush-logs --all-databases  --master-data=2 > /root/alldatabases.sql

9.实例:利用mysqldump命令实现对所有数据库每周做完全备份和每天做增量备份,并且实现还原

建议:mysql数据目录放置独立硬盘或LVM中,二进制日志文件也要放置在其他目录

以下利用实验环境模拟实现：注意本实验二进制日志文件名以自己实验环境为准

9.1.周末做完整备份所有数据库

#mysqldump -u root -p --lock-all-tables --flush-logs --all-databases  --masterdata=2  > /root/alldatabases.sql

9.2.清除滚动日志之前的所有二进制文件,但清除之前建议最好保存一下

mysql>PURGE BINARY LOGS TO 'mysql-bin.000010';

mysql>SHOW BINARY LOGS;

9.3.完整备份数据库后，过了一天,模拟数据库有删除一个数据

mysql>USE jiaowu;

mysql>DELETE FROM tutors WHERE Age>80;

9.4.每天做增量备份

mysql>FLUSH LOGS;  #滚动日志

#cd /mydata/data

#cp mysql-bin.000010 /root  #直接复制增量二进制日志文件

#mysqlbinlog mysql-bin.0000010 > /root/increment_"date +%F-%H-%M-%S".sql #或保存至sql语句

9.5.模拟又过了一天,数据库有插入一条数据

mysql>USE jiaowu;

mysql>INSERT INTO tutors (Tname) VALUES ("Tom");

9.6.模拟当天数据库崩溃,手动删除数据目录所有文件导致数据库无法使用

#cd /mydata/data

#cp mysql-bin.000011 /root/  #备份当前正使用的二进制日志文件

#rm -rf *

9.7.利用之前的备份,模拟实现还原数据库

#killall mysqld

#cd /usr/local/mysql

#scripts/mysql_install_db --user=mysql --datadir=/mydata/data/ #初始化数据库

#service mysqld start

#cd

#mysql -u root -p < alldatabases.sql #还原完整备份时的数据库

#mysql -u root -p < increment_2016-07-08-13-30-00.sql #还原增量备份的数据

#mysqlbinlog mysql-bin.000011 | mysql -u root -p #还原当天数据库崩溃时的数据

10.单表备份

备份格式：SELECT * INTO OUTFILE '表的备份路径.txt' FROM 表名 [WHERE 条件];

还原格式：LOAD DATA INFILE '表的备份路径.txt' INTO TABLE 表名;

mysql> CREATE TABLE students_new LIKE students; #复制一个与源表结构一样的表

mysql> SELECT * INTO OUTFILE '/tmp/students_new.txt' FROM students;

mysql> DRIO TABLE students;

mysql> LOAD DATA INFILE '/tmp/students_new.txt' INTO TABLE students_new;

11.LVM快照备份

11.1.找开会话,模拟启动事务

mysql>START TRANSACTION;

11.2.打开另外一个会话，加读锁，锁定所有表；

mysql> FLUSH TABLES WITH READ LOCK;

mysql> FLUSH LOGS;

mysql> SHOW MASTER STATUS;

11.3.通过另一个终端，保存二进制日志文件及相关位置信息；

# mysql -uroot -p -e 'SHOW MASTER STATUS\G' > /backup/master-`data +%F`.info

11.4.创建快照卷

# lvcreate -L 100M -s -p r -n mydata-snap /dev/myvg/mydata

11.5.释放锁

mysql> UNLOCK TABLES;

11.6.挂载快照卷并备份

mount -o ro  /dev/myvg/mydata /mnt

cd /mnt/data

cp -a /mnt/data/* /backup/bak-full-`data +%F`

11.7.删除快照卷；

cd

umount /mnt

lvremove --froce /dev/myvg/mydata-snap

cp /backup/bak-full-2016-07-11

rm -rf mysql-bin.*

11.8.模拟添加数据并滚动日志

mysql> USE jiaowu;

mysql> INSERT INTO tutors (Tname) VALUES ('stu200');

mysql> FLUSH LOGS;

mysql> INSERT INTO tutors (Tname) VALUES ('stu201');

mysql> INSERT INTO tutors (Tname) VALUES ('stu202');

mysql> FLUSH LOGS;

11.9.备份上次快照后增加的二进制日志；

cp /mydata/data

cat /backup/master-2016-07-11.info #查看备份时的二制日志文件,且备份它之后所有二制日志文件

mysqlbinlog --start-datetime='16-07-11 15:30:08' mysql-bin.000005 mysql-bin.000006 > /backup/increment-`data +F-%H-%M-%S`.sql

11.10.模拟删除mysql数据库数据目录,导致mysql数据崩溃

service mysqld stop

rm -rf /mydata/data/*

11.11.还原数据库

cp -a /backup/bak-full-2016-07-11/* /mydata/data/

ls -l /mydata/data

service mysqld start

mysql> SET sql_log_bin=0; #连上mysql并暂时关闭二进制日志功能

mysql> source /backup/increment-2016-07-11-15-58-36.sql #导入增量二进制日志文件

mysql> SET sql_log_bin=0; #连上mysql并开启二进制日志功能