mysql 开发进阶篇系列 43 逻辑备份与恢复(mysqldump 的基于时间和位置的不完全恢复)
一. 概述
在上篇讲到了逻辑备份,使用mysqldump工具来备份一个库,并使用完全恢复还原了数据库。在结尾也讲到了误操作是不能用完全恢复的。解决办法是:我们需要恢复到误操作之前的状态,然后跳过误操作语句。再恢复后面执行的语句,完成我们的恢复,这种恢复叫“不完全恢复”。在mysql 中,不完全恢复分为基于时间点的恢复和基于位置的恢复。
1.1 基于时间点恢复步骤
下面来模拟基于时间点恢复,操作步骤如下:
(1)先逻辑备份一个库。
(2)模拟用户操作一些数据。
(3)误操作发生,记住时间点。
(4)还原备份库。
(5)使用mysqlbinlog --stop-datetime恢复到误操作前的时间点。
(6)跳过误操作时间点,使用mysqlbinlog --start-datetime继续执行后面的binlog,完成恢复。
1.2 基于时间点恢复演示
下面以test库的testbackup表为例,该表有6条数据,如下图所示:
-- 共6条数据 SELECT * FROM testbackup
-- 当前log文件序号是:mysql-bin.000040 SHOW MASTER STATUS
步骤1:备份test库,先定位到/usr/local/mysql/data目录下,备份完成后此时的log文件序号mysql-bin.000041,备份脚本下图所示:
[root@hsr data]# pwd /usr/local/mysql/data [root@hsr data]# mysqldump -uroot -p --single-transaction -F test > test.dmp Enter password: [root@hsr data]# ls -l test.dmp -rw-r--r-- 1 root root 321260 9月 26 09:49 test.dmp
步骤2: 进行正常用户操作,新增了二条数据,此时表中共8条数据。
INSERT INTO testbackup VALUES(7,'田七') INSERT INTO testbackup VALUES(8,'小康')
步骤3:误操作发生,删除了一条数据id为3的,此时表中共7条数据,误删除时间点是10:01分钟
DELETE FROM testbackup WHERE id=3
步骤4:还原数据库后,此时testbackup表只有最初的6条数据
[root@hsr data]# mysql -uroot -p test < test.dmp
Enter password:
步骤:5和6
-- 切换到binlog日志目录下 [root@hsr mysql]# pwd /var/lib/mysql -- 恢复到误操作前的时间点 [root@hsr mysql]# mysqlbinlog --stop-datetime="2018-09-26 9:59:59" mysql-bin.000041 | mysql -uroot -p Enter password: -- 跳过误操作时间点,继续执行后面的binlog [root@hsr mysql]# mysqlbinlog --start-datetime="2018-09-26 10:02:59" mysql-bin.000041 | mysql -uroot -p Enter password:
最后经过上面的步骤,误操作恢复完成了,最后查看该表的数据如下。
SELECT * FROM testbackup
1.3 基于位置的恢复
与时间点的恢复不同,基于位置的恢复更加精确,因为一个时间点可能有很多条sql语句同时执行。下面模拟操作步骤:1,2,3,4操作步骤与上面相同。
(5) 分析误位置行号
方法1:对于大日志文件,将误操作时间点范围内(2-5分钟)的binlog日志复制到另一个小文件中,方便查找分析位置行号。
方法2:对于小日志文件,使用SHOW BINLOG EVENTS 查看误操作位置行号,前提是需要在my.cnf中设置binlog_rows_query_log_events=1
(6) 使用mysqlbinlog --stop-position恢复到误操作前的位置号。
(7) 跳过误操作位置号,使用mysqlbinlog --start-position继续执行后面的binlog,完成恢复。
1.4基于位置的恢复演示
-- 共8条数据 SELECT * FROM testbackup -- 当前mysql-bin.000041 SHOW MASTER STATUS
步骤1:备份test库,先定位到/usr/local/mysql/data目录下,备份完成后此时的log文件序号mysql-bin.000042,备份脚本下图所示:
[root@hsr data]# pwd /usr/local/mysql/data [root@hsr data]# mysqldump -uroot -p --single-transaction -F test > test2.dmp Enter password: [root@hsr data]# ls -l test2.dmp -rw-r--r-- 1 root root 321286 9月 26 14:02 test2.dmp
步骤2:进行正常用户操作,新增了二条数据,此时表中共10条数据。
INSERT INTO testbackup VALUES(9,'小王') INSERT INTO testbackup VALUES(10,'小李')
步骤3:误操作发生,删除了一条数据id为5的,此时表中共9条数据,误删除时间点是14:06分钟
DELETE FROM testbackup WHERE id=5
步骤4:还原数据库后,此时testbackup只有最初的8条数据
[root@hsr data]# mysql -uroot -p test < test2.dmp
Enter password:
步骤5:分析误位置位置行号
-- 方法1: [root@hsr mysql]# pwd /var/lib/mysql [root@hsr mysql]# touch tmp.sql mysqlbinlog --base64-output=decode-row -v --start-datetime="2018-09-26 14:05:59" --stop-datetime="2018-09-26 14:07:59" mysql-bin.000042 > tmp.sql [root@hsr mysql]# more tmp.sql
查看tmp.sql文件,找到删除的时间是14:06:22时,开始位置是1077,结束位置是1155。
-- 方法2: SHOW BINLOG EVENTS IN 'mysql-bin.000042';
这里找到真正删除行是1077, commit提交后下一行1155。
步骤6-7:
[root@hsr mysql]# mysqlbinlog --stop-position="1077" mysql-bin.000042 | mysql -uroot -p WARNING: The range of printed events ends with a row event or a table map event that does not have the STMT_END_F flag set.
This might be because the last statement was not fully written to the log, or because you are using a --stop-position or --stop-datetime
that refers to an event in the middle of a statement. The event(s) from the partial statement have not been written to output. Enter password: [root@hsr mysql]# mysqlbinlog --start-position="1155" mysql-bin.000042 | mysql -uroot -p Enter password: [root@hsr mysql]#
最后经过上面的步骤,误操作恢复完成了,最后查看该表的数据如下。
SELECT * FROM testbackup