MySQL -- 数据恢复

2024-09-01 21:32
文章标签 mysql 数据恢复 database

本文主要是介绍MySQL -- 数据恢复,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

DELETE

  1. 使用DELETE语句误删除了数据行,可以使用Flashback通过闪回把数据恢复
  2. Flashback恢复数据的原理:修改binlog的内容,然后拿到原库重放。前提:binlog_format=ROW和binlog_row_image=FULL
  3. 针对单个事务
    1. 对于INSERT语句,将Write_rows event改成Delete_rows event
    2. 对于DELETE语句,将Delete_rows event改成Write_rows event
    3. 对于UPDATE语句,binlog里面记录了数据行修改前和修改后的值,对调两行的位置即可
  4. 针对多个事务
    1. 误操作: ++1.DELETE ++++++++++++++2.INSERT ++++++++++++++++++3.UPDTAE
    2. Flashback REVERSE3.UPDTAE++++++ REVERSE2.DELETE +++++++++REVERSE1.INSERT
  5. 不推荐直接在主库上执行上述操作,避免造成二次破坏
    1. 比较安全的做法是先恢复出一个备份或找一个从库作为临时库
    2. 在临时库上执行上述操作,然后再将确认过的临时库的数据,恢复到主库
  6. 预防措施
    1. sql_safe_updates=ON,下列情况会报错
      1. 没有WHERE条件的DELETE或UPDATE语句
      2. WHERE条件里面没有包含索引字段的值
    2. 上线前,必须进行SQL审计
  7. 删全表的性能
    1. DELETE全表很慢,因为需要生成undolog、写redolog和写binlog
    2. 优先考虑使用DROP TABLE或TRUNCATE TABLE

DROP / TRUNCATE

  1. DROP TABLE、TRUNCATE TABLE和DROP DATABASE,是无法通过Flashback来恢复的
    1. 即使配置了binlog_format=ROW,执行上面3个命令,binlog里面记录的依然是STATEMENT格式
    2. binlog里面只有一个TRUNCATE/DROP语句,这些信息是无法恢复数据的
  2. 这种情况如果想要恢复数据,需要使用全量备份和增量日志的方式
    1. 要求线上定期全量备份,并且实时备份binlog

mysqlbinlog

假设有人中午12点删除了一个库,恢复数据的流程
在这里插入图片描述

  1. 取最近一次全量备份,假设一天一备,即当天0点的全量备份
  2. 用全量备份恢复出一个临时库
  3. 从binlog备份里,取出凌晨0点以后的日志
  4. 把这些日志,除误删数据的语句外,全部应用到临时库
  5. 为了加快数据恢复,如果临时库上有多个数据库,可以加上–database参数,指定应用某个库的日志
  6. 跳过12点误操作语句的binlog
    1. 如果原实例没有使用GTID模式,只能在应用到包含12点的binlog文件的时候
      1. 先用–stop-position参数执行到误操作之前的日志
      2. 再用–start-position从误操作之后的日志继续执行
    2. 如果原实例使用GTID模式,假设误操作命令的GTID为gtid1
      1. 只需执行SET gtid_next=gtid1;BEGIN;COMMIT;
      2. 把gtid1加入到临时库的GTID集合,之后按顺序执行binlog时,会自动跳过误操作的语句
  7. 使用mysqlbinlog的方法恢复数据的速度还是不够快,主要原因
    1. 如果误删表,最好是只重放这张表的操作,但mysqlbinlog并不能指定只解析一个表的日志
    2. 用mysqlbinlog解析出日志来应用,应用日志的过程只能是单线程的
  8. 另外一个加速的方法:Master-Slave

Master-Slave

在这里插入图片描述

  1. 在START SLAVE之前,先通过执行CHANGE REPLICATION FILTER REPLICATE_DO_TABLE=(tbl_name)
    1. 让临时库只同步误操作的表,利用并行复制技术,来加速整个数据恢复过程
  2. binlog备份到线上备库之间是一条虚线
    1. 虚线指的是如果由于时间太久,线上备库有可能已经删除了临时实例所需要的binlog。可以从binlog备份系统中找到需要的binlog,再放到备库中
    2. 举例说明:
      1. 例如当前临时实例需要的binlog是从master.000005开始
      2. 但在线上备库上执行SHOW BINARY LOGS显示最小的binlog文件是master.000007
      3. 意味着少了两个binlog文件
      4. 这时需要到binlog备份系统找到这两个文件,把之前删掉的binlog放回备库执行以下步骤
      5. 从备份系统下载master.000005和master.000006,放到备库的日志目录下
      6. 打开master.index,在文件头加入两行:./master.000005和./master.000006
      7. 重启备库,目的是为了让备库重新识别这两个日志文件
      8. 现在备库上就有了临时实例所需要的所有binlog,建立主备关系,就可以正常同步了

延迟复制备库

  1. 上面Master-Slave的方案利用了并行复制来加速数据恢复的过程,但恢复时间不可控
    1. 如果一个库特别大,或者误操作的时间距离上一个全量备份的时间较长(一周一备)
    2. 针对核心业务,不允许太长的恢复时间,可以搭建延迟复制的备库(MySQL 5.6引入)
    3. 延迟复制的备库是一种特殊的备库
      1. 通过CHANGE MASTER TO MASTER_DELAY=N命令来指定备库持续与主库有N秒的延迟
      2. 设N=3600,如果能在一小时内发现误删除命令,这个误删除的命令尚未在延迟复制的备库上执行
      3. 这时在这个备库上执行STOP SLAVE,再通过前面的方法,跳过误删除命令,就可以恢复数据
      4. 这样,可以得到一个恢复时间可控(最多1小时)的备库

参考资料

《MySQL实战45讲》

这篇关于MySQL -- 数据恢复的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1128096

相关文章

MySQL 中的 CAST 函数详解及常见用法

《MySQL中的CAST函数详解及常见用法》CAST函数是MySQL中用于数据类型转换的重要函数,它允许你将一个值从一种数据类型转换为另一种数据类型,本文给大家介绍MySQL中的CAST... 目录mysql 中的 CAST 函数详解一、基本语法二、支持的数据类型三、常见用法示例1. 字符串转数字2. 数字

Mysql实现范围分区表(新增、删除、重组、查看)

《Mysql实现范围分区表(新增、删除、重组、查看)》MySQL分区表的四种类型(范围、哈希、列表、键值),主要介绍了范围分区的创建、查询、添加、删除及重组织操作,具有一定的参考价值,感兴趣的可以了解... 目录一、mysql分区表分类二、范围分区(Range Partitioning1、新建分区表:2、分

MySQL 定时新增分区的实现示例

《MySQL定时新增分区的实现示例》本文主要介绍了通过存储过程和定时任务实现MySQL分区的自动创建,解决大数据量下手动维护的繁琐问题,具有一定的参考价值,感兴趣的可以了解一下... mysql创建好分区之后,有时候会需要自动创建分区。比如,一些表数据量非常大,有些数据是热点数据,按照日期分区MululbU

SQL Server配置管理器无法打开的四种解决方法

《SQLServer配置管理器无法打开的四种解决方法》本文总结了SQLServer配置管理器无法打开的四种解决方法,文中通过图文示例介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的... 目录方法一:桌面图标进入方法二:运行窗口进入检查版本号对照表php方法三:查找文件路径方法四:检查 S

MySQL 删除数据详解(最新整理)

《MySQL删除数据详解(最新整理)》:本文主要介绍MySQL删除数据的相关知识,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录一、前言二、mysql 中的三种删除方式1.DELETE语句✅ 基本语法: 示例:2.TRUNCATE语句✅ 基本语

MySQL中查找重复值的实现

《MySQL中查找重复值的实现》查找重复值是一项常见需求,比如在数据清理、数据分析、数据质量检查等场景下,我们常常需要找出表中某列或多列的重复值,具有一定的参考价值,感兴趣的可以了解一下... 目录技术背景实现步骤方法一:使用GROUP BY和HAVING子句方法二:仅返回重复值方法三:返回完整记录方法四:

从入门到精通MySQL联合查询

《从入门到精通MySQL联合查询》:本文主要介绍从入门到精通MySQL联合查询,本文通过实例代码给大家介绍的非常详细,需要的朋友可以参考下... 目录摘要1. 多表联合查询时mysql内部原理2. 内连接3. 外连接4. 自连接5. 子查询6. 合并查询7. 插入查询结果摘要前面我们学习了数据库设计时要满

MySQL查询JSON数组字段包含特定字符串的方法

《MySQL查询JSON数组字段包含特定字符串的方法》在MySQL数据库中,当某个字段存储的是JSON数组,需要查询数组中包含特定字符串的记录时传统的LIKE语句无法直接使用,下面小编就为大家介绍两种... 目录问题背景解决方案对比1. 精确匹配方案(推荐)2. 模糊匹配方案参数化查询示例使用场景建议性能优

mysql表操作与查询功能详解

《mysql表操作与查询功能详解》本文系统讲解MySQL表操作与查询,涵盖创建、修改、复制表语法,基本查询结构及WHERE、GROUPBY等子句,本文结合实例代码给大家介绍的非常详细,感兴趣的朋友跟随... 目录01.表的操作1.1表操作概览1.2创建表1.3修改表1.4复制表02.基本查询操作2.1 SE

MySQL中的锁机制详解之全局锁,表级锁,行级锁

《MySQL中的锁机制详解之全局锁,表级锁,行级锁》MySQL锁机制通过全局、表级、行级锁控制并发,保障数据一致性与隔离性,全局锁适用于全库备份,表级锁适合读多写少场景,行级锁(InnoDB)实现高并... 目录一、锁机制基础:从并发问题到锁分类1.1 并发访问的三大问题1.2 锁的核心作用1.3 锁粒度分