MySQL InnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据

本文主要是介绍MySQL InnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

《MySQLInnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据》mysql的ibdata文件被误删、被恶意修改,没有从库和备份数据的情况下的数据恢复,不能保证数据库所有表数据...

参考:mysql Innodb表空间卸载、迁移、装载的使用方法

注意!此方法只适用于innodb_file_per_table独立表空间的InnoDB实例。

此种方法可以恢复ibdata文件被误删、被恶意修改,没有从库和备份数据的情况下的数据恢复,不能保证数据库所有表数据的100%恢复,目的是尽可能多的恢复。

恢复数据前提是表结构定义文件frm可以使用,如果有下面报错就比较麻烦,需要手动恢复frm文件。

我的链接:https://wwwwww.chinasem.cn.cnblogs.com/jiangxu67/p/4755097.html

150821 16:31:27 [ERROR] /usr/local/mysql51/libexec/mysqld: Incorrect information in file: './t/test1.frm'

InnoDB引擎ibdata和ibd文件结构

结构图:https://github.com/jeremycole/innodb_diagrams

MySQL InnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据MySQL InnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据

恢复原理:

因为配置innodb_file_per_table的独立表空间后,InnoDB引擎表数据、索引保存在ibd文件,ibdata文件只负责undo、double write、insert buffer...一些环节。

当然如果MySQL是异常关闭同时ibdata损坏的情况下会丢失一部分数据,但如果数据库是单点,那尽量能恢复多少是多少,至少比数据全部丢失好很多。

ibdata文件中有一个数据字典data dictionary,记录的是实例中每个表在ibdata中的一个逻辑位置,而在ibd文件中也存储着同样的一个tablespace id,两者必须一致InnoDB引擎才能正常加载到数据,否则会报错:

2015-08-18 10:30:30 12571 [ERROR] InnoDB: Error: tablespace id in file &lsqChina编程uo;.\test\test1.ibd’ is 112, but in the InnoDB InnoDB: data dictionary it is 1

实际上我们对于ibdata文件中的 undo、double write、insert buffer数据可以并不担心,我们只需要利用一个空的实例,一个干净的ibdata文件,通过卸载和加载表空间把ibd文件与ibdata文件关联。

恢复步骤:

准备一台新实例

1、建表,在新实例中建需要恢复表的表名临时表。

这块建议一次性将表都建好,可以统一检查frm文件是否有损坏,注意字符集。

#循环建表[root@test1 db1]$ for i in `ls | grep ".ibd" | awk -F '.' '{print $1}'`;do mysql -uroot -p -S /tmp/mysql.sock -e "use test;create table ${i} (a int)engine=innodb default charset=utf8"; done

2、停止实例,添加配置innodb_force_recovery = 6

3、替换frm文件

#备份新表frm[root@test1 test]$ cp ./*.frm ./bak[root@test1 test]$ ls ./bak#删除新表frm,将需要恢复表的frm复制到test目录[root@test1 test]$ rm -rf ./*.frm[root@test1 db1]$ for i in `ls | grep ".frm" | awk -F '.' '{print $1}'`;do cp $i.frm ../db1/;done

4、启动实例,检查表

#循环检查表是否能够打开[root@test1 db1]$ for i in `ls | grep ".ibd" | awk -F '.' '{print $1}'`;do mysql -uroot -p -S javascript/tmp/mysql.sock -e "use test;show create table $i \G" --default-character-set=utf8 >> ./build1.txt 2>&1 ;done

如果在输出文件中出现以下错误则需要修复frm文件,没有错误可以继续。修复frm见帖子开始的链接。

150821 16:31:27 [ERROR] /usr/local/mysql51/libexec/mysqld: Incorrect information in file: './t/test1.frm'

5、获取ibd文件中的tablespace id

ibd文件需要hexdump打开,ibd文件的0x24,0x25位置记录的是该表的tablespace id,我们可以通过脚本一次性获取所有表的id。

[root@test1 db1]$ for i in `ls | grep ".ibd" | awk -F '.' '{print $1}'`;do a=`hexdump -C $i.ibd |head -n 3 |tail -n 1|awk '{print $6$7}'`;mysql -uroot -p -S /tmp/mysql.sock -e "select conv('$a',16,10)" | grep -v conv >> ./id.txt 2>&1;done

然后按照id从小到大排序,因为后面需要按照id从小到大恢复,不用反复重做新实例。

6、去掉innodb_force_recovery = 6配置,重启生效

7、建表生成tablespace id

这里注意,如果ibd文件中的tablespace id是5001,那么就需要建5000个临时表。

另外注意建表后系统的openfile可能会很大,需要先修改系统的参数,或者建和删表可以一起做。

[root@test1 db1]$ for i in {1..5000};do mysql -uroot -p -S /tmp/mysql.sock -e "use tmp_table;create table table_${i} (a int)engine=innodb default charset=utf8"; done

8、建需要恢复的表结构

9、卸载表空间

alter table table_name discard tablespace;

10、替换ibd文件

11、加载表空间

alter table table_name import tablespace;

官方对于卸载表和加载表的说明:

ALTER TABLE tbl_name DISCARD TABLESPACE;This deletes the current .ibd file, so be sure that you have a backup first. Attempting to modify the table contents while the tablespace file is discarded results in an error. You can perform the DDL operations listed in Section 14.10, “InnoDB and Online DDL” while the tablespace file is discarded.To import the backup .ibd file back into the table, copy it into the database directory, and then issue this statement:ALTER TABLE tbl_name IMPORT TABLESPACE;The tablespace file need not necessarily have been created on the server into which it is imported later. In MySQL 5.6, importing a tablespace file from another server works if the both servers have GA (General Availablility) status and their versions are within the same series. Otherwise, the file must have been created on the server into which it is importephpd.

按照以上步骤就可以把数据读取出来,然后使用mysqldump导出。

如果字符集不一致或者字段类型不一致可能读取出来的数会出现数据错误、乱码或者串列。

MySQL 5.6对于表结构要求很严格,如果编程China编程字段类型与原表不一致会报错。

这篇关于MySQL InnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1153616

相关文章

使用jenv工具管理多个JDK版本的方法步骤

《使用jenv工具管理多个JDK版本的方法步骤》jenv是一个开源的Java环境管理工具,旨在帮助开发者在同一台机器上轻松管理和切换多个Java版本,:本文主要介绍使用jenv工具管理多个JD... 目录一、jenv到底是干啥的?二、jenv的核心功能(一)管理多个Java版本(二)支持插件扩展(三)环境隔

SQL中JOIN操作的条件使用总结与实践

《SQL中JOIN操作的条件使用总结与实践》在SQL查询中,JOIN操作是多表关联的核心工具,本文将从原理,场景和最佳实践三个方面总结JOIN条件的使用规则,希望可以帮助开发者精准控制查询逻辑... 目录一、ON与WHERE的本质区别二、场景化条件使用规则三、最佳实践建议1.优先使用ON条件2.WHERE用

MySQL存储过程之循环遍历查询的结果集详解

《MySQL存储过程之循环遍历查询的结果集详解》:本文主要介绍MySQL存储过程之循环遍历查询的结果集,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录前言1. 表结构2. 存储过程3. 关于存储过程的SQL补充总结前言近来碰到这样一个问题:在生产上导入的数据发现

SpringBoot集成LiteFlow实现轻量级工作流引擎的详细过程

《SpringBoot集成LiteFlow实现轻量级工作流引擎的详细过程》LiteFlow是一款专注于逻辑驱动流程编排的轻量级框架,它以组件化方式快速构建和执行业务流程,有效解耦复杂业务逻辑,下面给大... 目录一、基础概念1.1 组件(Component)1.2 规则(Rule)1.3 上下文(Conte

Java中Map.Entry()含义及方法使用代码

《Java中Map.Entry()含义及方法使用代码》:本文主要介绍Java中Map.Entry()含义及方法使用的相关资料,Map.Entry是Java中Map的静态内部接口,用于表示键值对,其... 目录前言 Map.Entry作用核心方法常见使用场景1. 遍历 Map 的所有键值对2. 直接修改 Ma

MySQL 衍生表(Derived Tables)的使用

《MySQL衍生表(DerivedTables)的使用》本文主要介绍了MySQL衍生表(DerivedTables)的使用,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学... 目录一、衍生表简介1.1 衍生表基本用法1.2 自定义列名1.3 衍生表的局限在SQL的查询语句select

MySQL 横向衍生表(Lateral Derived Tables)的实现

《MySQL横向衍生表(LateralDerivedTables)的实现》横向衍生表适用于在需要通过子查询获取中间结果集的场景,相对于普通衍生表,横向衍生表可以引用在其之前出现过的表名,本文就来... 目录一、横向衍生表用法示例1.1 用法示例1.2 使用建议前面我们介绍过mysql中的衍生表(From子句

Mybatis Plus Join使用方法示例详解

《MybatisPlusJoin使用方法示例详解》:本文主要介绍MybatisPlusJoin使用方法示例详解,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,... 目录1、pom文件2、yaml配置文件3、分页插件4、示例代码:5、测试代码6、和PageHelper结合6

六个案例搞懂mysql间隙锁

《六个案例搞懂mysql间隙锁》MySQL中的间隙是指索引中两个索引键之间的空间,间隙锁用于防止范围查询期间的幻读,本文主要介绍了六个案例搞懂mysql间隙锁,具有一定的参考价值,感兴趣的可以了解一下... 目录概念解释间隙锁详解间隙锁触发条件间隙锁加锁规则案例演示案例一:唯一索引等值锁定存在的数据案例二:

MySQL JSON 查询中的对象与数组技巧及查询示例

《MySQLJSON查询中的对象与数组技巧及查询示例》MySQL中JSON对象和JSON数组查询的详细介绍及带有WHERE条件的查询示例,本文给大家介绍的非常详细,mysqljson查询示例相关知... 目录jsON 对象查询1. JSON_CONTAINS2. JSON_EXTRACT3. JSON_TA