从ibd文件恢复MySQL数据

2024-06-11 15:12
文章标签 数据 mysql 恢复 database ibd

本文主要是介绍从ibd文件恢复MySQL数据,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

从ibd文件恢复MySQL数据

  • 1.背景
  • 2.操作步骤
    • 2.1 备份源数据库的ibd文件
    • 2.2 准备数据库建表语句
    • 2.3 重新安装新数据库
    • 2.4 新数据库恢复数据具体步骤
  • 3.常见错误
    • 3.1 权限问题
    • 3.2 报错不存在CFG文件
    • 3.3 通过ibd文件恢复数据后自增主键问题报冲突

1.背景

前段时间,我的云服务器被病毒木马入侵了,导致服务器所有服务全部下线,且22端口被侵,远程无法登录,VNC模式也无法登录。尝试备份镜像和云硬盘,并用原来的镜像重装系统,依旧无法登录。

遂只能采用xx云服务器上的救援模式,挂载一下原来的硬盘,把关键的文件导出到本地,再重装系统将文件重新上传。

MySQL数据库数据的恢复的过程中,踩了一些坑,下文给出具体的恢复的操作过程。

2.操作步骤

2.1 备份源数据库的ibd文件

整个MySQL数据库数据的恢复都是基于ibd文件的,所以最重要的自然是将源数据库的ibd文件保存下来。

这里要注意的是,MySQL默认的数据保存地点在/var/lib/mysql目录下,这个目录下会有你创建的具体的schema的文件夹,以及这个schema中所有表的ibd文件,我们直接使用SFTP导出整个文件夹即可,后续的恢复操作都会基于ibd文件来展开。

如果你的MySQL之前安装的时候是自己手动指定的安装目录,可以使用下面的命令查询mysql的安装目录,然后备份的操作同上。

find / -name mysql

2.2 准备数据库建表语句

这里可能有些人没有备份建表语句的习惯,大家可以先断开自己本地的网络连接,然后使用自己平时常用的数据库连接工具,直接查看DDL语句,一般数据库连接工具里面都有缓存的数据库的建表语句。

2.3 重新安装新数据库

在新的系统上安装好新数据库,默认安装会安装到地址/var/lib/mysql下。

2.4 新数据库恢复数据具体步骤

1、创建数据库schema

比如我们创建数据库test,并切换到test数据库。在MySQL中执行如下SQL。

create database test;
use test;

2、创建表

这里直接把前面准备好的数据库建表语句全部执行,在MySQL中执行如下SQL。

create table xxx ...

3、移除表空间

这一步是直接把刚才建好的表空间移除,执行命令如下,在MySQL中执行如下SQL。

alter table xxx discard tablespace;

其中xxx为具体的表名,做完这一步的现象就是在/var/lib/mysql/test目录下,刚才因为我们创建表所生成的ibd文件被删除了。

4、上传源数据库ibd文件

前面我们已经备份了源数据库中表的ibd文件,现在将文件使用SFTP工具上传到刚才的/var/lib/mysql/test目录下。(注意:这里的/var/lib/mysql是我本地数据库的安装目录,而test是我数据库的名称,各位具体情况需要根据自己数据库的情况而定)

5、修改ibd文件权限

上一步通过SFTP上传的ibd文件正常应该是root用户上传的,我们需要使用mysql用户来完成剩下的操作,在LinuxShell的命令行中执行下面的命令。

chown mysql:mysql /var/lib/mysql/test/*.ibd

同理,上述的/var/lib/mysql/test是我本机的数据库位置,各位实际操作的时候需要根据自己本机情况进行相应的修改,而*.ibd表示给所有的ibd文件都修改权限。

6、重导表空间

上一步我们已经上传好ibd文件,并修改了文件权限,这一步要做的就是让MySQL识别到刚才上传的数据,重新导入表空间。这一步可以一个表一个表的进行导入表空间,原因是因为有些表的ibd文件可能已经不支持导入了,导入的时候会报错,我们先把可以恢复的表恢复了,在MySQL中执行如下SQL。

alter table xxx import tablespace;

3.常见错误

在操作恢复数据库的过程中,我遇到了一些错误,并且导致了部分表无法恢复成功,在这里总结几种。

3.1 权限问题

由于上传的ibd文件是root用户上传的,导致在MySQL中执行SQL会报错,这个时候通过Shell工具修改ibd文件的权限即可,具体参考2.4节第5步。

3.2 报错不存在CFG文件

这个报错我网上查了一下,有的文章说,在数据库ibd文件同级目录下存在CFG文件,需要和ibd文件一起导入新的数据库,但是我的MySQL版本是8.0.31并没有相关的CFG文件。

后续查阅官方文档,是因为我在最开始建表以后,使用ALTER操作新增了列,导致表结构的存储发生了变化,这被官方称为DDL INSTANT,所以无法恢复。面对这种问题,建议大家平时对数据库数据多多备份,减少数据丢失。

3.3 通过ibd文件恢复数据后自增主键问题报冲突

我有一些表使用了数据库的自增主键,在恢复完数据以后,重新部署了应用,在使用自增主键的表中出现了主键冲突的情况。

原因是通过原来的ibd文件导入数据并没有同步相应的系统表的结构,所以新的MySQL认为自增主键还是从1开始算,实际上数据库中的数据自增列早已增长到一定数目了。针对这个问题,我目前没有想到好的方法,只能先将恢复好的数据库数据导出到SQL,然后删除原表重新建表以后,再重新导入。

当然如果没有使用到系统能力(比如自增主键)的表,是无需删除表再重新导入数据的。

这篇关于从ibd文件恢复MySQL数据的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1051526

相关文章

MySQL MCP 服务器安装配置最佳实践

《MySQLMCP服务器安装配置最佳实践》本文介绍MySQLMCP服务器的安装配置方法,本文结合实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下... 目录mysql MCP 服务器安装配置指南简介功能特点安装方法数据库配置使用MCP Inspector进行调试开发指

mysql中insert into的基本用法和一些示例

《mysql中insertinto的基本用法和一些示例》INSERTINTO用于向MySQL表插入新行,支持单行/多行及部分列插入,下面给大家介绍mysql中insertinto的基本用法和一些示例... 目录基本语法插入单行数据插入多行数据插入部分列的数据插入默认值注意事项在mysql中,INSERT I

一文详解MySQL如何设置自动备份任务

《一文详解MySQL如何设置自动备份任务》设置自动备份任务可以确保你的数据库定期备份,防止数据丢失,下面我们就来详细介绍一下如何使用Bash脚本和Cron任务在Linux系统上设置MySQL数据库的自... 目录1. 编写备份脚本1.1 创建并编辑备份脚本1.2 给予脚本执行权限2. 设置 Cron 任务2

SQL Server修改数据库名及物理数据文件名操作步骤

《SQLServer修改数据库名及物理数据文件名操作步骤》在SQLServer中重命名数据库是一个常见的操作,但需要确保用户具有足够的权限来执行此操作,:本文主要介绍SQLServer修改数据... 目录一、背景介绍二、操作步骤2.1 设置为单用户模式(断开连接)2.2 修改数据库名称2.3 查找逻辑文件名

SQL Server数据库死锁处理超详细攻略

《SQLServer数据库死锁处理超详细攻略》SQLServer作为主流数据库管理系统,在高并发场景下可能面临死锁问题,影响系统性能和稳定性,这篇文章主要给大家介绍了关于SQLServer数据库死... 目录一、引言二、查询 Sqlserver 中造成死锁的 SPID三、用内置函数查询执行信息1. sp_w

canal实现mysql数据同步的详细过程

《canal实现mysql数据同步的详细过程》:本文主要介绍canal实现mysql数据同步的详细过程,本文通过实例图文相结合给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的... 目录1、canal下载2、mysql同步用户创建和授权3、canal admin安装和启动4、canal

SQL中JOIN操作的条件使用总结与实践

《SQL中JOIN操作的条件使用总结与实践》在SQL查询中,JOIN操作是多表关联的核心工具,本文将从原理,场景和最佳实践三个方面总结JOIN条件的使用规则,希望可以帮助开发者精准控制查询逻辑... 目录一、ON与WHERE的本质区别二、场景化条件使用规则三、最佳实践建议1.优先使用ON条件2.WHERE用

MySQL存储过程之循环遍历查询的结果集详解

《MySQL存储过程之循环遍历查询的结果集详解》:本文主要介绍MySQL存储过程之循环遍历查询的结果集,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录前言1. 表结构2. 存储过程3. 关于存储过程的SQL补充总结前言近来碰到这样一个问题:在生产上导入的数据发现

MySQL 衍生表(Derived Tables)的使用

《MySQL衍生表(DerivedTables)的使用》本文主要介绍了MySQL衍生表(DerivedTables)的使用,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学... 目录一、衍生表简介1.1 衍生表基本用法1.2 自定义列名1.3 衍生表的局限在SQL的查询语句select

MySQL 横向衍生表(Lateral Derived Tables)的实现

《MySQL横向衍生表(LateralDerivedTables)的实现》横向衍生表适用于在需要通过子查询获取中间结果集的场景,相对于普通衍生表,横向衍生表可以引用在其之前出现过的表名,本文就来... 目录一、横向衍生表用法示例1.1 用法示例1.2 使用建议前面我们介绍过mysql中的衍生表(From子句