XtraBackup 实现不停机不锁表搭建mysql主从

2024-02-14 10:58
文章标签 实现 mysql 搭建 主从 database xtrabackup 停机 不锁表

本文主要是介绍XtraBackup 实现不停机不锁表搭建mysql主从，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

简介

Xtrabackup是由 Percona 开发的一个开源软件，可实现对 InnoDB 的数据备份，支持在线热备份（备份时不影响数据读写）。备份时，Xtrabackup 会将 Master 的 binlog 信息记录在 xtrabackup_slave_info 文件中，通过此信息可以方便的搭建主从复制。

XtraBackup 有两个工具：xtrabackup 和 innobackupex：

  • xtrabackup 本身只能备份 InnoDB 和 XtraDB ，不能备份 MyISAM；
  • innobackupex 本身是 Hot Backup 脚本修改而来，同时可以备份 MyISAM 和 InnoDB，但是备份 MyISAM 需要加读锁。

官网：http://www.percona.com/software/percona-xtrabackup
文档：http://www.percona.com/doc/percona-xtrabackup/2.2/index.html

注：本文服务器环境为 CentOS，其他环境请自行修改实现。

修改主库、从库 MySQL 配置文件

1、Master

vim /etc/my.cnf

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-setting">datadir=<span class="hljs-value">/var/lib/mysql</span></span>
<span class="hljs-setting">server-id=<span class="hljs-value"><span class="hljs-number" style="color: rgb(42, 161, 152);">1</span></span></span>
<span class="hljs-setting">log-bin=<span class="hljs-value">mysql-bin</span></span>
</code>

2、Slave:

vim /etc/my.cnf

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-setting">server-id=<span class="hljs-value"><span class="hljs-number" style="color: rgb(42, 161, 152);">2</span></span></span>
<span class="hljs-setting">datadir=<span class="hljs-value">/var/lib/mysql</span></span>
</code>

安装 XtraBackup

1、添加源

yum install http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm

检查是否添加成功：

yum list | grep percona

如果执行正确，其输出信息通常类似：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;">percona-<span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">release</span>.x86_64                     <span class="hljs-number" style="color: rgb(42, 161, 152);">0.0</span>-<span class="hljs-number" style="color: rgb(42, 161, 152);">1</span>                       installed
...
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-client-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64            <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-devel-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64             <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">server</span>-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64            <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-shared-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64            <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-test-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64              <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
...
xtrabackup.x86_64                          <span class="hljs-number" style="color: rgb(42, 161, 152);">1.2</span>-<span class="hljs-number" style="color: rgb(42, 161, 152);">22.</span>rhel5                percona
</span></code>

2、安装 xtrabackup

yum install percona-xtrabackup

创建备份

innobackupex --user=DBUSER --password=DBUSERPASS /path/to/BACKUP-DIR/

如果执行正确，其输出信息通常类似：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;">innobackupex: <span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">Backup</span> created <span class="hljs-keyword" style="color: rgb(133, 153, 0);">in</span> directory <span class="hljs-string" style="color: rgb(42, 161, 152);">'/path/to/BACKUP-DIR/2015-03-03_00-00-09'</span>
innobackupex: MySQL <span class="hljs-keyword" style="color: rgb(133, 153, 0);">binlog</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">position</span>: filename <span class="hljs-string" style="color: rgb(42, 161, 152);">'mysql-bin.000003'</span>, <span class="hljs-keyword" style="color: rgb(133, 153, 0);">position</span> <span class="hljs-number" style="color: rgb(42, 161, 152);">1946</span>
<span class="hljs-number" style="color: rgb(42, 161, 152);">111225</span> <span class="hljs-number" style="color: rgb(42, 161, 152);">00</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">00</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">53</span>  innobackupex: completed OK!
</span></code>

备份时，innobackupex 会调用 xtrabackup 备份 InnoDB 表的数据，并且会复制 MyISAM, MERGE，CSV 和 ARCHIVE 表的表定义文件（.frm 文件）、数据文件。同时还会备份触发器和数据库配置信息相关的文件。这些文件将会保存在指定备份目录中一个以时间戳命名的目录下。

准备备份

一般情况下，在备份完成后，数据尚且不能用于恢复操作，因为备份的数据中可能会包含尚未提交的事务或已经提交但尚未同步至数据文件中的事务。因此，此时数据文件仍处理不一致状态。“准备”的主要作用正是通过回滚未提交的事务及同步已经提交的事务至数据文件也使得数据文件处于一致性状态。

innobackupex --apply-log /path/to/BACKUP-DIR

如果执行正确，其最后输出的几行信息通常如下：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;">xtrabackup: starting <span class="hljs-keyword" style="color: rgb(133, 153, 0);">shutdown</span> with innodb_fast_shutdown = <span class="hljs-number" style="color: rgb(42, 161, 152);">1</span>
<span class="hljs-number" style="color: rgb(42, 161, 152);">120407</span>  <span class="hljs-number" style="color: rgb(42, 161, 152);">9</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">01</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">36</span>  InnoDB: Starting <span class="hljs-keyword" style="color: rgb(133, 153, 0);">shutdown</span>...
<span class="hljs-number" style="color: rgb(42, 161, 152);">120407</span>  <span class="hljs-number" style="color: rgb(42, 161, 152);">9</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">01</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">40</span>  InnoDB: Shutdown completed; <span class="hljs-keyword" style="color: rgb(133, 153, 0);">log</span> sequence number <span class="hljs-number" style="color: rgb(42, 161, 152);">92036620</span>
<span class="hljs-number" style="color: rgb(42, 161, 152);">120407</span> 09:<span class="hljs-number" style="color: rgb(42, 161, 152);">01</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">40</span>  innobackupex: completed OK!
</code>

在实现“准备”的过程中，innobackupex 通常还可以使用 --use-memory 选项来指定其可以使用的内存的大小，默认通常为 100M。如果有足够的内存可用，可以多划分一些内存给 prepare 的过程，以提高其完成速度。

恢复备份

将数据复制到从服务器上：
scp -r /path/to/BACKUP-DIR root@slave_host:/data/

在从服务器中恢复备份数据：
innobackupex --copy-back /path/to/BACKUP-DIR

如果服务器剩余空间不足，你可以使用 --move-back 替换掉 --copy-back。

如果执行正确，其输出信息的最后几行通常如下：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;">innobackupex: Starting to copy InnoDB <span class="hljs-built_in" style="color: rgb(38, 139, 210);">log</span> files
innobackupex: <span class="hljs-keyword" style="color: rgb(133, 153, 0);">in</span> <span class="hljs-string" style="color: rgb(42, 161, 152);">'/backup/2012-04-07_08-17-03'</span>
innobackupex: back to original InnoDB <span class="hljs-built_in" style="color: rgb(38, 139, 210);">log</span> directory <span class="hljs-string" style="color: rgb(42, 161, 152);">'/mydata/data'</span>
innobackupex: Finished copying back files.
...
<span class="hljs-number" style="color: rgb(42, 161, 152);">120407</span> <span class="hljs-number" style="color: rgb(42, 161, 152);">09</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">36</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">10</span>  innobackupex: completed OK!
</code>

启动从库 MySQL，设置主库信息

当数据恢复至数据目录以后，还需要确保所有数据文件的属主和属组均为正确的用户，如mysql，否则，在启动mysqld之前还需要事先修改数据文件的属主和属组。如：

chown -R mysql:mysql /mydata/data/

启动从库：

/etc/init.d/mysqld start

在主库中开设主从用的账号和权限：

GRANT REPLICATION SLAVE ON *.* TO 'slave'@'192.168.0.1' IDENTIFIED BY 'slave';

查看备份文件 xtrabackup_binlog_info 中的日志文件以及position。

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">CHANGE</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">MASTER</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">TO</span>
MASTER_HOST=<span class="hljs-string" style="color: rgb(42, 161, 152);">'<master_host>'</span>,
MASTER_USER=<span class="hljs-string" style="color: rgb(42, 161, 152);">'<slave_username>'</span>,
MASTER_PASSWORD=<span class="hljs-string" style="color: rgb(42, 161, 152);">'<slave_password>'</span>,
MASTER_LOG_FILE=<span class="hljs-string" style="color: rgb(42, 161, 152);">'<see xtrabackup_binlog_info>'</span>,
MASTER_LOG_POS=<see xtrabackup_binlog_info>;</span>
</code>

开启主从同步：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">START</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">SLAVE</span>;</span>
</code>

查看从库状态：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">SHOW</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">SLAVE</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">STATUS</span>;</span>
</code>

Ps：用 innobackupex 备份数据时，–apply-log 处理过的备份数据里有两个文件说明该备份数据对应的 binlog 的文件名和位置。但有时这俩文件说明的位置可能会不同。
1 对于纯 InnoDB 操作，备份出来的数据中上述两个文件的内容是一致的
2 对于 InnoDB 和非事务存储引擎混合操作，xtrabackup_binlog_info 中所示的 position 应该会比 xtrabackup_pos_innodb 所示的数值大。此时应以 xtrabackup_binlog_info 为准；而后者和 apply-log 时 InnoDB recovery log 中显示的内容是一致的，只针对 InnoDB 这部分数据。

Ps2:启动 MySQL 时，遇到权限问题的解决方法：

报错信息：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-number" style="color: rgb(42, 161, 152);">150430</span> <span class="hljs-number" style="color: rgb(42, 161, 152);">14</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">41</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">16</span>  <span class="hljs-attribute" style="color: rgb(181, 137, 0);">InnoDB</span>: Operating system error number <span class="hljs-number" style="color: rgb(42, 161, 152);">13</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">in</span> a file operation.
<span class="hljs-attribute" style="color: rgb(181, 137, 0);">InnoDB</span>: The error means mysqld does <span class="hljs-keyword" style="color: rgb(133, 153, 0);">not</span> have the access rights to
<span class="hljs-attribute" style="color: rgb(181, 137, 0);">InnoDB</span>: the directory.
</code>

解决方法：
chown -R mysql:mysql /home/data/mysql
chcon -R -t mysqld_db_t /home/mysql

这篇关于XtraBackup 实现不停机不锁表搭建mysql主从的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！

原文地址:
本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.chinasem.cn/article/708304。

相关文章

利用Python实现时间序列动量策略

利用Python实现时间序列动量策略

《利用Python实现时间序列动量策略》时间序列动量策略作为量化交易领域中最为持久且被深入研究的策略类型之一,其核心理念相对简明：对于显示上升趋势的资产建立多头头寸,对于呈现下降趋势的资产建立空头头寸... 目录引言传统策略面临的风险管理挑战波动率调整机制：实现风险标准化策略实施的技术细节波动率调整的战略价
阅读更多...
使用Python和Tkinter实现html标签去除工具

使用Python和Tkinter实现html标签去除工具

《使用Python和Tkinter实现html标签去除工具》本文介绍用Python和Tkinter开发的HTML标签去除工具,支持去除HTML标签、转义实体并输出纯文本,提供图形界面操作及复制功能,需... 目录html 标签去除工具功能介绍创作过程1. 技术选型2. 核心实现逻辑3. 用户体验增强如何运行
阅读更多...
SpringBoot实现Kafka动态反序列化的完整代码

SpringBoot实现Kafka动态反序列化的完整代码

《SpringBoot实现Kafka动态反序列化的完整代码》在分布式系统中,Kafka作为高吞吐量的消息队列,常常需要处理来自不同主题（Topic）的异构数据,不同的业务场景可能要求对同一消费者组内的... 目录引言一、问题背景1.1 动态反序列化的需求1.2 常见问题二、动态反序列化的核心方案2.1 ht
阅读更多...
MySQL表空间结构详解表空间到段页操作

MySQL表空间结构详解表空间到段页操作

《MySQL表空间结构详解表空间到段页操作》在MySQL架构和存储引擎专题中介绍了使用不同存储引擎创建表时生成的表空间数据文件,在本章节主要介绍使用InnoDB存储引擎创建表时生成的表空间数据文件,对... 目录️‍一、什么是表空间结构1.1 表空间与表空间文件的关系是什么?️‍二、用户数据在表空间中是怎么
阅读更多...
Python实现文件批量重命名器

Python实现文件批量重命名器

《Python实现文件批量重命名器》在日常工作和学习中,我们经常需要对大量文件进行重命名操作,本文将介绍一个使用Python开发的文件批量重命名工具,提供了多种重命名模式,有需要的小伙伴可以了解下... 目录前言功能特点模块化设计1.目录路径获取模块2.文件列表获取模块3.重命名模式选择模块4.序列号参数配
阅读更多...
golang实现延迟队列(delay queue)的两种实现

golang实现延迟队列(delay queue)的两种实现

《golang实现延迟队列(delayqueue)的两种实现》本文主要介绍了golang实现延迟队列(delayqueue)的两种实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的... 目录1 延迟队列：邮件提醒、订单自动取消2 实现2.1 simplChina编程e简单版：go自带的time
阅读更多...
Java JSQLParser解析SQL的使用指南

Java JSQLParser解析SQL的使用指南

《JavaJSQLParser解析SQL的使用指南》JSQLParser是一个Java语言的SQL语句解析工具,可以将SQL语句解析成为Java类的层次结构,还支持改写SQL,下面我们就来看看它的具... 目录一、引言二、jsQLParser常见类2.1 Class Diagram2.2 Statement
阅读更多...
Python使用python-docx实现自动化处理Word文档

Python使用python-docx实现自动化处理Word文档

《Python使用python-docx实现自动化处理Word文档》这篇文章主要为大家展示了Python如何通过代码实现段落样式复制,HTML表格转Word表格以及动态生成可定制化模板的功能,感兴趣的... 目录一、引言二、核心功能模块解析1. 段落样式与图片复制2. html表格转Word表格3. 模板生
阅读更多...
SpringBoot实现多环境配置文件切换

SpringBoot实现多环境配置文件切换

《SpringBoot实现多环境配置文件切换》这篇文章主要为大家详细介绍了如何使用SpringBoot实现多环境配置文件切换功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录1. 示例代码结构2. pom文件3. application文件4. application-dev文
阅读更多...
Python FastAPI实现JWT校验的完整指南

Python FastAPI实现JWT校验的完整指南

《PythonFastAPI实现JWT校验的完整指南》在现代Web开发中,构建安全的API接口是开发者必须面对的核心挑战之一,本文将深入探讨如何基于FastAPI实现JWT（JSONWebToken... 目录一、JWT认证的核心原理二、项目初始化与环境配置三、安全密码处理机制四、JWT令牌的生成与验证五、
阅读更多...

Copyright China编程 23002807@qq.com

沪ICP备2023033072号-2