MySQL MGR

2024-02-13 13:08
文章标签 mysql database mgr

本文主要是介绍MySQL MGR,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一、MGR简述

在 2016 年 9 月的 Oracle Openworld 上,MySQL 官方提出了 MySQL InnoDB
Cluster 的概念,并将其定为 MySQL 未来的发展目标。其核心就是用 MySQL 数据
库和原生工具构建出一个全栈高可用 MySQL 集群系统,用来支撑大规模 MySQL
集群的使用,特别是云上的使用。其 Group Replication 是 MySQL InnoDB Cluster
这个及具潜力产品中的核心组件。


Mysql 官方推出的集群架构,主要由 3 个模块组成:

  1. 支持 Group Replication 功能的 Mysql Server,主要功能在于实现了组内通信、故障转移和故障恢复;
  2. Mysql-shell:实现快速部署,主要提供了一套 AdminAPI,可以自动化配置 Group Replication。
  3. Mysql-router:内置读写分离,负载均衡。自动根据 Mysql InnoDB Cluster中的 metadata。

二、ProxySQL

 ProxySQL 是一款轻量级中间件,它支持 Query 路由,支持动态指定某个 SQL 进行缓存,并且可以动态加载配置(无需重启 ProxySQL 服务)、另外可 以配合 MGR 完成故障切换和读写分离。

工作原理:它通过 6032 端口代理 MySQL 服务,使用 mysql_users 配置数据 库用户,使用 mysql_group_replication_hostgroups 定义 mgr 集群的写组、备写组、 读组、离线组,使用 runtime_mysql_servers 定义数据源。服务启动后,代理服务 把 MGR 集群状态更新到 runtime 层。使用 mysql_query_rules 配置读写分离规则 (用户自定义)后,根据 server 表的数据库状态,分别把只读请求路由到读组的 集群节点(即 MGR secondary 节点),事务和写请求路由到写组的集群节点(即 MGR Primary 节点)。当 Primary 节点故障时,ProxySQL 会实时探测集群状态变化,把新 Primary 节点更新到写组,这样新的请求依然可以正确访问到写组的数 据库节点。如果 MGR 的 Secondary 节点故障,ProxySQL 会把该节点踢出只读组, 直到集群恢复后,它将自动更新到读组。

三、MGR 单主 + VIP 

MGR

MGR (MySQL Group Replication)是MySQL自带的一个插件,可以灵活部署。MySQL MGR集群是多个MySQL Server节点共同组成的分布式集群,每个Server都有完整的副本,它是基于ROW格式的二进制日志文件和GTID特性。架构主要是APIs层、组件层、复制协议模块层和GCS API+Paxos引擎层构成。

应用发来的事务从MySQL Server经过MGR的APIs接口层分发到组件层,组件层去capture事务相关信息,然后经过复制协议层进行事务传输,最后经过GCS API+Paxos引擎层保证事务在各个节点数据最终一致性。这是事务进入MGR层内部处理过程。

MGR由若干个节点共同组成一个复制组,一个事务的提交,必须经过组内大多数节点(N / 2 + 1)决议并通过,才能得以提交。如上图所示,由3个节点组成一个复制组,Consensus层为一致性协议层,在事务提交过程中,发生组间通讯,由2个节点决议(certify)通过这个事务,事务才能够最终得以提交并响应。
 
引入组复制,主要是为了解决传统异步复制和半同步复制可能产生数据不一致的问题。组复制依靠分布式一致性协议(Paxos协议的变体),实现了分布式下数据的最终一致性,提供了真正的数据高可用方案(是否真正高可用还有待商榷)。其提供的多写方案,给我们实现多活方案带来了希望。

MGR架构

在绝大多数业务场景,推荐使用 MGR 单主 + VIP(HAMGR)。 该方案架构最简单,高可用级别最高,完美支持 failover且故障点少。

        运行在数据库服务器的 HAMGR 服务,会协同 MGR 脑裂机制,实时探测各个功 能组件状态,监测集群可用性,然后在集群 Primary 节点启动一个 VIP,对外提 供服务。当集群主库发生故障时,HAMGR 服务会检查当前集群可用性,VIP 同 步漂移到新的 primary 节点,整个过程业务零感知。

        当集群备库发生故障时,HAMGR 服务检查集群是否满足对外提供服务的要 求,如果满足,将继续对外提供服务。如果多数节点处于非 ONLINE 状态时, HAMGR 服务将下线 VIP,这样确保数据完整性,同时触发紧急告警。

这篇关于MySQL MGR的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/705604

相关文章

MySQL的JDBC编程详解

《MySQL的JDBC编程详解》:本文主要介绍MySQL的JDBC编程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录前言一、前置知识1. 引入依赖2. 认识 url二、JDBC 操作流程1. JDBC 的写操作2. JDBC 的读操作总结前言本文介绍了mysq

java.sql.SQLTransientConnectionException连接超时异常原因及解决方案

《java.sql.SQLTransientConnectionException连接超时异常原因及解决方案》:本文主要介绍java.sql.SQLTransientConnectionExcep... 目录一、引言二、异常信息分析三、可能的原因3.1 连接池配置不合理3.2 数据库负载过高3.3 连接泄漏

Linux下MySQL数据库定时备份脚本与Crontab配置教学

《Linux下MySQL数据库定时备份脚本与Crontab配置教学》在生产环境中,数据库是核心资产之一,定期备份数据库可以有效防止意外数据丢失,本文将分享一份MySQL定时备份脚本,并讲解如何通过cr... 目录备份脚本详解脚本功能说明授权与可执行权限使用 Crontab 定时执行编辑 Crontab添加定

MySQL中On duplicate key update的实现示例

《MySQL中Onduplicatekeyupdate的实现示例》ONDUPLICATEKEYUPDATE是一种MySQL的语法,它在插入新数据时,如果遇到唯一键冲突,则会执行更新操作,而不是抛... 目录1/ ON DUPLICATE KEY UPDATE的简介2/ ON DUPLICATE KEY UP

MySQL分库分表的实践示例

《MySQL分库分表的实践示例》MySQL分库分表适用于数据量大或并发压力高的场景,核心技术包括水平/垂直分片和分库,需应对分布式事务、跨库查询等挑战,通过中间件和解决方案实现,最佳实践为合理策略、备... 目录一、分库分表的触发条件1.1 数据量阈值1.2 并发压力二、分库分表的核心技术模块2.1 水平分

Python与MySQL实现数据库实时同步的详细步骤

《Python与MySQL实现数据库实时同步的详细步骤》在日常开发中,数据同步是一项常见的需求,本篇文章将使用Python和MySQL来实现数据库实时同步,我们将围绕数据变更捕获、数据处理和数据写入这... 目录前言摘要概述:数据同步方案1. 基本思路2. mysql Binlog 简介实现步骤与代码示例1

使用shardingsphere实现mysql数据库分片方式

《使用shardingsphere实现mysql数据库分片方式》本文介绍如何使用ShardingSphere-JDBC在SpringBoot中实现MySQL水平分库,涵盖分片策略、路由算法及零侵入配置... 目录一、ShardingSphere 简介1.1 对比1.2 核心概念1.3 Sharding-Sp

MySQL 表空却 ibd 文件过大的问题及解决方法

《MySQL表空却ibd文件过大的问题及解决方法》本文给大家介绍MySQL表空却ibd文件过大的问题及解决方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考... 目录一、问题背景:表空却 “吃满” 磁盘的怪事二、问题复现:一步步编程还原异常场景1. 准备测试源表与数据

Mac电脑如何通过 IntelliJ IDEA 远程连接 MySQL

《Mac电脑如何通过IntelliJIDEA远程连接MySQL》本文详解Mac通过IntelliJIDEA远程连接MySQL的步骤,本文通过图文并茂的形式给大家介绍的非常详细,感兴趣的朋友跟... 目录MAC电脑通过 IntelliJ IDEA 远程连接 mysql 的详细教程一、前缀条件确认二、打开 ID

MySQL的配置文件详解及实例代码

《MySQL的配置文件详解及实例代码》MySQL的配置文件是服务器运行的重要组成部分,用于设置服务器操作的各种参数,下面:本文主要介绍MySQL配置文件的相关资料,文中通过代码介绍的非常详细,需要... 目录前言一、配置文件结构1.[mysqld]2.[client]3.[mysql]4.[mysqldum