HBase原理 | HBase Region 运行状态学习

2024-06-12 21:48

本文主要是介绍HBase原理 | HBase Region 运行状态学习,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

HBase为每个Region维护一个状态,并将该状态保留在hbase:meta中。hbase:meta本身的Region状态保留在ZooKeeper中。可以在Master Web UI中查看Region的过渡状态。以下是可能的Region状态列表。

1. 状态机中包括下面几种状态:

  • offline:region离线没有开启。

  • opening:region正在被打开。

  • open:region正在打开,并且region server通知了master。

  • failed_open:regionserver打开失败。

  • closing:region正在被关闭。

  • closed:regionserver正在关闭,并且已经通知了master。

  • failed_close:regionserver关闭失败了。

  • splitting:region server通知master,region正在被切分。

  • split:region server通知master,region已经被切分完了。

  • spliting_new:region是切分过程中新建的文件。

  • merging:regionserver通知master region正在合并。

  • merged:regionserver通知master region合并完了。

  • merging_new:region是合并新建出来的。

2. 不同的颜色是不同含义:

  • 棕色:离线状态,属于一种短暂的瞬间状态(比如关闭后开启的中间状态)、停止状态或者初始化的时候的状态。

  • 绿色:正常的状态,可以支持请求访问。

  • 蓝色:短暂的状态。

  • 红色:失败。

  • 黄色:合并或者切分的状态。

  • 灰色:刚开始的状态。

3. 各个序号代表不同的操作场景:

  • Master向region server发起region从offline到openning的状态请求,regionserver如果没有收到,master会尝试重试几次。RegionServer接收到请求后,regin状态变成opening。

  • 如果Master发起的open请求超过次数,那么无论region server是否已经打开region,master都会命令region server关闭文件,状态变为closing。

  • 当region server打开region后,会尝试通知master,让它把region状态修改为open,并通知regsion server。这样region才能变为open状态。

  • 如果region server打开失败,会尝试通知master。master会把region的状态变更为closed,并且尝试去其他的region server打开region。

  • 如果master尝试几次后,都没有打开region,就会把状态变更为failed_open。

  • master通知region server关闭region,如果没有反应,会重试。

  • 如果region server没有在线,会抛出异常。然后region的状态会变成closing。

  • 如果region server在线,但是好几次都没响应,就会更新状态为failed_close。

  • 如果region server收到请求,并且关闭了region,那么会通知master把region状态修改为closed。并且把region分配给其他的server。

  • 在分配之前,master会先把region从closed状态转换为offline。

  • 如果region server正在切分region,会通知master。master把region状态由open变为splitting,并且把新增两个region的信息,这两个region都是splitting_new状态。

  • 如果region切分成功,当前的region状态从splitting变成split;新增的两个region状态从splitting_new变成open。

  • 如果切分失败,状态从splitting回到open,两个region也从splitting_new变成offline。

  • 如果region server想要合并两个region,那么也会先通知master。master把两个region从open变成merging,然后增加一个新的region,状态为merging_new。

  • 如果合并成功, 旧的region从merging变为merged,新的region从merging_new变为open。

  • 如果合并失败,region的状态从merging变回open,新建的一个region状态又变成offline。

  • 如果管理员通过hbase shell操作分配region,master会尝试把失败的状态变成close。

4. 参考

http://hbase.apache.org/2.2/book.html#regions.arch

 

往期推荐

1、Hudi原理 | Apache Hudi 典型应用场景介绍

2、HBase实践 | HBase内核优化与吞吐能力建设

3、Hadoop社区比 Ozone 更重要的事情

4、Hive on Spark 运行于Yarn模式下如何调优

这篇关于HBase原理 | HBase Region 运行状态学习的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1055431

相关文章

深度解析Nginx日志分析与499状态码问题解决

《深度解析Nginx日志分析与499状态码问题解决》在Web服务器运维和性能优化过程中,Nginx日志是排查问题的重要依据,本文将围绕Nginx日志分析、499状态码的成因、排查方法及解决方案展开讨论... 目录前言1. Nginx日志基础1.1 Nginx日志存放位置1.2 Nginx日志格式2. 499

Spring Security 单点登录与自动登录机制的实现原理

《SpringSecurity单点登录与自动登录机制的实现原理》本文探讨SpringSecurity实现单点登录(SSO)与自动登录机制,涵盖JWT跨系统认证、RememberMe持久化Token... 目录一、核心概念解析1.1 单点登录(SSO)1.2 自动登录(Remember Me)二、代码分析三、

MySQL多实例管理如何在一台主机上运行多个mysql

《MySQL多实例管理如何在一台主机上运行多个mysql》文章详解了在Linux主机上通过二进制方式安装MySQL多实例的步骤,涵盖端口配置、数据目录准备、初始化与启动流程,以及排错方法,适用于构建读... 目录一、什么是mysql多实例二、二进制方式安装MySQL1.获取二进制代码包2.安装基础依赖3.清

在IntelliJ IDEA中高效运行与调试Spring Boot项目的实战步骤

《在IntelliJIDEA中高效运行与调试SpringBoot项目的实战步骤》本章详解SpringBoot项目导入IntelliJIDEA的流程,教授运行与调试技巧,包括断点设置与变量查看,奠定... 目录引言:为良驹配上好鞍一、为何选择IntelliJ IDEA?二、实战:导入并运行你的第一个项目步骤1

在MySQL中实现冷热数据分离的方法及使用场景底层原理解析

《在MySQL中实现冷热数据分离的方法及使用场景底层原理解析》MySQL冷热数据分离通过分表/分区策略、数据归档和索引优化,将频繁访问的热数据与冷数据分开存储,提升查询效率并降低存储成本,适用于高并发... 目录实现冷热数据分离1. 分表策略2. 使用分区表3. 数据归档与迁移在mysql中实现冷热数据分

从原理到实战深入理解Java 断言assert

《从原理到实战深入理解Java断言assert》本文深入解析Java断言机制,涵盖语法、工作原理、启用方式及与异常的区别,推荐用于开发阶段的条件检查与状态验证,并强调生产环境应使用参数验证工具类替代... 目录深入理解 Java 断言(assert):从原理到实战引言:为什么需要断言?一、断言基础1.1 语

MySQL中的表连接原理分析

《MySQL中的表连接原理分析》:本文主要介绍MySQL中的表连接原理分析,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、背景2、环境3、表连接原理【1】驱动表和被驱动表【2】内连接【3】外连接【4编程】嵌套循环连接【5】join buffer4、总结1、背景

深度解析Spring AOP @Aspect 原理、实战与最佳实践教程

《深度解析SpringAOP@Aspect原理、实战与最佳实践教程》文章系统讲解了SpringAOP核心概念、实现方式及原理,涵盖横切关注点分离、代理机制(JDK/CGLIB)、切入点类型、性能... 目录1. @ASPect 核心概念1.1 AOP 编程范式1.2 @Aspect 关键特性2. 完整代码实

Java Stream的distinct去重原理分析

《JavaStream的distinct去重原理分析》Javastream中的distinct方法用于去除流中的重复元素,它返回一个包含过滤后唯一元素的新流,该方法会根据元素的hashcode和eq... 目录一、distinct 的基础用法与核心特性二、distinct 的底层实现原理1. 顺序流中的去重

k8s上运行的mysql、mariadb数据库的备份记录(支持x86和arm两种架构)

《k8s上运行的mysql、mariadb数据库的备份记录(支持x86和arm两种架构)》本文记录在K8s上运行的MySQL/MariaDB备份方案,通过工具容器执行mysqldump,结合定时任务实... 目录前言一、获取需要备份的数据库的信息二、备份步骤1.准备工作(X86)1.准备工作(arm)2.手