HBase原理 | HBase Region 运行状态学习

2024-06-12 21:48

本文主要是介绍HBase原理 | HBase Region 运行状态学习,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

HBase为每个Region维护一个状态,并将该状态保留在hbase:meta中。hbase:meta本身的Region状态保留在ZooKeeper中。可以在Master Web UI中查看Region的过渡状态。以下是可能的Region状态列表。

1. 状态机中包括下面几种状态:

  • offline:region离线没有开启。

  • opening:region正在被打开。

  • open:region正在打开,并且region server通知了master。

  • failed_open:regionserver打开失败。

  • closing:region正在被关闭。

  • closed:regionserver正在关闭,并且已经通知了master。

  • failed_close:regionserver关闭失败了。

  • splitting:region server通知master,region正在被切分。

  • split:region server通知master,region已经被切分完了。

  • spliting_new:region是切分过程中新建的文件。

  • merging:regionserver通知master region正在合并。

  • merged:regionserver通知master region合并完了。

  • merging_new:region是合并新建出来的。

2. 不同的颜色是不同含义:

  • 棕色:离线状态,属于一种短暂的瞬间状态(比如关闭后开启的中间状态)、停止状态或者初始化的时候的状态。

  • 绿色:正常的状态,可以支持请求访问。

  • 蓝色:短暂的状态。

  • 红色:失败。

  • 黄色:合并或者切分的状态。

  • 灰色:刚开始的状态。

3. 各个序号代表不同的操作场景:

  • Master向region server发起region从offline到openning的状态请求,regionserver如果没有收到,master会尝试重试几次。RegionServer接收到请求后,regin状态变成opening。

  • 如果Master发起的open请求超过次数,那么无论region server是否已经打开region,master都会命令region server关闭文件,状态变为closing。

  • 当region server打开region后,会尝试通知master,让它把region状态修改为open,并通知regsion server。这样region才能变为open状态。

  • 如果region server打开失败,会尝试通知master。master会把region的状态变更为closed,并且尝试去其他的region server打开region。

  • 如果master尝试几次后,都没有打开region,就会把状态变更为failed_open。

  • master通知region server关闭region,如果没有反应,会重试。

  • 如果region server没有在线,会抛出异常。然后region的状态会变成closing。

  • 如果region server在线,但是好几次都没响应,就会更新状态为failed_close。

  • 如果region server收到请求,并且关闭了region,那么会通知master把region状态修改为closed。并且把region分配给其他的server。

  • 在分配之前,master会先把region从closed状态转换为offline。

  • 如果region server正在切分region,会通知master。master把region状态由open变为splitting,并且把新增两个region的信息,这两个region都是splitting_new状态。

  • 如果region切分成功,当前的region状态从splitting变成split;新增的两个region状态从splitting_new变成open。

  • 如果切分失败,状态从splitting回到open,两个region也从splitting_new变成offline。

  • 如果region server想要合并两个region,那么也会先通知master。master把两个region从open变成merging,然后增加一个新的region,状态为merging_new。

  • 如果合并成功, 旧的region从merging变为merged,新的region从merging_new变为open。

  • 如果合并失败,region的状态从merging变回open,新建的一个region状态又变成offline。

  • 如果管理员通过hbase shell操作分配region,master会尝试把失败的状态变成close。

4. 参考

http://hbase.apache.org/2.2/book.html#regions.arch

 

往期推荐

1、Hudi原理 | Apache Hudi 典型应用场景介绍

2、HBase实践 | HBase内核优化与吞吐能力建设

3、Hadoop社区比 Ozone 更重要的事情

4、Hive on Spark 运行于Yarn模式下如何调优

这篇关于HBase原理 | HBase Region 运行状态学习的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1055431

相关文章

Python中使用uv创建环境及原理举例详解

《Python中使用uv创建环境及原理举例详解》uv是Astral团队开发的高性能Python工具,整合包管理、虚拟环境、Python版本控制等功能,:本文主要介绍Python中使用uv创建环境及... 目录一、uv工具简介核心特点:二、安装uv1. 通过pip安装2. 通过脚本安装验证安装:配置镜像源(可

Go学习记录之runtime包深入解析

《Go学习记录之runtime包深入解析》Go语言runtime包管理运行时环境,涵盖goroutine调度、内存分配、垃圾回收、类型信息等核心功能,:本文主要介绍Go学习记录之runtime包的... 目录前言:一、runtime包内容学习1、作用:① Goroutine和并发控制:② 垃圾回收:③ 栈和

Mysql的主从同步/复制的原理分析

《Mysql的主从同步/复制的原理分析》:本文主要介绍Mysql的主从同步/复制的原理分析,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录为什么要主从同步?mysql主从同步架构有哪些?Mysql主从复制的原理/整体流程级联复制架构为什么好?Mysql主从复制注意

Nacos注册中心和配置中心的底层原理全面解读

《Nacos注册中心和配置中心的底层原理全面解读》:本文主要介绍Nacos注册中心和配置中心的底层原理的全面解读,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录临时实例和永久实例为什么 Nacos 要将服务实例分为临时实例和永久实例?1.x 版本和2.x版本的区别

Java -jar命令如何运行外部依赖JAR包

《Java-jar命令如何运行外部依赖JAR包》在Java应用部署中,java-jar命令是启动可执行JAR包的标准方式,但当应用需要依赖外部JAR文件时,直接使用java-jar会面临类加载困... 目录引言:外部依赖JAR的必要性一、问题本质:类加载机制的限制1. Java -jar的默认行为2. 类加

java -jar命令运行 jar包时运行外部依赖jar包的场景分析

《java-jar命令运行jar包时运行外部依赖jar包的场景分析》:本文主要介绍java-jar命令运行jar包时运行外部依赖jar包的场景分析,本文给大家介绍的非常详细,对大家的学习或工作... 目录Java -jar命令运行 jar包时如何运行外部依赖jar包场景:解决:方法一、启动参数添加: -Xb

Android学习总结之Java和kotlin区别超详细分析

《Android学习总结之Java和kotlin区别超详细分析》Java和Kotlin都是用于Android开发的编程语言,它们各自具有独特的特点和优势,:本文主要介绍Android学习总结之Ja... 目录一、空安全机制真题 1:Kotlin 如何解决 Java 的 NullPointerExceptio

IIS 7.0 及更高版本中的 FTP 状态代码

《IIS7.0及更高版本中的FTP状态代码》本文介绍IIS7.0中的FTP状态代码,方便大家在使用iis中发现ftp的问题... 简介尝试使用 FTP 访问运行 Internet Information Services (IIS) 7.0 或更高版本的服务器上的内容时,IIS 将返回指示响应状态的数字代

apache的commons-pool2原理与使用实践记录

《apache的commons-pool2原理与使用实践记录》ApacheCommonsPool2是一个高效的对象池化框架,通过复用昂贵资源(如数据库连接、线程、网络连接)优化系统性能,这篇文章主... 目录一、核心原理与组件二、使用步骤详解(以数据库连接池为例)三、高级配置与优化四、典型应用场景五、注意事

eclipse如何运行springboot项目

《eclipse如何运行springboot项目》:本文主要介绍eclipse如何运行springboot项目问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目js录当在eclipse启动spring boot项目时出现问题解决办法1.通过cmd命令行2.在ecl