详解 HBase 的安装部署及命令行操作

2024-06-17 08:36

本文主要是介绍详解 HBase 的安装部署及命令行操作,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一、下载安装

  • 进入 HBase 下载地址:https://archive.apache.org/dist/hbase/

  • 下载对应版本的 HBase 安装包并上传到虚拟机,并确保安装了 jdk 环境

  • 将 HBase 安装包解压

    #在 /opt/software 目录下解压安装包
    tar -zxvf hbase-1.3.1-bin.tar.gz -C /opt/module
    # 改名
    cd /opt/module
    mv hbase-1.3.1-bin.tar.gz hbase
    
  • 修改配置文件

    • 修改 hbase-env.sh

      cd /opt/module/hbase/conf
      vim hbase-env.sh# 修改 Java 环境变量
      export JAVA_HOME=/opt/module/jdk
      #注释掉 jdk1.7 的警告信息
      # 排除内置zk
      export HBASE_MANAGES_ZK=false
      
    • 修改 hbase-site.xml (默认的 hbase-default.xml)

      cd /opt/module/hbase/conf
      vim hbase-site.xml
      
      <configuration><property><name>hbase.rootdir</name><value>hdfs://hadoop102:9000/HBase</value></property><property><name>hbase.cluster.distributed</name><value>true</value></property><!-- 0.98 后的新变动,之前版本没有.port,默认端口为 60000,web端口 16010 --><property><name>hbase.master.port</name><value>16000</value></property><property> <name>hbase.zookeeper.quorum</name><value>hadoop102,hadoop103,hadoop104</value> </property><property> <name>hbase.zookeeper.property.dataDir</name><value>/opt/module/zookeeper-3.4.10/zkData</value></property>
      </configuration>
      
    • 修改 regionservers

      cd /opt/module/hbase/conf
      vim regionservers#添加
      hadoop102
      hadoop103
      hadoop104
      
  • 软连接 hadoop 配置文件到 HBase

    ln -s /opt/module/hadoop-2.7.2/etc/hadoop/core-site.xml /opt/module/hbase/conf/coresite.xmlln -s /opt/module/hadoop-2.7.2/etc/hadoop/hdfs-site.xml /opt/module/hbase/conf/hdfssite.xml
    
  • 分发 hbase 安装目录到集群其他节点

二、HBase 集群启动停止

  • 启动 Zookeeper 集群

  • 启动 Hadoop 集群

  • 启动 HBase 集群

    • 方式一:单节点启动停止

      #hadoop102
      cd /opt/module
      hbase/bin/hbase-daemon.sh start/stop master
      hbase/bin/hbase-daemon.sh start/stop regionserver#hadoop103 和 104
      cd /opt/module
      hbase/bin/hbase-daemon.sh start/stop regionserver#提示:如果集群之间的节点时间不同步,会导致regionserver无法启动,抛出ClockOutOfSyncException 异常
      
      • 时间不同步修复:

        • Linux 同步时间服务

        • hbase-site.xml 中将 hbase.master.maxclockskew 属性设置更大的值(不建议)

          <property><name>hbase.master.maxclockskew</name><value>180000</value><description>Time difference of regionserver from 	master</description>
          </property>
          
    • 方式二:群起群停

      #在哪个节点执行则该节点就是 master
      cd /opt/module
      hbase/bin/start-hbase.sh
      hbase/bin/stop-hbase.sh
      
  • 查看 HBase:http://hadoop102:16010

三、HBase 的命令行操作

1. 基本操作

# 进入 HBase 客户端命令行
cd /opt/module/hbase
bin/hbase shell# 查看帮助命令
hbase(main):001:0> help

2. 命名空间的操作

# 查看所有命名空间
list_namespace# 创建命名空间:create_namespace 'nsname'
create_namespace 'bigdata'# 删除命名空间:drop_namespace 'nsname'
# 删除命名空间之前需要清空命名空间所有表
drop_namespace 'bigdata'

3. 表的操作

# 查看所有表
list# 创建表:create 'nsname:tbname','colFamily1'[,'colFamily2'...]
# 省略 nsname 则默认在 default 命名空间下
create 'bigdata:student','info'# 查看表结构:describe 'tbname'
describe 'student'# 变更表信息:alter 'tbname',{KEY=>VALUE,...}
# 设置info列族中的数据存放3个版本:
alter 'student',{NAME=>'info',VERSIONS=>3}# 删除表:drop 'tbname'
# 删除表之前需要禁用表:disable 'tbname'
disable 'student'
drop 'student'# 插入数据到表:put 'tbname','row_key','colFamily:col','value'[,ts,{...}]
put 'student','1001','info:sex','male'
put 'student','1001','info:age','18'
put 'student','1002','info:name','Janna'
put 'student','1002','info:sex','female'
put 'student','1002','info:age','20'# 扫描查看表数据:scan 'tbname'[,...]
scan 'student'
scan 'student',{STARTROW => '1001', STOPROW => '1001'}
scan 'student',{STARTROW => '1001'}
scan 'student',{RAW => true, VERSIONS => 10} #查看所有版本的数据# 查看“指定行”或“指定列族:列”的数据:get 'tbname','row_key'[,'cf:col1',{...}]
get 'student','1001'
get 'student','1001','info:name'
get 'student','1001',{COLUMN=>'info:name',VERSIONS=>3} #获取列存储的所有版本数据# 修改指定字段的数据:put 'tbname','row_key','cf:col','newValue'
put 'student','1001','info:name','Nick'
put 'student','1001','info:age','100'# 删除数据:
# 删除某 rowkey 的全部数据:deleteall 'tbname','row_key'
deleteall 'student','1001' # 标记为 deleteFamily# 删除某 rowkey 的某一列数据:delete 'tbname','row_key','cf:col'[,ts]
delete 'student','1002','info:sex' # 标记为 deleteColumn
delete 'student','1002','info' # 执行不报错,但没效果(使用API方式则可以)# 统计表数据行数:count 'tbname'
count 'student'# 清空表数据:truncate ’tbname'
# 提示:清空表的操作顺序为先 disable,然后再 truncate
truncate 'student'

这篇关于详解 HBase 的安装部署及命令行操作的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1068959

相关文章

Ubuntu 24.04启用root图形登录的操作流程

《Ubuntu24.04启用root图形登录的操作流程》Ubuntu默认禁用root账户的图形与SSH登录,这是为了安全,但在某些场景你可能需要直接用root登录GNOME桌面,本文以Ubuntu2... 目录一、前言二、准备工作三、设置 root 密码四、启用图形界面 root 登录1. 修改 GDM 配

Spring Boot中的路径变量示例详解

《SpringBoot中的路径变量示例详解》SpringBoot中PathVariable通过@PathVariable注解实现URL参数与方法参数绑定,支持多参数接收、类型转换、可选参数、默认值及... 目录一. 基本用法与参数映射1.路径定义2.参数绑定&nhttp://www.chinasem.cnbs

MySql基本查询之表的增删查改+聚合函数案例详解

《MySql基本查询之表的增删查改+聚合函数案例详解》本文详解SQL的CURD操作INSERT用于数据插入(单行/多行及冲突处理),SELECT实现数据检索(列选择、条件过滤、排序分页),UPDATE... 目录一、Create1.1 单行数据 + 全列插入1.2 多行数据 + 指定列插入1.3 插入否则更

Redis中Stream详解及应用小结

《Redis中Stream详解及应用小结》RedisStreams是Redis5.0引入的新功能,提供了一种类似于传统消息队列的机制,但具有更高的灵活性和可扩展性,本文给大家介绍Redis中Strea... 目录1. Redis Stream 概述2. Redis Stream 的基本操作2.1. XADD

JAVA中安装多个JDK的方法

《JAVA中安装多个JDK的方法》文章介绍了在Windows系统上安装多个JDK版本的方法,包括下载、安装路径修改、环境变量配置(JAVA_HOME和Path),并说明如何通过调整JAVA_HOME在... 首先去oracle官网下载好两个版本不同的jdk(需要登录Oracle账号,没有可以免费注册)下载完

Spring StateMachine实现状态机使用示例详解

《SpringStateMachine实现状态机使用示例详解》本文介绍SpringStateMachine实现状态机的步骤,包括依赖导入、枚举定义、状态转移规则配置、上下文管理及服务调用示例,重点解... 目录什么是状态机使用示例什么是状态机状态机是计算机科学中的​​核心建模工具​​,用于描述对象在其生命

JSONArray在Java中的应用操作实例

《JSONArray在Java中的应用操作实例》JSONArray是org.json库用于处理JSON数组的类,可将Java对象(Map/List)转换为JSON格式,提供增删改查等操作,适用于前后端... 目录1. jsONArray定义与功能1.1 JSONArray概念阐释1.1.1 什么是JSONA

Java JDK1.8 安装和环境配置教程详解

《JavaJDK1.8安装和环境配置教程详解》文章简要介绍了JDK1.8的安装流程,包括官网下载对应系统版本、安装时选择非系统盘路径、配置JAVA_HOME、CLASSPATH和Path环境变量,... 目录1.下载JDK2.安装JDK3.配置环境变量4.检验JDK官网下载地址:Java Downloads

SQL server数据库如何下载和安装

《SQLserver数据库如何下载和安装》本文指导如何下载安装SQLServer2022评估版及SSMS工具,涵盖安装配置、连接字符串设置、C#连接数据库方法和安全注意事项,如混合验证、参数化查... 目录第一步:打开官网下载对应文件第二步:程序安装配置第三部:安装工具SQL Server Manageme

使用Python删除Excel中的行列和单元格示例详解

《使用Python删除Excel中的行列和单元格示例详解》在处理Excel数据时,删除不需要的行、列或单元格是一项常见且必要的操作,本文将使用Python脚本实现对Excel表格的高效自动化处理,感兴... 目录开发环境准备使用 python 删除 Excphpel 表格中的行删除特定行删除空白行删除含指定