Hbase2.5.5分布式部署安装记录

文章目录

  • [1 环境准备](#1 环境准备)
    • [1.1 节点部署情况](#1.1 节点部署情况)
    • [1.2 安装说明](#1.2 安装说明)
  • [2 Hbase安装过程](#2 Hbase安装过程)
  • [3 Web UI检查状态并测试](#3 Web UI检查状态并测试)
    • [3.1 Web UI](#3.1 Web UI)
    • [3.2 创建测试命名空间](#3.2 创建测试命名空间)

1 环境准备

1.1 节点部署情况

Hadoop11:Hadoop3.1.4 、 zookeeper3.4.6、jdk8

Hadoop12:Hadoop3.1.4 、 zookeeper3.4.6、jdk8

Hadoop13:Hadoop3.1.4 、 zookeeper3.4.6、jdk8

1.2 安装说明

从官网下载二进制安装包,上传至linux,安装并分发三台集群,用作大数据测试实验,前置的Hadoop以及jdk安装将省略。

安装前请确保三台集群节点已经配置免密登录,域名映射,以及关闭防火墙。

2 Hbase安装过程

Step1:

  • 从官网下载:hbase-2.5.5-bin.tar.gz,大约298M,并将其上传至服务器。

  • 执行解压:tar -cvzf hbase-2.5.5-bin.tar.gz

  • 解压并到安装目录:/opt/installs/hbase-2.5.5

  • 添加环境变量:

    export HBASE_HOME=/opt/installs/hbase-2.5.5
    export PATH=PATH:HBASE_HOME/bin

  • 刷新环境变量:source /etc/profile

Step2:

  • 进入目录:/opt/installs/hbase-2.5.5/conf
  • 需要对三个配置文件进行编辑,关于配置的具体含义不再赘述,以下是一种基于HDFS的分布式及外部zookeeper协调的部署方案,其中hadoop11为Hmaster:

hbase-env.sh

复制代码
export JAVA_HOME=/opt/installs/jdk8
export HADOOP_HOME=/opt/installs/hadoop3.1.4
export HBASE_MANAGES_ZK=false

hbase-site.xml

复制代码
<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://hdfs-cluster</value>
    </property>
 <property>
    <name>hbase.rootdir</name>
    <value>hdfs//hdfs-cluster/hbase</value>
</property>
<property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
</property>
<property>
    <name>hbase.zookeeper.quorum</name>
    <value>haddoop11:2181,hadoop12:2181,hadoop13:2181</value>
</property>
<property>
    <name>hbase.tmp.dir</name>
    <value>/data/hbase/tmp</value>
</property>
<property>
    <name>zookeeper.znode.parent</name>
    <value>/hbase</value>
</property>
<property>
    <name>hbase.zookeeper.property.clientPort</name>
    <value>2181</value>
</property>
<property>
    <name>hbase.unsafe.stream.capability.enforce</name>
    <value>true</value>
</property>
</configuration>

regionservers

复制代码
hadoop11
hadoop12
hadoop13

Step3:

  • 使用scp命令将hadoop11节点的hbase部署目录分发至hadoop12、hadoop13从节点。
  • 至此部署完成,下面开始启动。

Step4:

  • 启动前环境准备,启动hdfs、zookeeper,并确保namenode为active状态:

  • 执行:start-hbase.sh

  • 完成hbase的分布式部署以及启动:

3 Web UI检查状态并测试

3.1 Web UI

  • 浏览器进入:http://hadoop11:16010/master-status
  • 节点正常。

3.2 创建测试命名空间

  • 进入hbase shell
  • 确保我们的Hbase服务可用
  • 创建测试命名空间:create_namespace "testspace"
  • 创建表:hbase:008:0> create "testspace:t_person","info","age"
  • 插入数据:hbase:010:0> put 'testspace:t_person','1001','info:name','zhangsan'
  • 插入数据:hbase:011:0> put 'testspace:t_person','1001','info:age','18'
  • 查看表中数据:hbase:013:0> scan 'testspace:t_person'
  • 查看web ui:

至此,完成Hbase的分布式部署安装及测试。

相关推荐
深蓝电商API13 小时前
Redis 在分布式爬虫中的作用
redis·分布式·爬虫
凤山老林14 小时前
高可用分布式任务调度架构:Spring Boot 集成 PowerJob 实战指南
spring boot·分布式·架构
海宇数据18 小时前
零信任架构实战:基于海宇运营商近3个月平均账单构建自动化分布式租赁网关
人工智能·分布式·架构·自动化
IT大白鼠18 小时前
MySQL 分布式集群系列 · 第二篇:架构深度拆解--NDB 三大核心节点
分布式·mysql·架构
醉颜凉18 小时前
Kafka ISR与AR深度解析:副本同步机制核心概念
分布式·架构·kafka·ar
johnny23319 小时前
大模型分布式训练理论和框架:DeepSpeed、Megatron、Torchrun
分布式
倔强的石头1061 天前
高可用与无感扩容——分布式时序数据库选型指南
数据库·分布式·时序数据库
fastjson_2 天前
Spark 安装和使用
大数据·分布式·spark
spter。2 天前
从一次关注到最终一致:Canal、Outbox 与 Kafka 如何解决关系链双写问题
分布式·kafka
MC丶科2 天前
软考架构师90天冲刺|DAY38·第二阶段综合测试-分布式与云原生
分布式·云原生·架构·serverless·service_mesh·软考架构师