Hbase2.5.5分布式部署安装记录

文章目录

  • [1 环境准备](#1 环境准备)
    • [1.1 节点部署情况](#1.1 节点部署情况)
    • [1.2 安装说明](#1.2 安装说明)
  • [2 Hbase安装过程](#2 Hbase安装过程)
  • [3 Web UI检查状态并测试](#3 Web UI检查状态并测试)
    • [3.1 Web UI](#3.1 Web UI)
    • [3.2 创建测试命名空间](#3.2 创建测试命名空间)

1 环境准备

1.1 节点部署情况

Hadoop11:Hadoop3.1.4 、 zookeeper3.4.6、jdk8

Hadoop12:Hadoop3.1.4 、 zookeeper3.4.6、jdk8

Hadoop13:Hadoop3.1.4 、 zookeeper3.4.6、jdk8

1.2 安装说明

从官网下载二进制安装包,上传至linux,安装并分发三台集群,用作大数据测试实验,前置的Hadoop以及jdk安装将省略。

安装前请确保三台集群节点已经配置免密登录,域名映射,以及关闭防火墙。

2 Hbase安装过程

Step1:

  • 从官网下载:hbase-2.5.5-bin.tar.gz,大约298M,并将其上传至服务器。

  • 执行解压:tar -cvzf hbase-2.5.5-bin.tar.gz

  • 解压并到安装目录:/opt/installs/hbase-2.5.5

  • 添加环境变量:

    export HBASE_HOME=/opt/installs/hbase-2.5.5
    export PATH=PATH:HBASE_HOME/bin

  • 刷新环境变量:source /etc/profile

Step2:

  • 进入目录:/opt/installs/hbase-2.5.5/conf
  • 需要对三个配置文件进行编辑,关于配置的具体含义不再赘述,以下是一种基于HDFS的分布式及外部zookeeper协调的部署方案,其中hadoop11为Hmaster:

hbase-env.sh

复制代码
export JAVA_HOME=/opt/installs/jdk8
export HADOOP_HOME=/opt/installs/hadoop3.1.4
export HBASE_MANAGES_ZK=false

hbase-site.xml

复制代码
<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://hdfs-cluster</value>
    </property>
 <property>
    <name>hbase.rootdir</name>
    <value>hdfs//hdfs-cluster/hbase</value>
</property>
<property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
</property>
<property>
    <name>hbase.zookeeper.quorum</name>
    <value>haddoop11:2181,hadoop12:2181,hadoop13:2181</value>
</property>
<property>
    <name>hbase.tmp.dir</name>
    <value>/data/hbase/tmp</value>
</property>
<property>
    <name>zookeeper.znode.parent</name>
    <value>/hbase</value>
</property>
<property>
    <name>hbase.zookeeper.property.clientPort</name>
    <value>2181</value>
</property>
<property>
    <name>hbase.unsafe.stream.capability.enforce</name>
    <value>true</value>
</property>
</configuration>

regionservers

复制代码
hadoop11
hadoop12
hadoop13

Step3:

  • 使用scp命令将hadoop11节点的hbase部署目录分发至hadoop12、hadoop13从节点。
  • 至此部署完成,下面开始启动。

Step4:

  • 启动前环境准备,启动hdfs、zookeeper,并确保namenode为active状态:

  • 执行:start-hbase.sh

  • 完成hbase的分布式部署以及启动:

3 Web UI检查状态并测试

3.1 Web UI

  • 浏览器进入:http://hadoop11:16010/master-status
  • 节点正常。

3.2 创建测试命名空间

  • 进入hbase shell
  • 确保我们的Hbase服务可用
  • 创建测试命名空间:create_namespace "testspace"
  • 创建表:hbase:008:0> create "testspace:t_person","info","age"
  • 插入数据:hbase:010:0> put 'testspace:t_person','1001','info:name','zhangsan'
  • 插入数据:hbase:011:0> put 'testspace:t_person','1001','info:age','18'
  • 查看表中数据:hbase:013:0> scan 'testspace:t_person'
  • 查看web ui:

至此,完成Hbase的分布式部署安装及测试。

相关推荐
qq_124987075313 小时前
基于Hadoop的信贷风险评估的数据可视化分析与预测系统的设计与实现(源码+论文+部署+安装)
大数据·人工智能·hadoop·分布式·信息可视化·毕业设计·计算机毕业设计
Coder_Boy_15 小时前
基于Spring AI的分布式在线考试系统-事件处理架构实现方案
人工智能·spring boot·分布式·spring
袁煦丞 cpolar内网穿透实验室16 小时前
远程调试内网 Kafka 不再求运维!cpolar 内网穿透实验室第 791 个成功挑战
运维·分布式·kafka·远程工作·内网穿透·cpolar
人间打气筒(Ada)17 小时前
GlusterFS实现KVM高可用及热迁移
分布式·虚拟化·kvm·高可用·glusterfs·热迁移
xu_yule17 小时前
Redis存储(15)Redis的应用_分布式锁_Lua脚本/Redlock算法
数据库·redis·分布式
難釋懷21 小时前
分布式锁的原子性问题
分布式
ai_xiaogui1 天前
【开源前瞻】从“咸鱼”到“超级个体”:谈谈 Panelai 分布式子服务器管理系统的设计架构与 UI 演进
服务器·分布式·架构·分布式架构·panelai·开源面板·ai工具开发
凯子坚持 c1 天前
如何基于 CANN 原生能力,构建一个支持 QoS 感知的 LLM 推理调度器
分布式
飞升不如收破烂~1 天前
Redis 分布式锁+接口幂等性使用+当下流行的限流方案「落地实操」+用户连续点击两下按钮的解决方案自用总结
数据库·redis·分布式