快速配置 HBase 完全分布式(依赖已部署的 Hadoop+ZooKeeper)

前面的文章已完成hadoop+Zookeeper配置,未完成的可参考前面文章。

|---------|--------------|-----------------------------|
| 节点 | Hbase角色 | 已部署角色(Hadoop/ZK) |
| master | HMaster | NameNode+DataNode+Zookeeper |
| slave01 | RegionServer | DataNode+Zookeeper |
| slave02 | RegionServer | SNN+DataNode+Zookeeper |

一、下载并解压文件

本次我们所需版本为hbase-2.2.7.下载上传到/opt/software。解压到/opt/module目录下。

二、环境变量配置

编辑/etc/profile.d/my_ens.sh文件插入

记得远程同步到其他节点。

三、核心配置文件修改

1.修改hbase-env.sh。导入安装的jdk,以及禁用内置zookeeper.

2.修改hbase-site.xml文件

3.修改regionservers文件

4.远程同步文件

四、启动集群

前提:启动Hadoop集群、Zookeeper.

在master节点启动集群:

查看进程:

五、常见问题排查(快速避坑)

HMaster 启动后秒退:

检查 hbase-site.xml 中 hbase.rootdir 的 HDFS 路径是否正确(NameNode 主机名 / 端口是否通);

查看日志:/opt/module/hbase-2.2.7/logs/hbase-xxx-master-node1.log,重点看 ZK 连接失败(如 hbase.zookeeper.quorum 配置错误)。

RegionServer 启动失败:

检查所有节点的 HBase 配置文件一致(未分发配置会导致报错);

确认 ZK 集群正常(zkServer.sh status 查看所有节点角色,有 Leader/Follower)。

报 UnsupportedFileSystemException:

把 hbase.unsafe.stream.capability.enforce 设为 false,重启 HBase。

总结:

完全分布式核心是 "关联 Hadoop 存储 + 对接外部 ZK + 指定 RegionServer 节点",全程只需配置 3 个文件,依赖已部署的 Hadoop/ZK 时,无需额外复杂操作。启动后通过 Web 界面或 hbase shell 快速验证,遇到报错优先看日志和前置服务状态~

相关推荐
RingWu22 分钟前
高并发三板斧-异步
分布式·微服务·架构
冰上浮云26 分钟前
Gravitino iceberg catalog backend 为hive 获取元数据过程
数据仓库·hive·hadoop·gravitino
段一凡-华北理工大学44 分钟前
工业领域的Hadoop架构学习~系列文章06:Hive数据仓库
数据仓库·hadoop·架构·高炉炼铁·工业智能体·高炉智能化·hive数据仓库
搞科研的小刘选手10 小时前
【中山大学主办】第六届计算机科学与区块链国际学术会议(CCSB 2026)
分布式·神经网络·计算机视觉·区块链·计算机科学·共识算法·自然语言
小饼干在学嘎瓦11 小时前
本地缓存和分布式缓存如何选择?
分布式·缓存
XLYcmy12 小时前
全链路验证测试系统:一个针对智能代理(Agent)系统全链路能力的自动化验证脚本
分布式·python·http·网络安全·ai·llm·agent
phltxy21 小时前
HAProxy安装与RabbitMQ负载均衡配置
分布式·rabbitmq·负载均衡
jiayong231 天前
Kafka 高吞吐消息链路常见面试问题及详细解答
分布式·面试·kafka
段一凡-华北理工大学1 天前
工业领域的Hadoop架构学习~系列文章04:YARN资源调度架构
人工智能·hadoop·学习·架构·系统架构·高炉炼铁·高炉炼铁智能化
卷毛迷你猪1 天前
快速实验篇(A2-2)数据清洗规则修正与多语言实现验证
hadoop·分布式