HBase完全分布式集群搭建详细教程

11.准备环境

hadoop完全分布式的搭建环境

例如三个节点:hadoop101、hadoop102、hadoop103

2.开启hadoop完全分布式服务

3.将hbase的安装文件上传到 hadoop101服务器/opt 目录下

4.将hbase安装文件解压到/usr/local/software/ 目录下

bash 复制代码
tar -zxvf /opt/hbase-2.5.6-hadoop3-bin.tar.gz -C /usr/local/software/

5.解压后压缩文件的重命名

bash 复制代码
mv hbase-2.5.6-hadoop3/ hbase

6.环境变量的配置

bash 复制代码
vim /etc/profile.d/my_env.sh

添加:
export HBASE_HOME=/usr/local/software/hbase
export PATH=(之前的内容):$HBASE_HOME/bin

7.使环境变量生效

bash 复制代码
source /etc/profile

8.测试hbase是否安装成功

bash 复制代码
hbase version

9.hbase配置文件的修改

9.1hbase-env.sh 配置文件

打开此文件,在文件末尾添加如下内容:

XML 复制代码
#指定jdk目录
export JAVA_HOME=/usr/local/software/jdk
#指定hadoop目录
export HADOOP_HOME=/usr/local/software/hadoop
#配置hbase是否使用内置的zookeeper
#true:使用内置的, false: 不使用
export HBASE_MANAGES_ZK=false
# 最重要的: 禁用对haddop classpath的查找
export HBASE_DISABLE_HADOOP_CLASSPATH_LOOKUP="true"
export HBASE_HEAPSIZE=1G
export HBASE_DISABLE_HADOOP_CLASSPATH_LOOKUP=true

9.2hbase-site.xml 配置文件

XML 复制代码
<!-- mycluster是根据hdfs-site.xml的dfs.nameservices的value进行配置 -->
<property>
    <name>hbase.rootdir</name>
    <value>hdfs://laoma/hbase</value>
</property>
<property>
    <name>hbase.master</name>
    <value>8020</value>
</property>
<!-- zookeeper集群 -->
<property>
    <name>hbase.zookeeper.quorum</name>
    <value>hadoop101:2181,hadoop102:2181,hadoop103:2181</value>
</property>
<property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
</property>
<property>
    <name>hbase.unsafe.stream.capability.enforce</name>
    <value>false</value>
</property>

10.指定RegionServers服务器

在/hbase/conf 目录下,修改 regionservers 文件,并设置如下内容:

bash 复制代码
hadoop101
hadoop102
hadoop103

11.置备份节点

在 /hbase/conf目录下,创建backup-masters,设置需要使用的备份服务器:

例如:hadoop102服务

在 backup-masters 文件中,添加 hadoop102

12.将hbase分发到其它的服务器上

bash 复制代码
scp -r /usr/local/software/hbase root@hadoop102:/usr/local/software
scp -r /usr/local/software/hbase root@hadoop103:/usr/local/software

13.将环境变量进行分发

注意:判断三台服务器中的环境变量是否一样,如果不一样,不要进行分发。则在每一台服务器上单独配置hbase的环境变量:例如:hadoop101上安装过flume、hadoop103上安装过hive,则目前环境变则不同,无法进行分发

13.1 如果可以分发则执行如下命令:

bash 复制代码
scp -r /etc/profile.d/my_env.sh root@hadoop102:/etc/profile.d/
scp -r /etc/profile.d/my_env.sh root@hadoop103:/etc/profile.d/

13.2 如果不能分发,则每一台服务器上执行如下命令

bash 复制代码
vim /etc/profile.d/my_env.sh

添加:
export HBASE_HOME=/usr/local/software/hbase
export PATH=(之前的内容):$HBASE_HOME/bin

14.使hadoop102、hadoop103 服务中的环境变量生效

bash 复制代码
source /etc/profile

15.将 hadoop/etc/hadoop目录下的hdfs-site.xml 文件,复制到 hbase/conf目录下

16.启动hbase

在第一台服务器节点上,启动hbase

bash 复制代码
start-hbase.sh

查看进程

17.测试

访问 http://IP地址:16010 查看是否能访问hbase首页面

相关推荐
这个DBA有点耶7 小时前
从症状到根因:数据库监控指标的分层方法与静态/动态阈值策略
数据库·mysql·代码规范
SelectDB8 小时前
时间旅行与快照能力速查:Doris 侧三条落地路径
大数据·数据库·数据分析
SelectDB8 小时前
云数仓成本结构拆解速查:五层计费 vs Doris / 托管形态
大数据·数据库·数据分析
SelectDB8 小时前
什么场景能承接与建议保留:Doris vs Snowflake 边界速查
大数据·数据库·数据分析
这个DBA有点耶10 小时前
DELETE没删多少数据,表却越来越大——InnoDB删除空洞与页合并失效的根因
数据库·mysql·代码规范
ly768913 小时前
PostgreSQL 备份恢复策略:pg_basebackup、WAL 归档与 PITR 在企业 Java 系统中的落地
java·数据库·postgresql·pitr·pg_basebackup·wal 归档
小羊没烦恼!14 小时前
Ajax与JSON的一些总结
android·java·前端·数据库·mysql·算法·okhttp
注塑机数据采集联网14 小时前
如何解决注塑机数据采集联网对接MES系统数据WiFi传输数据不稳问题
大数据·数据库·物联网·数据挖掘·数据分析
黄俊懿14 小时前
【架构师从入门到进阶】第六章:服务集群优化——第八节:线程数公式
java·服务器·数据库·分布式·性能优化·架构·系统架构