Hbase集群搭建

1. 环境

  1. 三台节点
  2. hadoop 集群
  3. zookeeper 集群
  4. hbase

1.1环境准备

使用前文hdfs三台节点

1.11 zookeeper搭建

下载

bash 复制代码
wget https://dlcdn.apache.org/zookeeper/zookeeper-3.8.4/apache-zookeeper-3.8.4-bin.tar.gz

解压

bash 复制代码
tar -zxvf apache-zookeeper-3.8.4-bin.tar.gz  zookeeper

修改配置

bash 复制代码
vi conf/zoo.cfg
bash 复制代码
##Client-Server通信心跳时间,单位是毫秒
tickTime=2000
##集群中的follower服务器(F)与leader服务器(L)之间初始连接时能容忍的最多心跳数
initLimit=10
##集群中的follower服务器与leader服务器之间请求和应答之间能容忍的最多心跳数
syncLimit=5    
## 监听端口
clientPort=2181
## 最大连接数
maxClientCnxns=100
## 数据目录
dataDir=/root/zookeeper/data
## 日志目录
dataLogDir=/root/zookeeper/data/log
## zk节点1
server.1=192.168.10.16:2888:3888
## zk节点2
server.2=192.168.10.17:2888:3888
## zk节点3
server.3=192.168.10.18:2888:3888

启动/停止 zookeeper

bash 复制代码
./bin/zkServer.sh start||stop

三台服务器同时配置启动即可

zookeeper同样可使用在hdfs的ha部署中,前文hdfs集群非ha模式

2 hbase搭建

hbase对应版本

官网链接
hbase官网说明

我使用的是2.5.10

hbase下载

下载地址(慢的话挂梯子)

bash 复制代码
https://dlcdn.apache.org/hbase/

解压

bash 复制代码
tar -zxvf hbase-2.5.10-bin.tar.gz && mv hbase-2.5.10 hbase 

修改环境变量

bash 复制代码
vi /etc/profile

添加

bash 复制代码
export HBASE_HOME=/root/hbase
export PATH=$HBASE_HOME/bin:$PATH
bash 复制代码
source /etc/profile

修改 conf/hbase-env.sh

bash 复制代码
# 关闭hbase自管理zookeeper
export HBASE_MANAGES_ZK=false

修改 conf/hbase-site.xml

bash 复制代码
<property>
        <name>hbase.master</name>
        <value>node1</value>
</property>
<property>
	<name>hbase.wal.provider</name>
	<value>filesystem</value>
</property>
<property>
	<name>hbase.cluster.distributed</name>
	<value>true</value>
</property>
<property>
	<name>hbase.zookeeper.quorum</name>
	<value>node1,node2,node3</value>
	<description>The directory shared by RegionServers</description>
</property>

<property>
	<name>hbase.rootdir</name>
	<value>hdfs://node1:8020/hbase</value>
	<description>The directory shared by RegionServers.</description>
</property>

修改hdfs与hbase冲突的日志jar

bash 复制代码
mv lib/client-facing-thirdparty/slf4j-api-1.7.33.jar lib/client-facing-thirdparty/slf4j-api-1.7.33.jar.bak

配置备用master

bash 复制代码
vi conf/backup-master
bash 复制代码
node2

三台服务器均配置完成后

单台启动hbase

主节点node1 备用master node2

bash 复制代码
./bin/hbase-daemon.sh start master

启动regionserver

bash 复制代码
./bin/hbase-daemon.sh start regionserver

其他节点

bash 复制代码
./bin/hbase-daemon.sh start regionserver

或者一键启动||关闭所有节点hbase,需要配置服务器免密登录

修改regionservers(一建启动)

bash 复制代码
node1
node2
node3
bash 复制代码
start-hbase.sh||stop-hbase.sh

ui地址

bash 复制代码
http://node1:16010/master-status
相关推荐
技术项目引流10 分钟前
elasticsearch查询中的特殊字符影响分析
大数据·elasticsearch·搜索引擎
EasyDSS21 分钟前
视频监控从安装到优化的技术指南,视频汇聚系统EasyCVR智能安防系统构建之道
大数据·网络·网络协议·音视频
施嘉伟29 分钟前
Oracle 11g RAC ASM磁盘组剔盘、加盘实施过程
数据库·oracle
lilye6642 分钟前
精益数据分析(20/126):解析经典数据分析框架,助力创业增长
大数据·人工智能·数据分析
苏小夕夕1 小时前
spark-streaming(二)
大数据·spark·kafka
珈和info1 小时前
珈和科技助力“农险提效200%”!“遥感+”技术创新融合省级示范项目荣登《湖北卫视》!
大数据·科技·无人机·智慧农业
盈达科技1 小时前
盈达科技:登顶GEO优化全球制高点,以AICC定义AI时代内容智能优化新标杆
大数据·人工智能
橘猫云计算机设计2 小时前
springboot基于hadoop的酷狗音乐爬虫大数据分析可视化系统(源码+lw+部署文档+讲解),源码可白嫖!
数据库·hadoop·spring boot·爬虫·python·数据分析·毕业设计
卓怡学长2 小时前
w304基于HTML5的民谣网站的设计与实现
java·前端·数据库·spring boot·spring·html5
冰^3 小时前
MySQL VS SQL Server:优缺点全解析
数据库·数据仓库·redis·sql·mysql·json·数据库开发