HBase 整合 Phoenix

目录

[一、Phoenix 简介](#一、Phoenix 简介)

[1.1 Phoenix定义](#1.1 Phoenix定义)

[1.2 为什么使用 Phoenix](#1.2 为什么使用 Phoenix)

[二、Phoenix 快速入门](#二、Phoenix 快速入门)

[2.1 安装部署 Phoenix](#2.1 安装部署 Phoenix)

[2.1.1 上传并解压 tar 包](#2.1.1 上传并解压 tar 包)

[2.1.2 复制 server 包并拷贝到各个节点的 hbase/lib](#2.1.2 复制 server 包并拷贝到各个节点的 hbase/lib)

[2.1.3 配置环境变量](#2.1.3 配置环境变量)

[2.1.4 重启 HBase](#2.1.4 重启 HBase)

[2.1.5 连接 Phoenix](#2.1.5 连接 Phoenix)

[2.2 Phoenix Shell 操作](#2.2 Phoenix Shell 操作)


一、Phoenix 简介

1.1 Phoenix定义

Phoenix 是 HBase 的开源 SQL 皮肤。可以使用标准 JDBC API 代替 HBase 客户端 API 来创建表,插入数据和查询 HBase 数据。

1.2 为什么使用 Phoenix

官方给的解释为:在 Client 和 HBase 之间放一个 Phoenix 中间层不会减慢速度,因为用户编写的数据处理代码和 Phoenix 编写的没有区别(更不用说你写的垃圾的多),不仅如此 Phoenix 对于用户输入的 SQL 同样会有大量的优化手段(就像 hive 自带 sql 优化器一样)。

Phoenix 在 5.0 版本默认提供有两种客户端使用(瘦客户端和胖客户端),在 5.1.2 版本安装包中删除了瘦客户端,本文也不再使用瘦客户端。而胖客户端和用户自己写 HBase 的 API 代码读取数据之后进行数据处理是完全一样的。

二、Phoenix 快速入门

2.1 安装部署 Phoenix

官网地址:Overview | Apache Phoenix

下载地址:Phoenix Downloads | Apache Phoenix

2.1.1 上传并解压 tar 包

复制代码
(base) [root@hadoop01 ~]# tar -zxvf phoenix-hbase-2.5-5.1.3-bin.tar.gz -C /bigdata/
(base) [root@hadoop01 ~]# mv /bigdata/phoenix-hbase-2.5-5.1.3-bin /bigdata/phoenix

2.1.2 复制 server 包并拷贝到各个节点的 hbase/lib

复制代码
(base) [root@hadoop01 ~]# cd /bigdata/phoenix/
(base) [root@hadoop01 /bigdata/phoenix]# cp phoenix-server-hbase-2.5-5.1.3.jar /bigdata/hbase/lib/
(base) [root@hadoop01 /bigdata/phoenix]# cd /bigdata/hbase/lib/
(base) [root@hadoop01 /bigdata/hbase/lib]# scp -r phoenix-server-hbase-2.5-5.1.3.jar hadoop02:$PWD   
(base) [root@hadoop01 /bigdata/hbase/lib]# scp -r phoenix-server-hbase-2.5-5.1.3.jar hadoop03:$PWD

2.1.3 配置环境变量

复制代码
(base) [root@hadoop01 ~]# vim /etc/profile
# phoenix
export PHOENIX_HOME=/bigdata/phoenix
export PHOENIX_CLASSPATH=$PHOENIX_HOME
export PATH=$PATH:$PHOENIX_HOME/bin

(base) [root@hadoop01 ~]# source /etc/profile

2.1.4 重启 HBase

复制代码
stop-hbase.sh
start-hbase.sh

2.1.5 连接 Phoenix

直接连接 zookeeper 连接 hbase:

复制代码
[root@hadoop01 ~]# sqlline.py hadoop01,hadoop02,hadoop03:2181

到此为止 Phoenix 安装完毕!

2.2 Phoenix Shell 操作

关于 Phoenix 的语法建议使用时直接查看官网:Grammar | Apache Phoenix

实际操作可以参考这篇文章:5.hbase-phoenix 与二次索引应用 | 海牛部落 高品质的 大数据技术社区

上一篇文章:HBase shell 基础实操-CSDN博客

相关推荐
RestCloud4 小时前
SQL Server到Hive:批处理ETL性能提升30%的实战经验
数据库·api
阿里云大数据AI技术4 小时前
StarRocks 助力数禾科技构建实时数仓:从数据孤岛到智能决策
大数据
RestCloud4 小时前
为什么说零代码 ETL 是未来趋势?
数据库·api
ClouGence6 小时前
CloudCanal + Paimon + SelectDB 从 0 到 1 构建实时湖仓
数据库
Lx3528 小时前
Hadoop数据处理优化:减少Shuffle阶段的性能损耗
大数据·hadoop
武子康12 小时前
大数据-99 Spark Streaming 数据源全面总结:原理、应用 文件流、Socket、RDD队列流
大数据·后端·spark
DemonAvenger13 小时前
NoSQL与MySQL混合架构设计:从入门到实战的最佳实践
数据库·mysql·性能优化
AAA修煤气灶刘哥1 天前
后端人速藏!数据库PD建模避坑指南
数据库·后端·mysql
阿里云大数据AI技术1 天前
大数据公有云市场第一,阿里云占比47%!
大数据
RestCloud1 天前
揭秘 CDC 技术:让数据库同步快人一步
数据库·api