KADB使用PXF连接KES验证

  • 验证环境

KADB版本:Greenplum Database 6.0.0 build dev.V003R002C001B0181.d354cc9215

KES版本:KingbaseES V008R006C007B0012

Java版本:openjdk version "1.8.0_262"

  • PXF部署

以下操作假设KADB和KES已经部署完成并且启动正常,环境变量设置完成

  1. 设置环境变量

在mppadin用户的.bashrc文件加入以下内容:
export PATH=GPHOME/pxf/bin:PATH

export PXF_CONF=$GPHOME/pxf

  1. 安装JAVA

修改/home/mppadmin/kadb/pxf/conf/pxf-env.sh文件加入JAVA安装目录:
export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.262.b10-1.el7.x86_64/jre

注:支持openjdk

  1. 注册pxf扩展

使用mppadmin用户登录master节点主机执行:
/home/mppadmin/mpp/pxf/bin/pxf cluster register

该命令拷贝pxf扩展文件到集群每一个节点的/home/mppadmin/kadb/share/postgresql/extension目录中,kadb介质已经完成此步骤,命令执行结果如下:

mppadmin@mdw1 extension\]$ pxf cluster register Installing PXF extension on master host and 0 segment hosts... PXF extension has been installed on 1 out of 1 host 1. 拷贝KES JDBC驱动到KADB所有节点的$PXF_HOME/lib目录 ![](https://file.jishuzhan.net/article/1750322698942156801/86af0f970ea73ec47142066967d18167.webp) 1. 创建jdbc连接参数配置文件 在KADB所有segment节点创建下面的文件(jdbc-site.xml文件模板在目录:/home/mppadmin/kadb/pxf/templates ![](https://file.jishuzhan.net/article/1750322698942156801/d4e0911ead1e54b83cc5985de8cda11b.webp) 修改改文件的下面参数: ![](https://file.jishuzhan.net/article/1750322698942156801/08fc95f7cfe15a38a62a05611b7cfd3a.webp) 1. 启动PXF服务 在KADB master节点执行: /home/mppadmin/mpp/pxf/bin/pxf cluster start 命令输出如下: \[mppadmin@mdw1 templates\]$ pxf cluster start Starting PXF on master host and 0 segment hosts... PXF started successfully on 1 out of 1 host 查看pxf server允许状态: \[mppadmin@mdw1 templates\]$ pxf cluster status Checking status of PXF servers on master host and 0 segment hosts... PXF is running on 1 out of 1 host 1. 在测试数据库安装pxf扩展 登录KADB,在测试数据库中执行: create extension pxf; * KADB通过PXF连接KES测试性能 1. KADB通过pxf外部表访问KES中的数据 1. KES创建测试表 test=# \\d test Table "public.test" Column \| Type \| Collation \| Nullable \| Default --------+----------------------------+-----------+----------+--------- a \| integer \| \| \| b \| character varying(20 char) \| \| \| 1. 插入测试数据,并记录时间 test=# insert into test values(generate_series(1,1000000),'ccccccccccccccc'); INSERT 0 1000000 Time: 1147.879 ms (00:01.148) 1. 登录KADB,创建测试数据库test 创建只读外部表test create external table test( a int, b varchar(20)) location('pxf://test?profile =jdbc') FORMAT 'CUSTOM' (FORMATTER='pxfwritable_import'); 1. 外部表读性能 postgres=# select count(\*) from test1; count --------- 2000002 (1 row) Time: 3729.619 ms KES本地读取性能 test=# select count(\*) from test; count 2000002 (1 row) Time: 112.064 ms 1. KADB通过pxf外部表写入KES数据 1. KADB创建可写外部表 create writable external table test( a int, b varchar(20)) location('pxf://test?profile=jdbc') FORMAT 'CUSTOM' (FORMATTER='pxfwritable_export'); 1. 通过外部表写入数据并记录时间 postgres=# insert into test values(generate_series(1,1000000),'ccccccccccccccc'); INSERT 0 1000000 Time: 11397.677 ms 1. KES本地写入并记录时间 test=# insert into test values(generate_series(1,1000000),'ccccccccccccccc'); INSERT 0 1000000 Time: 1147.879 ms (00:01.148)

相关推荐
workflower2 小时前
MDSE和敏捷开发相互矛盾之处:方法论本质的冲突
数据库·软件工程·敏捷流程·极限编程
Tony小周2 小时前
实现一个点击输入框可以弹出的数字软键盘控件 qt 5.12
开发语言·数据库·qt
lifallen2 小时前
Paimon 原子提交实现
java·大数据·数据结构·数据库·后端·算法
TDengine (老段)3 小时前
TDengine 数据库建模最佳实践
大数据·数据库·物联网·时序数据库·tdengine·涛思数据
Elastic 中国社区官方博客3 小时前
Elasticsearch 字符串包含子字符串:高级查询技巧
大数据·数据库·elasticsearch·搜索引擎·全文检索·lucene
Gauss松鼠会3 小时前
GaussDB应用场景全景解析:从金融核心到物联网的分布式数据库实践
数据库·分布式·物联网·金融·database·gaussdb
守城小轩4 小时前
Chromium 136 编译指南 - Android 篇:开发工具安装(三)
android·数据库·redis
尽兴-4 小时前
如何将多个.sql文件合并成一个:Windows和Linux/Mac详细指南
linux·数据库·windows·sql·macos
小小不董4 小时前
深入理解oracle ADG和RAC
linux·服务器·数据库·oracle·dba
胚芽鞘6815 小时前
查询依赖冲突工具maven Helper
java·数据库·maven