OceanBase数据库

OceanBase数据库

1 默认表和分区表

建立表时默认不是分区表,需要在建表语句中通过特定语法设置才能创建分区表 ,以下是创建不同类型分区表的方式:

分区表是一种将大表的数据按照一定规则划分成多个更小、更容易管理的数据子集(即分区)的技术。

1.1 分区的目的和优势

  • 提高查询性能:
    当查询只涉及表中的部分数据时,通过分区可以快速定位到相关分区,避免扫描整个大表。例如,一张存储了多年销售记录的表,按年份进行分区后,查询某一年的销售数据,数据库只需访问对应年份的分区,减少了数据扫描范围,提升了查询速度。
  • 增强可管理性:
    大表的数据维护操作(如备份、恢复、删除历史数据等)可能会耗时较长。通过分区,可针对特定分区进行操作,提高管理效率。比如,定期删除不再需要的历史数据分区,而不影响其他分区的正常使用。
  • 数据归档和存储优化:
    可以将不同访问频率的数据存储在不同类型的存储介质上。例如,将近期频繁访问的数据放在高性能存储上,将历史低频访问的数据迁移到低成本存储上,在满足业务需求的同时,降低存储成本。

1.2 常见的分区类型

  • (1)范围分区:
    这是最常用的分区方式,按照某个列或表达式的取值范围来划分分区。例如,在订单表中,按照订单日期列进行范围分区,将每个月的数据划分到一个单独的分区中 ,创建语句示例如下:
    范围分区是依据某列或表达式的值域范围来划分分区,常见于按时间(如日期、月份)等有序数据进行分区。

    CREATE TABLE orders (
    order_id INT,
    order_date DATE,
    customer_id INT,
    amount DECIMAL(10, 2)
    )
    PARTITION BY RANGE (order_date) (
    PARTITION p202401 VALUES LESS THAN ('2024-02-01'),
    PARTITION p202402 VALUES LESS THAN ('2024-03-01'),
    -- 可继续添加更多分区
    );

上述语句中,PARTITION BY RANGE 指明按范围分区,后面括号内是具体的分区定义,每个 PARTITION 子句表示一个分区。

  • (2)创建列表分区表
    列表分区根据某列的具体取值来划分分区,适合数据取值较为固定、明确的场景,比如根据地区、部门等。
    例如,在员工表中,根据员工所在部门进行列表分区,假设公司有销售部、研发部、财务部等,创建语句示例如下:

    CREATE TABLE employees (
    employee_id INT,
    employee_name VARCHAR(100),
    department VARCHAR(50)
    )
    PARTITION BY LIST (department) (
    PARTITION sales VALUES IN ('销售部'),
    PARTITION rnd VALUES IN ('研发部'),
    PARTITION finance VALUES IN ('财务部')
    );

这里 PARTITION BY LIST 表明是列表分区,每个 PARTITION 子句里的 VALUES IN 指定了该分区对应的取值。

  • (3)创建哈希分区表
    哈希分区通过对某列或表达式计算哈希值,依据哈希值均匀地分布数据到各个分区,适用于数据分布需要均匀且无明显分区规则的情况,示例如下:

    -- 创建一个按用户ID进行哈希分区的用户表
    CREATE TABLE users (
    user_id INT,
    user_name VARCHAR(100),
    email VARCHAR(200)
    )
    -- 使用PARTITION BY HASH指定按哈希分区,分区键为user_id
    PARTITION BY HASH (user_id)
    -- PARTITIONS子句指定分区数量为4
    PARTITIONS 4;

PARTITION BY HASH 说明是哈希分区方式,PARTITIONS 后面跟的数字表示创建的分区数量。

1.3 索引类型

(1)支持的索引类型
  • B-Tree 索引:这是最常用的索引类型,适用于等值查询和范围查询。例如,在一个包含用户信息的表中,对 user_id 列创建 B-Tree 索引,能加速根据 user_id 进行的查询操作。

  • 位图索引:适合于低基数列(即列中唯一值较少的情况),比如性别列(通常只有 "男""女" 两个取值 )。位图索引可以提高涉及该列的多条件组合查询的效率。

  • 函数索引:基于函数或表达式创建的索引。当查询中经常使用某个函数或表达式对列进行计算时,创建函数索引可以避免每次查询都重复计算,提升查询性能。例如,在一个存储商品价格的表中,若经常需要查询打八折后的价格,可创建基于价格列乘以 0.8 这个表达式的函数索引。

    -- 创建普通的B-Tree索引
    CREATE INDEX idx_user_name ON users (user_name);

    -- 创建唯一索引
    CREATE UNIQUE INDEX idx_unique_email ON users (email);

    -- 创建位图索引
    CREATE BITMAP INDEX idx_gender ON users (gender);

(2)本地索引和全局索引
  • 本地索引:
    每个分区都有自己独立的索引副本,与分区紧密关联。创建本地索引时,只需要在创建索引语句中正常指定表和列,OceanBase 会自动根据分区表结构为每个分区创建对应的索引副本。
    语法:

    -- 假设orders表是分区表,按order_date进行范围分区
    -- 创建基于order_date列的本地索引(名字:idx_order_date_local)
    CREATE INDEX idx_order_date_local ON orders (order_date);

OceanBase 会为 orders 表的每个分区都创建一个关于 order_date 列的索引

  • 删除某个分区索引

    DROP INDEX idx_order_date_local ON orders;

  • 全局索引:
    独立于分区存在,跨所有分区维护索引信息。创建全局索引时,需要使用 GLOBAL 关键字来明确指定。

    -- 假设orders表是分区表,按order_date进行范围分区
    -- 创建基于customer_id列的全局索引
    CREATE INDEX idx_customer_id_global ON orders (customer_id) GLOBAL;

(3)已有普通表转换为分区表

如果已经存在普通表,也可以通过 ALTER TABLE 语句将其转换为分区表,但这要求表中数据符合转换后的分区规则。例如,要将已有的 orders 表转换为按 order_date 范围分区的表,可以这样操作:

复制代码
-- 假设orders表已有数据且包含order_date列
ALTER TABLE orders 
-- 重新定义表结构,转换为范围分区表
PARTITION BY RANGE (order_date) (
    PARTITION p2023 VALUES LESS THAN ('2024-01-01'), 
    PARTITION p2024 VALUES LESS THAN ('2025-01-01') 
);

1.4 删除索引

(1)删除分区后,分区表上的索引也会删除

(2)删除分区后,建立在分区表上的全局索引会失效,不会删除

  • 删除全局索引并重新创建索引

    -- 1. 删除全局索引,假设全局索引名为 idx_global_prp_claimgather_info(需替换为实际索引名)
    DROP INDEX idx_global_prp_claimgather_info ON prp_claimgather_info;

    -- 2. 删除分区
    ALTER TABLE prp_claimgather_info DROP PARTITION p202412;

    -- 3. 重新创建全局索引
    CREATE INDEX idx_global_prp_claimgather_info ON prp_claimgather_info (column1, column2,...) -- 替换为实际索引列
    GLOBAL;

  • 重建失效索引
    若无需修改索引定义,更高效的方式是直接重建失效的全局索引,而非删除后重建。语法如下:

    ALTER INDEX index_name REBUILD GLOBAL;

可通过以下语句确认索引状态(是否失效):

复制代码
SELECT index_name, status FROM user_indexes WHERE table_name = 'TABLE_NAME';

1.5 单节点、集群部署、租户

  • OceanBase 是蚂蚁集团自主研发的分布式关系型数据库,支持高可用、强一致性,可部署为单节点(测试 / 开发环境常用)或多节点集群(生产环境常用,保证高可用)
  • 一个节点可有多个租户
    含义:在 OceanBase 的单节点部署中,一个物理节点(服务器)可以创建多个 "租户"。:
    租户是 OceanBase 的核心概念,类似传统数据库中的 "实例",是资源隔离的基本单位。每个租户有独立的用户、数据库、表空间等,可分配不同的 CPU、内存、存储资源。
    多租户设计让 OceanBase 能在单一物理节点或集群上为多个业务(或环境)提供隔离的数据库服务,提高资源利用率。

1.6 数据库版本

社区版和企业版(企业版一般会有 Enterprise 字眼)

通过

复制代码
select version()

命令查询到数据库版本为5.7.25-OceanBase-v4.2.1.6,且版本中不含 "Enterprise"(企业版标识),因此判断为社区版;同时说明该 OceanBase 实例兼容 MySQL 5.7.25 协议;

复制代码
ps -ef|grep observer

是用于查看 OceanBase 核心进程 "observer" 是否运行的命令

  • 协议兼容:
    OceanBase 支持兼容 MySQL、Oracle 等主流数据库协议,这里兼容 MySQL 5.7.25 协议意味着可以使用 MySQL 的客户端、JDBC 驱动等工具连接和操作 OceanBase,降低迁移成本。

1.7 java连接oceanbase

java使用mysql jdbc连接OceanBase数据库 用户名:用户名@租户名#集群名

复制代码
java使用mysql jdbc连接OceanBase数据库    用户名:用户名@租户名#集群名
  datasource:
    type: com.alibaba.druid.pool.DruidDataSource
    driver-class-name: com.mysql.cj.jdbc.Driver
    url: jdbc:mysql://10.36.0.85:2883/picc_xwlp?useUnicode=true&characterEncoding=UTF-8&useSSL=false
    username: xwlp_claim@*****6_zh#ob_test_btx_20240416
    password: f7^Kd4%$L    

用户名:xwlp_claim

相关推荐
钊兵2 小时前
mysql时间处理函数和操作笔记
数据库·笔记·mysql
程序员JerrySUN2 小时前
Linux 内核基础统简全解:Kbuild、内存分配和地址映射
java·linux·运维·服务器·嵌入式硬件·缓存·文件系统
掘根2 小时前
【MySQL数据库备份与恢复1】二进制日志,mysqlbinlog
数据库·mysql
编程爱好者熊浪3 小时前
Navicat 远程连接SQLlite数据库
数据库
努力做小白3 小时前
Linux驱动19 --- FFMPEG
linux·运维·驱动开发·单片机·嵌入式硬件·ffmpeg
保护我方hair4 小时前
行业分类表sql
数据库·sql
烙印6015 小时前
MySQL的底层原理--InnoDB记录存储结构
数据库·mysql
范纹杉想快点毕业5 小时前
基于C语言的Zynq SOC FPGA嵌入式裸机设计和开发教程
c语言·开发语言·数据库·嵌入式硬件·qt·fpga开发·嵌入式实时数据库
果子⌂7 小时前
Kubernetes 服务发布进阶
linux·运维·服务器·云原生·容器·kubernetes·云计算
望获linux8 小时前
【Linux基础知识系列】第六十三篇 - 文件编辑器基础:vim
linux·运维·服务器·网络·嵌入式硬件·操作系统·嵌入式软件