MYSQL系列-分库分表(三):Sharding-JDBC实现分库分表落地实践-上

系列文档参考 MYSQL系列-整体架构介绍

前文已经实践基于Spring动态数据源的分库分表,本文主要落地基于Sharding-JDBC MYSQL系列-分库分表(二):Spring动态数据源实现分库分表落地实践-上

原始需求

原始需求同前文 需要实现功能如下:

  1. 业务表point_balance1基于UID进行分库分表
  2. 配置表param_config默认走point_shard1库,不进行分库分表
  3. 支持读写分离,并且某些不能有主从延迟的SQL强制走写库查询
  4. 支持影子库
  5. 针对海外某些国家,数据量较少,业务表也不进行分库分表处理(高阶功能)

Sharding-JDBC介绍

Apache ShardingSphere 是一款分布式的数据库生态系统, 可以将任意数据库转换为分布式数据库,并通过数据分片、弹性伸缩、加密等能力对原有数据库进行增强。

Apache ShardingSphere 设计哲学为 Database Plus,旨在构建异构数据库上层的标准和生态。 它关注如何充分合理地利用数据库的计算和存储能力,而并非实现一个全新的数据库。 它站在数据库的上层视角,关注它们之间的协作多于数据库自身。

本文基于最新版本5.4.0进行实践,其他详细信息参考官网文档介绍

ShardingSphere-JDBC 介绍

ShardingSphere-JDBC 定位为轻量级 Java 框架,在 Java 的 JDBC 层提供的额外服务。 它使用客户端直连数据库,以 jar 包形式提供服务,无需额外部署和依赖,可理解为增强版的 JDBC 驱动,完全兼容 JDBC 和各种 ORM 框架。

  • 适用于任何基于 JDBC 的 ORM 框架,如:JPA, Hibernate, Mybatis, Spring JDBC Template 或直接使用 JDBC;
  • 支持任何第三方的数据库连接池,如:DBCP, C3P0, BoneCP, HikariCP 等;
  • 支持任意实现 JDBC 规范的数据库,目前支持 MySQL,PostgreSQL,Oracle,SQLServer 以及任何可使用 JDBC 访问的数据库。

与ShardingSphere-Proxy对比如下:

ShardingSphere-JDBC ShardingSphere-Proxy
数据库 任意 MySQL/PostgreSQL
连接消耗数 高 低
异构语言 仅 Java 任意
性能 损耗低 损耗略高
无中心化 是 否
静态入口 无 有

ShardingSphere-Proxy类似与MYCAT,需要独立部署,详细参考官网

生态以及线路规划如下

设计思路

基于Spring boot + mybatics + druid + sharding-jdbc,支持读写分离,支持全链路压测 本次sharding-jdbc配置采用yaml配置

详细设计

未完待下文

相关推荐
Thanks_ks28 分钟前
常见 HTTP 状态码的坑:301/302、401/403、500/502 之间差的那一个词
计算机网络·nginx·http·面试·状态码·后端开发·浏览器缓存
怕浪猫29 分钟前
Super-agent 在各大模型厂商的应用情况
算法·面试·github
小蒜学长44 分钟前
编程语言在线学习平台的设计与实现(代码+数据库+LW)
java·spring boot·后端·编程语言在线学习平台·在线编码
李纲明1 小时前
WordPress 报建立数据库连接时出错:先核 wp-config 四元组,再查 MySQL 服务与表修复
运维·数据库·mysql·wordpress·排障·devdiy
2401_881828322 小时前
MySQL操作命令
android·mysql·adb
鸢尾掠地平2 小时前
MySQL之DML(含例子)
数据库·mysql
zhoujungis2 小时前
登录态 1 小时就掉?Django + Vue 双 Token 认证实战 | 尘世栈帧
后端
香蕉大香蕉(06敬畏市场)2 小时前
MySQL 单点详解(06)
java·数据库·mysql·博客·实习
CodeHackerBhx2 小时前
MySQL 迁达梦踩坑实录:FIND_IN_SET、timestamp(6) 和一整批要改的函数
数据库·mysql·达梦·信创·数据库迁移
滼2 小时前
AI 数据安全面试应答框架:从大框架到小点
大数据·人工智能·安全·面试·安全架构