数据库架构

一叶飘零_sweeeet1 天前
java·数据库·mysql·数据库架构·分库分表
从 0 到 1 攻克订单表分表分库:亿级流量下的数据库架构实战指南想象一下,你负责的电商平台在经历了几个双十一后,订单系统开始频繁出现问题:数据库查询越来越慢,甚至在高峰期出现超时;运维团队每天都在抱怨数据库服务器负载过高;营销部门的数据分析报告总是延迟,因为全表扫描需要数小时。
半夏陌离2 天前
大数据·数据库·sql·mysql·oracle·数据库架构
SQL 拓展指南:不同数据库差异对比(MySQL/Oracle/SQL Server 基础区别)在学习 SQL 的过程中,你可能会发现:同样的 “建表语句” 在 MySQL 能运行,在 Oracle 却报错;“分页查询” 的写法在 SQL Server 和 MySQL 完全不同。这是因为 MySQL、Oracle、SQL Server 是三大主流关系型数据库,虽都支持标准 SQL,但在 “基础特性、语法细节、适用场景” 上存在明显差异。今天我们从学习和实操的角度,拆解三者的核心区别,帮你避免 “跨库踩坑”。
TSINGSEE6 天前
mysql·音视频·实时音视频·数据库架构·视频编解码
数据库选择有讲究?SQLite、PostgreSQL还是MySQL?不同规模的项目,数据库选择有讲究。大家好,我是技术支持彼得,每天两眼一睁就是为客户解决问题。在日常使用我们的视频平台时,很多用户会问到数据库选择的问题。今天就来详细说说EasyGBS、EasyNVR和EasyCVR三大平台该如何选择数据库。
小云数据库服务专线7 天前
数据库·数据库架构·gaussdb
GaussDB 数据库架构师修炼(十九)-性能调优-长事务分析长事务在数据库的表现是session持续时间长,期间可能伴随CPU、内存升高,严重可导致数据库整体响应 缓慢,业务无法正常运行,所以在业务系统中应该尽量避免长事务的发生。
lypzcgf10 天前
人工智能·后端·系统架构·开源·go·数据库架构·安全架构
Coze源码分析-API授权-添加新令牌-后端源码本文将深入分析Coze Studio项目中API授权添加新令牌功能的后端实现,通过源码解读来理解整个Personal Access Token (PAT) 添加新令牌功能的架构设计和技术实现。API授权添加新令牌功能作为用户权限管理系统的重要组成部分,主要负责安全地添加新令牌,确保用户能够有效管理自己的API访问权限。
小云数据库服务专线12 天前
sql·数据库架构·gaussdb
GaussDB 数据库架构师修炼(十八) SQL执行引擎-概述执行引擎一般负责查询的执行。 执行引擎在SQL执行栈中接受优化器生成的执行计划Plan, 并通过存储引擎提供的数据读写接口, 实现对数据进行计算得到查询结果集。
小云数据库服务专线15 天前
数据库·数据库架构·gaussdb
GaussDB 数据库架构师修炼(十八) SQL引擎-计划管理-SPM由于业务数据的变化或者数据库版本的升级,可能导致SQL的执行计划发生变化,这种变化不一定是正收益,这时需 要一个防止计划劣化的机制。该机制需适用于版本升级时固化计划防止计划跳变等场景。
小云数据库服务专线17 天前
数据库·数据库架构·gaussdb
GaussDB 数据库架构师修炼(十八) SQL引擎-分布式计划1)计划生成主要是查询的路径树到计划树结构转换的过程, 在分布式场景下对关联join、聚集操作Agg有特殊的生成逻辑
小云数据库服务专线19 天前
架构·数据库架构
谈谈架构的内容架构是一个界定不清的东西,我们很难讲清楚哪些东西是架构,哪些东西不是架构。但软件行业里其实人人都在搞架构,软件设计就是架构本身。
小云数据库服务专线22 天前
安全·数据库架构·gaussdb
GaussDB 数据库架构师修炼(十三)安全管理(5)-动态数据脱敏数据隐私保护是数据库安全所需要具备的安全能力之一, 可以在一定程度上限制非授权用户对隐私数据的访问,保证隐私数据安全。
小云数据库服务专线23 天前
数据库·数据库架构·gaussdb
GaussDB数据库架构师修炼(十六) 如何选择磁盘在数据库系统的性能瓶颈中,磁盘IO是最常见且最容易被忽略的因素之一。随着应用对高并发和低延迟的要求日益提高,了解磁盘性能、IOPS概念及其优化手段,已经成为数据库架构设计中的关键课题。本文将系统梳理磁盘类型、IOPS含义、RAID技术、SSD与HDD对比,并结合数据库实际应用给出选型建议。
小云数据库服务专线23 天前
安全·数据库架构·gaussdb
GaussDB 数据库架构师修炼(十三)安全管理(5)-全密态数据库1)根据加密位置不同,可将加密方案分为如下3种: 驱动内加密:全密态特性 执行模块加密:加解密函数 存储模块加密:透明加密特性
喂完待续24 天前
大数据·数据仓库·分布式·架构·apache·数据库架构
Apache Hudi:数据湖的实时革命Apache Hudi是一个开源的数据湖存储格式和框架,它通过引入类似数据库的事务机制,解决了传统数据湖在实时更新、低延迟查询和增量消费方面的痛点。Hudi最初由Uber于2016年开发并应用于生产环境,2017年开源,2019年成为Apache孵化项目,2021年正式毕业为Apache顶级项目。作为数据湖领域的创新者,Hudi的核心价值在于实现了PB级数据湖上的低延迟ACID事务,使数据湖具备了接近数据库的实时性 ,同时保持了数据湖的灵活性和成本优势。
小蜗的房子1 个月前
linux·运维·服务器·数据库·sql·oracle·数据库架构
Red Hat Enterprise Linux 7.9安装Oracle 11.2.0.4单实例数据库-图文详解需提前配置好网络并上传安装包及系统镜像到/soft目录下Linux7 安装 Oracle 11GR2 版本,oracle 软件安装过程中报错:ins_emagent.mk,
小云数据库服务专线1 个月前
数据库·数据库架构·gaussdb
GaussDB SQL执行计划详解SQL执行计划是GaussDB性能分析及调优的核心,它输出三个关键信息:GaussDB SQL语句执行计划是数据库为运行SQL语句而执行的操作步骤序列。它显示了数据库如何访问数据,包括表的扫描方式、索引的使用、连接方法等。通过执行计划,我们可以了解SQL语句引用表的顺序、SQL语句中每个表的访问方法、针对SQL语句中连接操作相关表的连接方法,where条件过滤、order排序及count聚合等操作,从而找到性能瓶颈并进行优化。
啊森要自信1 个月前
android·数据库·sql·mysql·adb·数据库架构
【MySQL 数据库】MySQL索引特性(二)页目录&&(B和B+树)&&(非)聚簇索引 && 索引操作注意,我们并没有按照主键的大小顺序插入哦为何MySQL和磁盘进行IO交互的时候,要采用Page的方案进行交互呢?用多少,加载多少不香吗?
蚂蚁数据AntData1 个月前
大数据·开源·全文检索·数据库架构
DB-GPT 0.7.3 版本更新:支持Qwen3 Embedding和Reranker模型、支持知识库自定义检索策略等🍀 支持Qwen3 Embedding和Reranker模型🍀 支持知识库自定义检索策略:语义检索、全文检索、树形检索、混合检索等
数据要素X1 个月前
大数据·数据库·数据仓库·架构·数据库架构
【数据架构08】数字化转型架构篇✅ 11张高质量《数字化架构图》无论你是数据架构师、治理专家,还是数字化转型负责人,这份资料库都能为你提供体系化参考,高效解决“架构设计难、流程不清、平台搭建慢”的痛点!
小云数据库服务专线1 个月前
数据库·数据库架构·gaussdb
GaussDB 数据库架构师(八) 等待事件概述-1等待事件:指当数据库会话(session)因资源竞争或依赖无法继续执行时,进入"等待"状态,此时产生的性能事件即等待事件。
小云数据库服务专线2 个月前
安全·数据库架构·gaussdb
GaussDB 数据库架构师修炼(七) 安全规划2) 采用SQL审核工具(比如华为云UGO工具)防范风险SQL,包括不满足DBA预定义的规范、存在性能风险、存在误删风险等SQL 。