数据库架构

codebat_raymond2 天前
数据仓库·数据库架构
Delta Lake 解析:架构、数据处理流程与最佳实践Delta Lake 是一个基于 Apache Spark 的开源存储层,主要解决传统数据湖(Data Lake)缺乏 ACID 事务、数据一致性和性能优化的问题,使大数据处理更加可靠、高效。从本质上讲,它让数据湖具备了数据仓库的结构化管理能力,同时保留了数据湖的灵活性。
Gauss松鼠会3 天前
数据库·分布式·sql·数据库架构·gaussdb
GaussDB构建高性能Schema:分布式数据库架构设计与实战在金融、电信等高并发场景下,GaussDB作为国产分布式数据库的核心组件,其Schema设计直接影响数据治理效率、查询性能和资源利用率。本文基于GaussDB 特性,深入解析Database与Schema的协同设计方法,通过5大行业场景的实战案例,揭示分布式环境下Schema设计的黄金法则,并结合智能索引、资源隔离等高级特性,构建企业级数据架构的完整解决方案。
随缘而动,随遇而安5 天前
大数据·数据库·数据仓库·数据库开发·数据库架构
第二十九篇 数据仓库与商务智能:技术演进与前沿趋势深度解析声明:文章内容仅供参考,需仔细甄别。文中技术名称属相关方商标,仅作技术描述;代码示例为交流学习用途,部分参考开源文档(Apache 2.0/GPLv3);案例数据已脱敏,技术推荐保持中立;法规解读仅供参考,请以《网络安全法》《数据安全法》官方解释为准。
dushky7 天前
nosql数据库·nosql·数据库架构
主流NoSQL数据库类型及选型分析在数据库领域,不同类型的数据库针对不同场景设计,以下是四类主流NoSQL数据库的对比分析:一、核心特性对比
随缘而动,随遇而安7 天前
大数据·数据仓库·sql·数据库架构
第二十七篇 数据仓库与维度建模指南:从理论到实战的进阶之路声明:文章内容仅供参考,需仔细甄别。文中技术名称属相关方商标,仅作技术描述;代码示例为交流学习用途,部分参考开源文档(Apache 2.0/GPLv3);案例数据已脱敏,技术推荐保持中立;法规解读仅供参考,请以《网络安全法》《数据安全法》官方解释为准。
uesowys8 天前
mysql·腾讯云·数据库架构
腾讯云MySQL数据库架构分析与使用场景TDSQL-C MySQL 版(TDSQL-C for MySQL)是腾讯云自研的新一代云原生关系型数据库。融合了传统数据库、云计算与新硬件技术的优势,为用户提供具备高弹性、高性能、海量存储、安全可靠的数据库服务。TDSQL-C MySQL 版100%兼容 MySQL 5.7、8.0。实现超百万级 QPS 的高吞吐,最高 PB 级智能存储,保障数据安全可靠。
weixin_3077791314 天前
云原生·数据库架构·azure
Azure云生态系统详解:核心服务、混合架构与云原生概念通过结合核心服务的可靠性、混合架构的灵活性及云原生的弹性,Azure提供了适应多样化需求的完整数据解决方案。
snpgroupcn17 天前
运维·安全·数据库架构
ECC升级到S/4 HANA的功能差异 物料、采购、库存管理对比指南ECC升级到S/4 HANA后,S4 将数据库更换为HANA后性能有一定提升,对于自开发程序,可以同时将计算和部分业务逻辑下推到HANA数据库层,减少应用层和数据库层的交互次数和数据传输,只返回需要的结果到应用层和显示层。提升自开发报表的运行效率。表结构和功能做了重构,底层代码基于HANA数据进行了重写;开发层面有较大变化,很多程序在ECC升级到S/4 HANA后需要调整后才能使用;
存内计算开发者17 天前
数据结构·macos·深度优先·边缘计算·数据库架构·剪枝·迭代加深
VLSI 2024论文详解:具有紧凑型MAC-SIMD和自适应竖式加法数据流的1T1C DRAM存内计算加速器Dyamond本文将要介绍的文献题目为《Dyamond: A 1T1C DRAM In-memory Computing Accelerator with Compact MAC-SIMD and Adaptive Column Addition Dataflow》,下面将从文章基本信息、具体内容解析和总结与思考三个方面进行论文详解。
pitt199719 天前
数据库·数据库架构·高可用·物理复制·postgresql流复制
PostgreSQL10 物理流复制实战:构建高可用数据库架构!PostgreSQL 10 在高可用架构中提供了物理复制,也称为流复制(Streaming Replication),用于实现实例级别的数据同步。PostgreSQL 复制机制主要包括物理复制和逻辑复制:物理复制依赖 WAL 日志进行物理块级别的同步,能够保证备库与主库的数据完全一致,适用于高可用、读写分离、灾备切换等场景。相比之下,逻辑复制则更灵活,支持表级数据同步。在高并发业务中,物理复制因其高效、低延迟的特性,广泛用于保障数据库的高可用性。
与光同尘 大道至简21 天前
java·大数据·python·docker·云原生·eureka·数据库架构
Docker 深度解析:适合零基础用户的详解此博客涵盖 Docker 的基本概念和作用、架构和核心组件、与传统虚拟机的对比、安装与基本操作,以及在实际开发和运维中的应用场景。
snpgroupcn24 天前
运维·安全·数据库架构
企业并购中SAP系统的三大数据转型挑战以及来如何应对?在本文中,SNP将深入探讨并购中的三大数据挑战,并向您展示SNP如何帮助企业放心、轻松地进行并购。并购带来了机会,但也带来了一些严重的数据挑战。从不同步的系统到保护宝贵的历史数据,这些障碍可能会让人感到棘手。通过一些聪明的策略和正确的工具,可以让企业更轻松地过渡。
Albert Tan1 个月前
oracle·中间件·数据库架构
Oracle Fusion Middleware 12C安装 - 呆瓜式Oracle Fusion Middleware 简称 FMW,其涵盖Java EE、开发工具、集成服务、商业智能、协作和内容管理等。它用于SOA(面向服务的架构)的开发、部署和管理,并支持与第三方系统如IBM、Microsoft、SAP、EBS等集成。
️○-1 个月前
java·数据库·后端·数据库架构
后端之JPA(EntityGraph+JsonView)不同表之间的级联操作或者说关联查询是很多业务场景都会用到的。对于这种需求最朴素的方法自然是手动写关联表,然后对被关联的表也是手动插入数据。但是手写容易最后写成一堆shit代码,而且修改起来也是非常麻烦的。
王百万_1 个月前
大数据·数据库·clickhouse·数据治理·数据库架构
【ClickHouse 特性及应用场景】传统数据库在数据大小比较小,索引大小适合内存,数据缓存命中率足够高的情形下能正常提供服务。但残酷的是,这种理想情形最终会随着业务的增长走到尽头,查询会变得越来越慢。你可能通过增加更多的内存,订购更快的磁盘等等来解决问题(纵向扩展),但这只是拖延解决本质问题。如果你的需求是解决怎样快速查询出结果,那么ClickHouse也许可以解决你的问题。
你好,生活!1 个月前
大数据·数据仓库·数据库架构·etl·etl工程师
第四篇:指标血缘与数据治理——构建可信数据链路的终极法则某跨国银行因无法证明客户信用评分的数据来源,被欧盟罚款2300万欧元。这场"数据问责风暴"揭示:在《通用数据保护条例》(GDPR)时代,企业必须建立端到端可信数据链路。本文将深入解析如何通过指标血缘与治理体系,让每个数据指标都具备"司法级"可追溯性。
kiwixing2 个月前
数据库·database·达梦·数据库架构
DM达梦启用及收集AWR报告SF_CHECK_AWR_SYS 返回值0:未启用;1:已启用用户在使用 DBMS_WORKLOAD_REPOSITORY 包之前,需要提前调用系统过程 SP_INIT_AWR_SYS(1)创建包。DM 数据库在创建该包时,默认创建一个名为 SYSAUX 的表空间,对应的数据文件为 SYSAWR.DBF,该表空间用于存储该包生成快照的数据。如果该包被删除,那么 SYSAUX 表空间也对应地被删除。
Alluxio2 个月前
大数据·人工智能·缓存·系统架构·数据库架构·idc·中国联通
Alluxio数据流转方案在联通智网的应用分享嘉宾陈得泳 - 中国联通大数据平台 SRE 工程师,致力于基于开源生态构建稳定、高效、安全、低成本的大数据集群。
Ultipa2 个月前
数据库·分布式·数据库架构·图数据库·图计算
图数据库 | 18、高可用分布式设计(中)上文我们聊了在设计高性能、高可用图数据库的时候,从单实例、单节点出发,一般有3种架构演进选项:主备高可用,今天我们具体讲讲分布式共识,以及大规模水平分布式。
柚几哥哥2 个月前
spring boot·后端·clickhouse·架构·数据库架构
SpringBoot多数据源架构实现在现代的应用程序开发中,使用多个数据源已经成为一种常见的需求。例如,我们可能需要在同一个应用中使用MySQL作为主数据库,同时使用ClickHouse来处理大量的分析数据。本文将介绍如何使用Spring Boot 3.x、MyBatis-Plus、MySQL 8.0和ClickHouse 24,结合dynamic-datasource-spring-boot-starter实现多数据源配置。