技术栈
分区
海南java第二人
8 天前
clickhouse
·
分区
·
分片
ClickHouse Sharding 分片与 Partitioning 分区:区别、联系与生产实践
在 ClickHouse 集群中,“分片”(Sharding)和“分区”(Partitioning)是两个极易混淆的核心概念。很多人误以为分区就是分片,或者认为两者是互斥的——实际上,它们是不同维度、可以协同工作的数据切分策略。本文将系统梳理两者的区别、联系,并通过生产案例展示如何组合使用,帮助你彻底理解并正确应用于实际项目。
Irissgwe
1 个月前
linux
·
分区
·
块
·
inode
·
软硬连接
·
路径缓存
·
ext系列文件
六、Ext系列文件系统(2.核心原理与应用)
• inode内部存在 __le32 i_block[EXT2_N_BLOCKS];/* Pointers to blocks */ , EXT2_N_BLOCKS =15,就是用来进行inode和block映射的
七夜zippoe
1 个月前
数据库
·
策略
·
分区
·
range
·
dolphindb
# DolphinDB分区策略:RANGE分区详解
本文深入讲解DolphinDB RANGE分区策略。从RANGE分区原理到设计方法,从时间范围分区到数值范围分区,从动态分区到分区管理,全面介绍RANGE分区的应用场景和优化技巧。通过丰富的代码示例,帮助读者掌握RANGE分区设计和管理的核心技能。
七夜zippoe
1 个月前
数据库
·
oracle
·
分区
·
value
·
dolphindb
DolphinDB分区策略:VALUE分区详解
本文深入讲解DolphinDB VALUE分区策略。从VALUE分区原理到设计方法,从单列分区到多列分区,从分区管理到最佳实践,全面介绍VALUE分区的应用场景和优化技巧。通过丰富的代码示例,帮助读者掌握VALUE分区设计和管理的核心技能。
遇见火星
5 个月前
linux
·
运维
·
网络
·
分区
·
parted
在Linux中使用parted对大容量磁盘进行分区详细过程
在Linux系统中,当需要对大于2TB的磁盘进行分区时,传统的MBR(Master Boot Record)分区表已无法满足需求,必须使用GPT(GUID Partition Table)分区表。parted是一个功能强大的磁盘分区工具,完全支持GPT分区表,特别适合处理大容量磁盘。
一路向北
5 个月前
mysql
·
分区
·
分表
·
表分区
MySQL 5.7 表分区使用说明(视频系统实战)
什么是表分区(Partitioning)核心作用与索引的关系(关键点)适用场景:按时间区间或数值区间做冷热数据拆分,例如视频订单、充值记录按日期分区。
小马爱打代码
5 个月前
kafka
·
分区
Kafka:为什么分区是高并发的关键?
在 Kafka 的核心架构中,分区(Partition) 是一个绕不开的关键词。无论是作为 Java 后端开发者,还是在面试中被问到 Kafka 的高并发原理,我们都需要搞懂:分区到底是什么?它是如何支撑 Kafka 百万级消息吞吐的?
梁萌
6 个月前
数据库
·
mysql
·
优化
·
分区表
·
分区
·
partitions
MySQL分区表使用保姆级教程
分区表就是把一张表的数据,按照设置好的条件,单独存储在磁盘的不同位置,也就是不同分区的数据是独立的,互不影响的。
波波仔86
6 个月前
clickhouse
·
排序
·
分区
clickhouse存储和分区
在 ClickHouse 中,排序(ORDER BY) 和 分区(PARTITION BY) 是 MergeTree 系列引擎(核心存储引擎)的两大核心配置,直接决定了数据的物理存储结构、查询性能和数据管理效率。以下从定义、作用、原理、最佳实践四个维度,通俗解释这两个概念的本质和价值:
无心水
7 个月前
分布式
·
kafka
·
topic
·
isr
·
broker
·
分区
·
生产者消费者模式java实现
【分布式利器:Kafka】1、Kafka 入门:Broker、Topic、分区 3 张图讲透(附实操命令)
刚接触 Kafka 的开发者,是不是一看到 Broker、Topic、分区就头大? 明明每个词都认识,放一起却搞不清谁负责存储、谁负责分类、谁负责并行处理? 其实不用死记硬背,3 张可视化图示 + 通俗比喻 + 可直接复制的实操命令,5 分钟就能彻底搞懂,入门 Kafka 第一步再也不踩坑!
Molesidy
1 年前
linux
·
ubuntu
·
分区
【Ubuntu】Ubuntu的分区深入详解以及制定最佳分区分配策略
对于该文章仅适用于个人Linux电脑,笔者暂时没有深入研究运维方面的服务器Ubuntu系统安装和分区配置,有待后续更新。
SimpleForest
1 年前
linux
·
ubuntu
·
分区
ubuntu 系统分区注意事项
ubuntu 系统分区大小,注意事项:安装ubuntu系统时,需要进行分区,手动分区时,有一点需要注意。一开始我也没有注意,长时间使用后才发现的问题。
IT成长日记
1 年前
数据仓库
·
hive
·
hadoop
·
分区
·
分桶
【Hive入门】Hive分区与分桶深度解析:优化查询性能的关键技术
特性分区分桶数据组织方式按列值划分目录按哈希值划分文件适用场景高基数列低基数列性能影响避免全表扫描优化JOIN和采样效率
百锦再
1 年前
数据库
·
oracle
·
性能优化
·
并发
·
索引
·
分区
Oracle数据库性能优化全攻略:十大关键方向深度解析与实践指南
在当今数据驱动的时代,数据库的性能优化成为了确保企业应用高效运行的关键。Oracle作为业界领先的关系数据库管理系统,其性能优化尤为重要。本文将详细探讨Oracle优化的十大方向,包括SQL查询优化、索引优化、内存管理、I/O优化、分区表与分区索引、并行处理、统计信息管理、锁与并发控制、数据库参数调优以及应用设计优化。每个方向都将通过代码示例、原理描述和步骤详解进行深入分析,旨在为数据库管理员和开发人员提供全面的优化指南。
予早
1 年前
mysql
·
分区
MySQL 分区
https://dev.mysql.com/doc/refman/9.2/en/partitioning.html https://www.cnblogs.com/chenmh/p/5644496.html https://kimi.moonshot.cn/share/cuj182051tqdt9c6uu4g
BabyFish13
1 年前
数据仓库
·
hive
·
hadoop
·
分区
·
分桶
Hive分区再分桶表
在Hive中,数据通常是根据分区(partition)来组织的,但是对于大数据集,单层分区可能不够用,因此可以进一步细分为桶(bucket)。桶可以用于提供额外的并行处理和优化查询性能。 在这种情况下,数据首先根据分区键进行分区,然后在每个分区内进行分桶。
OceanBase数据库官方博客
1 年前
oceanbase
·
分布式数据库
·
分区
解析在OceanBase创建分区的常见问题|OceanBase 用户问题精粹
在《分区策略和管理分区计划的实践方案》这篇文章中,我们介绍了在ODC中制定分区策略及有效管理分区计划的经验。有不少用户在该帖下提出了使用中的问题,其中一个关于创建分区的限制条件的问题,也是很多用户遭遇的老问题。因此本文以其为切入,将创建分区的几个问题进行解析,与大家共同探讨分享。
PersistJiao
2 年前
大数据
·
分布式
·
spark
·
分区
·
shuffle
Spark RDD 中的 repartition 和 coalesce 是两种常用的分区调整算子的异同点
repartition 是通过调用 coalesce 并设置 shuffle = true 实现的,源码位于 RDD.scala:
笔头子
2 年前
linux
·
运维
·
服务器
·
分区
【linux】fdisk磁盘分区管理
fdisk是一个磁盘分区管理工具,可以用来创建、删除、修改和查看磁盘分区。fdisk一般都是交互式使用,基础语法: fdisk /dev/sdd。进入交互窗口后,有一些选项,需要了解下:
Jack_hrx
2 年前
分布式
·
kafka
·
分区
·
消息顺序
·
全局顺序
Kafka 如何保证消息顺序及其实现示例
Kafka 保证消息顺序的机制主要依赖于分区(Partition)的概念。在 Kafka 中,消息的顺序保证是以分区为单位的。下面是 Kafka 如何保证消息顺序的详细解释: