技术栈
分区
小马爱打代码
3 天前
kafka
·
分区
Kafka:为什么分区是高并发的关键?
在 Kafka 的核心架构中,分区(Partition) 是一个绕不开的关键词。无论是作为 Java 后端开发者,还是在面试中被问到 Kafka 的高并发原理,我们都需要搞懂:分区到底是什么?它是如何支撑 Kafka 百万级消息吞吐的?
梁萌
1 个月前
数据库
·
mysql
·
优化
·
分区表
·
分区
·
partitions
MySQL分区表使用保姆级教程
分区表就是把一张表的数据,按照设置好的条件,单独存储在磁盘的不同位置,也就是不同分区的数据是独立的,互不影响的。
波波仔86
1 个月前
clickhouse
·
排序
·
分区
clickhouse存储和分区
在 ClickHouse 中,排序(ORDER BY) 和 分区(PARTITION BY) 是 MergeTree 系列引擎(核心存储引擎)的两大核心配置,直接决定了数据的物理存储结构、查询性能和数据管理效率。以下从定义、作用、原理、最佳实践四个维度,通俗解释这两个概念的本质和价值:
无心水
2 个月前
分布式
·
kafka
·
topic
·
isr
·
broker
·
分区
·
生产者消费者模式java实现
【分布式利器:Kafka】1、Kafka 入门:Broker、Topic、分区 3 张图讲透(附实操命令)
刚接触 Kafka 的开发者,是不是一看到 Broker、Topic、分区就头大? 明明每个词都认识,放一起却搞不清谁负责存储、谁负责分类、谁负责并行处理? 其实不用死记硬背,3 张可视化图示 + 通俗比喻 + 可直接复制的实操命令,5 分钟就能彻底搞懂,入门 Kafka 第一步再也不踩坑!
Molesidy
6 个月前
linux
·
ubuntu
·
分区
【Ubuntu】Ubuntu的分区深入详解以及制定最佳分区分配策略
对于该文章仅适用于个人Linux电脑,笔者暂时没有深入研究运维方面的服务器Ubuntu系统安装和分区配置,有待后续更新。
SimpleForest
7 个月前
linux
·
ubuntu
·
分区
ubuntu 系统分区注意事项
ubuntu 系统分区大小,注意事项:安装ubuntu系统时,需要进行分区,手动分区时,有一点需要注意。一开始我也没有注意,长时间使用后才发现的问题。
IT成长日记
9 个月前
数据仓库
·
hive
·
hadoop
·
分区
·
分桶
【Hive入门】Hive分区与分桶深度解析:优化查询性能的关键技术
特性分区分桶数据组织方式按列值划分目录按哈希值划分文件适用场景高基数列低基数列性能影响避免全表扫描优化JOIN和采样效率
百锦再
10 个月前
数据库
·
oracle
·
性能优化
·
并发
·
索引
·
分区
Oracle数据库性能优化全攻略:十大关键方向深度解析与实践指南
在当今数据驱动的时代,数据库的性能优化成为了确保企业应用高效运行的关键。Oracle作为业界领先的关系数据库管理系统,其性能优化尤为重要。本文将详细探讨Oracle优化的十大方向,包括SQL查询优化、索引优化、内存管理、I/O优化、分区表与分区索引、并行处理、统计信息管理、锁与并发控制、数据库参数调优以及应用设计优化。每个方向都将通过代码示例、原理描述和步骤详解进行深入分析,旨在为数据库管理员和开发人员提供全面的优化指南。
予早
1 年前
mysql
·
分区
MySQL 分区
https://dev.mysql.com/doc/refman/9.2/en/partitioning.html https://www.cnblogs.com/chenmh/p/5644496.html https://kimi.moonshot.cn/share/cuj182051tqdt9c6uu4g
BabyFish13
1 年前
数据仓库
·
hive
·
hadoop
·
分区
·
分桶
Hive分区再分桶表
在Hive中,数据通常是根据分区(partition)来组织的,但是对于大数据集,单层分区可能不够用,因此可以进一步细分为桶(bucket)。桶可以用于提供额外的并行处理和优化查询性能。 在这种情况下,数据首先根据分区键进行分区,然后在每个分区内进行分桶。
OceanBase数据库官方博客
1 年前
oceanbase
·
分布式数据库
·
分区
解析在OceanBase创建分区的常见问题|OceanBase 用户问题精粹
在《分区策略和管理分区计划的实践方案》这篇文章中,我们介绍了在ODC中制定分区策略及有效管理分区计划的经验。有不少用户在该帖下提出了使用中的问题,其中一个关于创建分区的限制条件的问题,也是很多用户遭遇的老问题。因此本文以其为切入,将创建分区的几个问题进行解析,与大家共同探讨分享。
PersistJiao
1 年前
大数据
·
分布式
·
spark
·
分区
·
shuffle
Spark RDD 中的 repartition 和 coalesce 是两种常用的分区调整算子的异同点
repartition 是通过调用 coalesce 并设置 shuffle = true 实现的,源码位于 RDD.scala:
笔头子
1 年前
linux
·
运维
·
服务器
·
分区
【linux】fdisk磁盘分区管理
fdisk是一个磁盘分区管理工具,可以用来创建、删除、修改和查看磁盘分区。fdisk一般都是交互式使用,基础语法: fdisk /dev/sdd。进入交互窗口后,有一些选项,需要了解下:
Jack_hrx
2 年前
分布式
·
kafka
·
分区
·
消息顺序
·
全局顺序
Kafka 如何保证消息顺序及其实现示例
Kafka 保证消息顺序的机制主要依赖于分区(Partition)的概念。在 Kafka 中,消息的顺序保证是以分区为单位的。下面是 Kafka 如何保证消息顺序的详细解释:
Xyu_a
2 年前
macos
·
移动硬盘
·
分区
Mac | Mac 移动硬盘无法分区问题
电脑配置:MacBook Pro M1,系统 SonomaMac 系统新升级了 Sonoma,结果出现各种问题。外接屏幕居然不能旋转 90 °,查了一下是Sonoma系统导致的,以及莫名发热的问题。想着要么回退一下系统算了,于是网上买了移动硬盘,想着先备份下以防万一。
Neo Yang
2 年前
分布式
·
kafka
·
分区
Kafka应用Demo:指派分区订阅消息消费
Kafka环境搭建和生产者样例代码与《Kafka应用Demo:按主题订阅消费消息》相同。样例代码中的consumer.assign(partitionList)绑定了主题下的0号分区和1号分区接收消息。指派分区的方式和按主题订阅的方式不能混用,也就是说一个消费者实例只能选择一种方式订阅。
Neo Yang
2 年前
分布式
·
kafka
·
分区
Kafka应用Demo:生产者自定义消息分区方法
没有设置消息键时Kafka默认的分区算法是轮循,设置了消息键将按消息键的hashcode计算分区值。这种方法可以保证未设置消息键时各分区负载均衡。也可以保证设置消息键后的消息放到同一个分区发送,以保证消息按顺序消费。
Damon小智
2 年前
linux
·
运维
·
vmware
·
磁盘
·
rhel
·
分区
VMware安装RHEL-磁盘划分和分区
本文探讨了在VMware虚拟机上安装RHEL时遇到的磁盘划分和分区问题。文章详细介绍了磁盘划分过程中可能出现的问题,特别是在选择磁盘类型时可能导致找不到磁盘的情况。通过清晰的步骤和解决方法,读者可以更好地理解如何正确进行磁盘划分以及如何解决磁盘无法被识别的错误。这对于在VMware环境下顺利安装RHEL系统提供了实用的指导。
最笨的羊羊
2 年前
iceberg
·
分区
·
从入门到精通系列之十九
Iceberg从入门到精通系列之十九:分区
分区是一种通过在写入时将相似的行分组在一起来加快查询速度的方法。例如,从日志表中查询日志条目通常会包含一个时间范围,就像针对上午 10 点到 12 点之间的日志的查询一样:
鹏大师运维
2 年前
数据库
·
gpt
·
操作系统
·
分区
·
统信uos
·
parted
·
麒麟kylinos
统信UOS_麒麟KYLINOS上创建GPT分区
原文链接:统信UOS/麒麟KYLINOS上创建GPT分区 hello,大家好啊!今天我要给大家带来的是在统信UOS及麒麟KYLINOS操作系统上创建GPT(GUID Partition Table)分区的教程。在现代计算机系统中,GPT分区表因其高效和灵活性而越来越受欢迎,它支持的磁盘大小和分区数量远超传统的MBR(Master Boot Record)分区表。本文将指导您如何在这两个操作系统上创建GPT分区,操作相对简单。