分布式

Little Tomato42 分钟前
jvm·分布式
深入浅出高并发:从 JVM 锁竞争到分布式事务的性能博弈高并发系统设计就像一场无声的战争——每个请求都是一颗子弹,而锁和事务则是拦截子弹的防弹衣。防弹衣太厚,性能会慢如蜗牛;太薄,数据又会千疮百孔。从单机 JVM 内的锁竞争,到跨服务的分布式事务,性能博弈贯穿了系统架构的每一个角落。
zshs0001 小时前
数据库·分布式·mysql
从 Raft 到 MySQL:我是怎么推导出半同步复制原理的熟悉我的朋友都知道,我从去年 9 月开始就对分布式系统比较沉迷,被那些协议的设计思想深深吸引。最近偶然看到一个知识盲区:MySQL 主从复制。看到三种复制方式:同步复制、异步复制、半同步复制。
凯瑟琳.奥古斯特2 小时前
开发语言·分布式·职场和发展
页面置换算法详解与对比页面置换算法是请求分页存储管理系统的核心组件,用于在物理内存(页框)已满且发生缺页中断时,选择哪个内存页面被换出到磁盘,以便为所需页面腾出空间。其性能直接影响系统效率,主要评估指标是缺页率(缺页次数 / 总访问次数)。
KANGBboy2 小时前
大数据·hadoop·分布式
hadoop冷热数据分离将Hive表的历史数据从三副本改为单副本,以节省存储空间 对于历史数据的副本数调整,修改全局配置后(hdfs-site.xml中的dfs.replication默认副本数)只影响设置生效后新写入的数据。历史数据的副本数不会改变,必须手动执行命令来降低。另外只是对历史数据进行副本减少,近期数据还是要保持三副本。
skilllite作者2 小时前
人工智能·分布式·安全·搜索引擎·agentskills
Evotown——开启本地化、可验证的AI智能体进化新时代在2026年的今天,AI智能体(Agent)的“自我进化”已经不再是科幻概念。然而,现有的许多进化框架往往面临两个痛点:一是依赖不稳定的云端虚拟货币经济模型,导致实验结果受外部市场波动影响;二是缺乏一个完全受控、可复现的验证环境,让“进化效果”变成了难以量化的“玄学”。
敏君宝爸3 小时前
分布式·rabbitmq
RabbitMQ多线程消费与死信队列方案https://blog.csdn.net/duanyuanjun/article/details/128674859
tsyjjOvO3 小时前
分布式·rabbitmq
深入浅出 RabbitMQ:从原理到实战MQ(Message Queue,消息队列),也叫消息中间件,是用于分布式系统之间通信的核心组件。它的核心作用是实现系统间的异步通信,解耦上下游系统,同时具备削峰填谷的能力,保障高并发场景下系统的稳定性。
爱吃苹果的梨叔3 小时前
分布式·网络协议·tcp/ip
2026年分布式坐席系统技术指南:从KVM延长到全IP坐席协作很多项目会把KVM延长器、矩阵切换器和分布式坐席系统混在一起。清虹分布式坐席系统要解决的,是“多信号、多岗位、多权限、多审计”的协作。2026年建设指挥中心,如果仍按点对点延长设计,容易出现线缆复杂、扩展困难。
容器魔方3 小时前
大数据·分布式·云原生·容器·云计算
Kthena 核心原语:ModelServing CRD 如何定义分布式推理“新标准”?欢迎阅读【LLM推理】专栏系列文章,在首个系列,我们将带来大模型智能推理方向开源项目Kthena技术解析:
笨鸟先飞的橘猫4 小时前
分布式·学习·游戏·面试·lua
基于Skynet的分布式游戏场景题:大型MMO的跨服战场系统设计该文章只是为了练习场景题的分析框架,可能存在漏洞,欢迎交流。你所在的项目组正在开发一款大型MMO游戏,需要设计一个跨服战场系统:
2603_954708314 小时前
人工智能·分布式·物联网·架构·系统架构·能源
微电网分布式电源接入技术:光伏、风电的适配设计在“双碳”目标深化推进与新型电力系统加速构建的背景下,分布式光伏、风电凭借清洁低碳、就地取材的优势,已成为微电网能源供给的核心组成部分,截至2025年底,全国分布式光伏、风电装机总量已突破18亿千瓦,其规模化接入成为微电网实现“源网荷储”协同、提升能源自给率的关键路径。但光伏出力受光照强度、昼夜交替影响呈现间歇性、波动性,风电出力受风速、风向变化制约具有强随机性,两者接入微电网后,易导致系统电压波动、频率偏移、电能质量下降等问题,甚至影响微电网并离网运行的稳定性。因此,光伏、风电接入微电网的适配设计,成为
团象科技5 小时前
分布式
回望2026出海分水岭:分布式云如何定义企业全球化终局竞争力摘要:站在2030年全球化终局视角回看,2026年成为企业出海从规模扩张转向质量深耕的关键分水岭,分布式云凭借全域适配能力,帮助企业解决跨境运营痛点,筑牢全球化长效竞争根基。
武超杰5 小时前
分布式·rabbitmq
RabbitMQ 消息队列集成与使用RabbitMQ 是一款开源的消息队列中间件,基于 AMQP 协议开发,实现了应用之间的异步通信、流量削峰、解耦等核心能力。在动力优品项目中,RabbitMQ 主要用于商品数据同步:商品新增 / 修改 / 删除时,发送消息通知搜索服务更新 Elasticsearch 索引库,保证数据一致性。
China_Yanhy5 小时前
人工智能·分布式·云原生
【云原生 AI 实战】EKS 搭建 GPU 超算集群:从零拉起节点到 PyTorchJob 分布式训练 (附 EFA 加速避坑指南)大家好,我是 [锅巴王子]。最近团队在大规模模型训练(LLM 炼丹)的架构演进中,决定将底层算力底座全面向云原生迁移。今天这篇是实战系列的第一发:如何使用 EKS 拉起带 EFA(极速网卡)的 GPU 物理节点,并利用 Training Operator(我们的“分布式帅印”)提交多机多卡训练任务。
zhangzeyuaaa5 小时前
分布式·kafka
Kafka 单分区顺序消费的极限与突围:从原理到实战Kafka 的分区机制是它实现高吞吐和水平扩展的基石。然而,“同一个消费者组内,一个分区只能被一个消费者消费”这个看似简单的规则,在实际生产中也催生了不少困扰。本文将围绕这一约束,深入剖析其背后的设计取舍、带来的三方面局限性,并给出从简单到复杂的全套解决方案,力求覆盖你在真实场景中可能遇到的所有疑惑。
珠海西格电力14 小时前
大数据·分布式·微服务·架构·能源
零碳园区的能源供给成本主要包括哪些方面?零碳园区的能源供给以“绿色低碳、协同高效”为核心,区别于传统园区以化石能源为主的供给模式,其成本构成更具多样性和综合性,涵盖“前期建设投入、中期运营消耗、后期维护补充”全生命周期,且与绿电布局、技术选型、政策导向密切相关。当前,零碳园区能源供给普遍采用“自建绿电+外购绿电+储能配套+智能管控”的协同模式,对应的成本也围绕这一模式展开,既包括显性的设备、采购、运维成本,也涵盖易被忽视的隐性成本。本文结合2025-2026年行业最新数据与标杆园区实践,系统拆解零碳园区能源供给成本的核心构成,厘清各成本维度的具
霑潇雨1 天前
java·大数据·分布式·学习·spark·maven
Spark学习基础转换算子案例(单词计数(WordCount))本案例在文件中读取,上面是文件路径这是文件内容代码如下:运行结果为:
富士康质检员张全蛋1 天前
分布式·架构·kafka
Kafka架构 数据发送保障producer是如何确定分区已经成功的将这条消息保存起来了?其实就是produce发送消息,leader收到这条消息,并且成功的保存下来了,那么会给producer回复叫做ACK,producer在收到了这样回复之后就认为分区把消息成功保存下来了。
zhojiew1 天前
大数据·分布式·spark
使用 Spark Connect 在 Amazon EMR on EC2 上实现远程 Spark开发在 EMR 上,传统上 Spark 作业通过 spark-submit 提交到 YARN,有两种 deploy mode:
庞轩px1 天前
分布式·rocketmq
第二篇:RocketMQ事务消息——分布式事务的最终一致性方案在上一篇中,我们拆解了RocketMQ的四大核心角色和一条消息的完整旅程。但秒杀系统中最关键的技术点还没有展开:事务消息。