分布式

每天一道题

CAP、Raft 与多数派：分布式系统如何达成一致？前面几篇我们学习了 MySQL 主从复制、Kafka 消息可靠性，以及跨服务的分布式事务。这些技术虽然解决的问题不同，但都涉及一个共同问题：

ray教程-18-性能调优与反模式仓库地址：github.com/hhk-png/cyc…本章目标：把「Ray 跑得慢」这件事变成可测量、可归因、可修的工程问题。读完你应该能做到三件事：知道开销花在哪四类地方、认出十个最常见的反模式、用 State API 自己测出优化前后的差别。

每天一道题

分布式锁真的安全吗？从 Redis 锁、Lease 到 Fencing Token前面学习 MySQL 事务时，我们讨论过行锁、间隙锁和 Next-Key Lock。对于单个数据库中的并发操作，MySQL 已经提供了相对完整的事务与锁机制。

小O的算法实验室

IEEE TAES，多无人机通信故障下的分布式任务分配与压制干扰通信中断和无人机失联会削弱集中式任务分配，论文提出基于CBAA的分布式动态任务分配算法DDTAA，通过通信质量因子评估干扰贡献，在环境变化较小时复用旧方案，在链路故障、目标显著移动或无人机持续失联时触发重算与任务重分配。仿真表明，该方法收敛速度快，干扰效能接近集中式GA，并优于固定和随机分配。

分布式锁与幂等服务部署到两台机器后，定时任务开始跑两次，优惠券被领了两回。单机锁在 JVM 里面，跨机器就失效了，于是分布式锁登场。但 setnx 一行命令的锁，坑比想象的多：锁自己会过期、会误删、会易主。把这三个坑和幂等的落地写法放在一起看，才是一套完整的防重复方案。

Redis分布式锁在tryAcuire()的过程中，如果抢到了锁，会定时延长锁的有效期。底层：不是 JDK ScheduledExecutorService，是 Netty 的 HashedWheelTimer（时间轮）调度的异步定时任务。

ray教程-15-RayServe与LLM服务仓库地址：github.com/hhk-png/cyc…本章目标：把 Ray Serve 从「一个 HTTP 框架」讲到「LLM 推理的编排层」。读完你应该能回答：Serve 的核心对象是什么、请求在集群里怎么走、自动扩缩与路由策略怎么选、Ray Serve LLM 走到了哪一步、以及哪些 API 已经死了、哪些还只是 beta。版本号与 PR 号都标注来源；查不到出处的写「未确认」，不编。

MySQL 实现分布式锁：悲观锁、乐观锁、唯一索引锁上一篇我们了解到分布式锁三大主流方案：MySQL、Redis、ZK。 MySQL 分布式锁是门槛最低的一种：不需要额外部署中间件，只要项目已经接入 MySQL，就能快速落地。很多后台管理系统、低并发定时任务防重场景都会优先选择它。

Android SISO 分布式编译集群配置方案组件作用推荐方案Scheduler（调度节点）任务调度、负载均衡EngFlow / BuildBuddy / Bazel Remote

KaiwuDB 分布式集群扩缩容，从原理到完整操作踩坑总结很多新手 DBA 会觉得扩缩容就是加机器删机器，实际远没有这么简单。分片迁移、副本、租约每一步出错，都可能造成业务抖动。

深度解析JQuick-SQL AST到逻辑计划转换机制｜分布式SQL原理Meta 描述：本文围绕jquick-sql架构原理说明JQuickASTToLogicalPlanVisitor如何把强类型AST转化为逻辑计划，梳理Table Scan、Filter、Project、Join与GroupBy的组装顺序，连接Java分布式SQL引擎架构、SQL查询优化原理和后续gRPC分布式数据交换。

深度解析JQuick-SQL SQL解析与AST生成机制｜分布式SQL原理Meta 描述：本文拆解jquick-sql架构原理中的SQL解析链路，说明Java分布式SQL引擎架构如何借助ANTLR生成强类型AST，并分析JQuickSQLExecutor、JQuickQueryNode与Visitor协作，为理解SQL查询优化原理及后续gRPC分布式数据交换奠定基础。

微能网协调控制箱的架构优势对能源管理的影响？园区能源管理水平的高低，本质取决于底层控制架构的能力上限。传统微电网采用两层云端集中架构、单一电力管控逻辑、固化硬件结构，导致能源管理长期面临数据碎片化、调度滞后被动、多能无法协同、合规管控薄弱、运维成本居高不下等难题。

ray教程-14-RayTune与超参搜索仓库地址：github.com/hhk-png/cyc…本章目标：搞清楚 Tune 的四个抽象（Tuner / TuneConfig / param_space / search_alg / scheduler）怎么组合、采样器和调度器该选哪个、以及怎么把 trial 数量换算成 GPU·小时。读完你应该能设计一次"预算可控、结论可信"的调参实验。

深圳市恒星物联科技有限公司

排水管网监测分层分布式架构：感知-传输-平台-应用详解排水管网点位分散、环境恶劣、业务多元，分层架构的本质是用清晰的职责切分应对复杂的业务场景：主流方案普遍采用"感知-传输-平台-应用"四层架构，配合"分布式采集、集中式管理"的运行模式——数据自下而上流动、指令自上而下执行。

FinalShell 远程连接 Hadoop 三节点集群教程VMware 虚拟机（Ubuntu 16.04 LTS）远程连接实训记录实训环境为 VMware 中部署的三台 Ubuntu 虚拟机（hadoop01、hadoop02、hadoop03），共同组成 Hadoop 分布式集群。日常操作中，若每次都要打开虚拟机的图形控制台，在多台节点之间切换很不方便。因此需要从宿主机（Windows）使用 SSH 客户端远程连接和管理三台节点。

深度解析JQuick-SQL 逻辑计划到物理计划生成机制｜分布式SQL原理Meta 描述：本文基于jquick-sql架构原理解析JQuickPhysicalPlanGenerator如何把逻辑计划映射为可执行物理节点，涵盖Table Scan、Hash Join、Nested Loop Join、Hash Aggregate、Exchange与TopN，并说明Java分布式SQL引擎架构、SQL查询优化原理及gRPC分布式数据交换的衔接。

磁场转动100万匹

Spark Core 核心原理：从 RDD 到分布式计算Spark Core 是整个 Spark 生态的基石，SQL、Streaming、MLlib、GraphX 都构建在它之上。本篇把 Spark Core 的核心概念串成一条线：为什么需要 Spark → RDD 是什么 → 怎么算 → 怎么容错 → 集群怎么跑起来。一天搞定核心原理。

内存装不下怎么取 Top 100：外部排序与分布式 Top-K 的实测取舍全文摘要：取 Top-K 的瓶颈从来不是算法，是数据搬运。我把一亿条数据的外部排序实测跑了遍：阶段一生成 25 个 run 花 1.65 秒、写盘 381 MB，阶段二倒序多路归并只花 0.0001 秒、读 6.2 MB 就拿到前 100。结论是外部排序的成本几乎全在写盘，它卖的是「全序」；你只要前 100，就别为用不上的有序性付钱。

这个DBA有点耶

分布式集群的“最后一公里”：分片集群与透明分布式集群的工程代价拆解大家好，我是小耶，写功课只是为了我踩过的坑，你们别再踩了！“我们准备上分布式集群了。”这句话在技术评审会上经常出现，但接下来讨论的内容，往往不是同一件事。