分布式

Wang's Blog4 小时前
开发语言·分布式·golang
Go-Zero项目开发40: 基于Jaeger的分布式链路跟踪实战在一个典型的IM系统中,客户端A向客户端B发送消息,底层实际流程如下:当客户端B无法收到消息时,问题可能出现在任意环节:发送时未指定正确的目标、消费者推送逻辑错误、WebSocket 推送失败等。面对分布式环境下的长调用链,传统的日志排查显得力不从心。分布式链路跟踪正是为了应对这一难题,通过记录一次请求在多个服务间的完整路径,帮助开发者快速定位故障点、分析性能瓶颈,并梳理服务依赖关系。
笨鸟先飞的橘猫4 小时前
分布式·学习·游戏
游戏后端分布式学习——消息队列在游戏的用法消息队列(Message Queue,MQ)在 MMO 中主要用于异步解耦、削峰填谷、跨服通信、事件驱动。
wWYy.4 小时前
分布式
基于Raft分布式Kv存储:sendAppendEntriessendAppendEntries() 可以理解为:针对某一个 Follower,执行一次 AppendEntries RPC,然后把回复合并回 Leader 的 Raft 状态。
范什么特西8 小时前
分布式·kafka
关于kafkakafka架构topic partitionkafka为什么很快消息丢失+消息重复+顺序消费offset
wWYy.10 小时前
开发语言·分布式·qt
基于Raft的分布式Kv存储项目:raft.hraft.h 中只有 init 的声明, 它相当于 Raft 节点的“构造完成阶段”:绑定外部资源、初始化状态、恢复持久化数据,并启动后台任务。
wWYy.9 小时前
分布式
基于Raft分布式Kv存储:AppendEntries整体调用链Raft 里同一个 AppendEntries RPC 同时承担两种功能:这是 Raft 论文中定义的标准行为。
霸道流氓气质10 小时前
分布式
分布式系统中跨进程上下文传递方案分布式系统中,一个完整的业务流程往往跨越多个进程(微服务)。某些上下文信息(用户身份、TraceId、灰度标记、原始业务数据等)需要在整条链路中流转。
wWYy.10 小时前
分布式
基于Raft分布式Kv存储:日志寻找匹配核心目标Raft 的日志寻找匹配,本质上是在寻找 Leader 和 Follower 的最大公共前缀:
ACP广源盛1392462567311 小时前
大数据·人工智能·分布式·单片机·嵌入式硬件
YLB3118 存储桥接芯片完整机会点@ACP#联动曙光 8000曙光 8000 可高效训练万亿参数通用 / 行业大模型,企业完成模型蒸馏、量化后,必须在本地终端留存:模型权重文件、百万字上下文知识库、多模态图片 / 4K 视频训练素材、行业私有数据集。
韩楚风1 天前
服务器·网络·数据库·分布式·mysql·架构·cantian
【参天引擎】一次宕机后的数据恢复,让我把 Cantian 持久化与恢复的六大机制全搞明白了讲真,第一次看 Cantian 持久化与恢复源码的时候,我也是一脸懵——Redo 日志、Undo 日志、Checkpoint、崩溃恢复、归档管理、日志复制,这么多机制,到底谁保护谁?直到有一次线上遇到数据库宕机,需要紧急恢复数据,我才真正去翻源码,搞明白这套机制是怎么做到"数据不丢、快速恢复"的。
AAA@峥1 天前
运维·分布式·ceph
Ceph RBD 块存储全解析:原理与实操汇总摘要:本文全面介绍了 Ceph 分布式存储系统中的块存储管理(RBD)。内容涵盖 RBD 的 I/O 流程、常用命令、镜像创建与管理、访问方式(KRBD 和 librbd)、镜像格式与布局、镜像功能(快照、克隆)、导入导出操作,以及 RBD 镜像的配置与管理。文章通过详细的命令行示例和配置步骤,帮助读者深入理解 Ceph RBD 的核心概念和实际操作,适合存储管理员和运维人员参考学习。
LLL人无再少年1 天前
分布式·skywalking
分布式链路追踪系统之二进制安装skywalking
心念枕惊1 天前
分布式·系统架构
分布式、服务化的ERP系统架构设计
重庆小透明1 天前
分布式
分布式事务方案对比分布式事务要解决的是:一个业务操作跨了多个数据库或服务,如何保证数据一致性?解决方案分为两大阵营:刚性事务(强一致性):Seata 的 AT、TCC、XA 模式。追求数据实时一致,所有服务要么一起成功,要么一起失败。
向夏威夷 梦断明暄2 天前
数据库·分布式·架构
从架构特点到功能缺陷,重新认识分析型分布式数据库在现代数据驱动的业务环境中,分析型分布式数据库已成为企业处理海量数据、支持复杂查询和实时分析的核心基础设施。然而,许多开发者对其架构特点的理解仍停留在表面,导致在实际应用中频繁踩坑。本文将从实战角度出发,通过代码示例深入剖析分析型分布式数据库的架构设计、功能缺陷及应对策略,帮助读者重新认识这一技术。## 架构特点:从单机到分布式的关系型分析分析型分布式数据库的架构设计核心在于 **“计算与存储分离”**和 “MPP(大规模并行处理)”。与传统关系型数据库(如 MySQL)不同,分析型数据库通常采用列式存储
AAA@峥2 天前
运维·数据库·分布式·ceph
Ceph 集群配置管理完整指南摘要:本文全面介绍了 Ceph 分布式存储集群的配置管理。首先概述了 Ceph 配置的多种来源(编译默认值、集中配置数据库、配置文件等)及其生效优先级。详细讲解了集群配置文件的格式、配置部分、实例设置和元变量使用。重点介绍了集中配置数据库的管理命令,包括 ceph config ls、ceph config set、ceph config get、ceph config log 等核心操作。同时涵盖了运行时配置覆盖的两种方式:ceph tell 命令和 ceph daemon 命令,并对比了它们的特性差异
心如鉄补2 天前
分布式·docker·skywalking
分布式链路追踪系统之docker-compose安装skywalking在微服务架构中,分布式链路追踪是排查性能瓶颈和错误定位的核心工具。SkyWalking 作为 Apache 基金会旗下的开源 APM 系统,以其轻量级、高性能和丰富的生态支持,成为众多团队的首选。本文将从实战角度出发,演示如何使用 docker-compose 快速搭建 SkyWalking 环境,并集成一个简单的 Python 服务进行链路追踪。## 为什么选择 docker-compose 部署 SkyWalking?在生产环境中,SkyWalking 通常需要部署多个组件(如 OAP 服务器、UI
努力努力再努力wz2 天前
linux·网络·c++·分布式·网络协议·rpc·架构
【分布式系统与 RPC 框架系列】从单机瓶颈到远程调用:一文理解分布式架构与 RPC 原理🔥 本文专栏:分布式系统与 RPC 框架系列 🌸作者主页:努力努力再努力wz💪 今日博客励志语录:暂时没有结果,并不说明你的坚持毫无意义;很多成长,本来就发生在结果出现之前。
ACP广源盛139246256733 天前
大数据·人工智能·分布式·单片机·嵌入式硬件
此芯 P1 AI BOX / AI NAS@ACP#IX8008、IX8024 应用场景与市场机会此芯 P1 是 6nm 异构 AI SoC,集成 45TOPS 原生 NPU,主打本地私有化大模型推理,产品分为两条硬件线:
网络工程小王3 天前
人工智能·pytorch·分布式·学习·昇腾·deepspeed
【HCIE-AI】12.deepspeed分布式并行训练进阶版概述: 训练大模型(7B+)时,会依次遇到显存、计算、通信、工程四个方面的瓶颈。理解这些瓶颈是理解后续所有解决方案的前提。