技术栈
通信库
七夜zippoe
1 小时前
pytorch
·
分布式
·
cann
·
hccl
·
通信库
深入解析CANN仓库中的HCCL分布式通信库
目录为什么写这篇文章？测评结论速览✅ 核心优势⚠️ 待优化点文章综述评测总结一、CANN仓库与HCCL简介
predawnlove
7 个月前
nccl
·
通信库
【NCCL】8 PAT AllGather 设备端实现详解3
PatAGAlgorithm::getNextOp() 函数的算法规划是 PAT (Pipelined Allgather Tree) 算法的核心调度器。
predawnlove
7 个月前
gpu
·
nccl
·
通信库
【NCCL】3. ncclPrepareTasks 到 scheduleCollTasksToPlan 的衔接机制
Commit: 59242d7cncclPrepareTasks 之后如何衔接到 scheduleCollTasksToPlan 的完整流程。关键在于 ncclLaunchPrepare 函数。
我是有底线的