rdma

RDMA简介7之RoCE v2可靠传输可靠传输技术旨在通过多种方法确保数据包在传输过程中不会丢失或损坏，同时保证数据包按发送顺序到达接收端，其要求在链路发生丢包或网络发生拥塞等情况下能够完全保证数据包的正确性同时尽可能地提高传输速率。RoCE v2协议实现可靠传输的技术手段共有三种，分别为：丢包重传机制、流量控制及拥塞管理。接下来将就这三种技术手段进行详细分析。

RDMA简介5之RoCE v2队列在RoCE v2协议中，RoCE v2队列是数据传输的最底层控制机制，其由工作队列（WQ）和完成队列（CQ）共同组成。其中工作队列采用双向通道设计，包含用于存储即将发送数据的发送队列（SQ）和用于存储已接收到的数据的接收队列（RQ），二者共同组成了端到端的数据传输管道（Pipeline）每一个SQ与RQ绑定起来称为队列对（QP），每个队列对中包含有若干个工作队列元素（WQE）和一些其他元素如本地接收队列指针、本地发送队列指针、远程接收队列指针、远程发送队列指针等。同样的，每一个CQ中也存在着若干完成队列元

RDMA简介3之四种子协议对比RDMA协议共有四种子协议，分别为InfiniBand、iWARP、RoCE v1和RoCE v2协议。这四种协议使用统一的RDMA API，但在具体的网络层级实现上有所不同，如图1所示，接下来将分别介绍这四种子协议。图1 RDMA四种子协议网络层级关系图 InfiniBand：InfiniBand是一种专为RDMA设计的网络，其传输层、网络层及链路层均遵循IB协议规范，没有类似以太网的复杂协议交互计算，从硬件级别保证传输可靠，但成本较为高昂，需要使用专用的IB交换机和IB网卡才可以正常路由。 RoCE

SPDK NVMe of RDMA 部署使用SPDK NVMe of RDMA 实现多NVMe设备共享1.1.1 下载spdk源码首先，我们需要从GitHub上克隆SPDK的源码仓库。打开终端，输入以下命令：

【NCCL】transport建立（一）NCCL transport建立主要在ncclTransportP2pSetup函数中实现。先简单概括一下ncclTransportP2pSetup函数做了哪些事，方便理解代码流程。 recvpeer 表示本卡作为接收端的对端，sendpeer 表示本卡作为发送端的对端。假设8个rank全连接，第一次循环时，rank0的recvpeer就是7，rank0的sendpeer就是1，第二次循环，rank0的recvpeer就是6，rank1的sendpeer就是2，以此类推。 ncclTransportP2p

小锋学长生活大爆炸

【教程】检查RDMA网卡状态和测试带宽 | 附测试脚本转载请注明出处：小锋学长生活大爆炸[xfxuezhagn.cn]如果本文帮助到了你，欢迎[点赞、收藏、关注]哦~

RDMA 工作原理 | 支持 RDMA 的网络协议注：本文为 “RDMA” 相关文章合辑。英文引文机翻未校。图片清晰度受引文所限。Written by: Dotan Barak on March 31, 2014.on February 13, 2015.

【RDMA】 ZTR（Zero Touch RoCE）技术（无需配置PFC和ECN)目录什么是Zero Touch RoCE（ZTR）硬件和软件需求使用方式实现机制ZTR-RTTCC 的工作原理

【RDMA学习笔记】1：RDMA（Remote Direct Memory Access）介绍从帝国理工的PPT学习。Remote Direct Memory Access，也就是Remote的DMA，是一种硬件机制，能直接访问远端结点的内存，而不需要处理器介入。其中：

【3.1 以太网RDMA优化--网卡缓存资源维度】RDMA是允许本端直接访问远端内存以提供低CPU开销、低延迟和高带宽的网络传输，非常适合当前AI的数据中心应用及云存储等交互系统的需求；目前工业和学术上的研究工作都是对以太网RDMA进行改进和优化，来充分发挥性能优势；主要从存储资源、可靠传输，应用相关3个方面来介绍对RDMA网卡的性能优化和功能增强；

SmartX分享：SMTX ZBS 中 RDMA 技术简介我们清楚，分布式存储将利用网络作不同设备的互联。最基础的如TCP/IP的IP SAN，进阶的有FC SAN、IB等等。 SmartX 支持 10G以上的TCP/IP网络作为互联网络，同时也支持25G的RDMA网络。

【RDMA】RDMA read和write编程实例（verbs API）（本文讲解的示例代码在：RDMA read and write with IB verbs | The Geek in the Corner）

北冥有鱼被烹

微知-DOCA SDK中如何编译一个sample？如何运行？(meson /tmp/xxx； meson compile -C /tmp/xxx)DOCA： Data Center-on-a-Chip Architecture，片上数据中心架构。是NVIDIA针对DPU的软件框架。DOCA之于DPU，就相当于CUDA之于GPU。本文介绍的是DOCA SDK中的DOCA ARGP模块的机制原理，他是DOCA程序的一个标准参数处理框架。本文将介绍DOCA SDK中的一个DOCA_RDMA的例子，介绍如何编译运行。

北冥有鱼被烹

微知-ib_write_bw的各种参数汇总（-d -q -s -R --run_infinitely）经常忘记使用ib_write_bw打流的一些参数，特此整理记录在这里方便快速查阅。尤其是run_infinitely这个参数容易写错。

RDMA驱动学习（一）- 用户态到内核态的过程最近梳理了一下rdma用户态到内核态传参的流程，会基于ibv_create_cq接口介绍一下ioctl版本的流程，代码基于mlnx-ofa_kernel-5.4。

Linux 常见的冷知识集锦本文旨在记录那些常见的Linux概念和名词，但这些又没经常直接使用到，更多在底层运行，见过却又不是特别清楚的碎片知识，以温故知新。

【RDMA项目】如何使用rdma-core进行调用开发一个实战项目RDMA (Remote Direct Memory Access) 是一种网络协议，可以在计算节点之间实现高效的内存数据传输，而无需CPU的干预。rdma-core 是 RDMA 的一个用户空间库，提供了一些简单易用的接口来使用 RDMA 功能。

RDMA 高性能架构基本原理与设计方案在进行本文的学习学习之前，我们先对RDMA是什么做一个简单的科普与认识：一文带你了解什么是RDMA-CSDN博客

北冥有鱼被烹

RDMA建链的3次握手和断链的4次挥手流程？双端都需要发送所以累计四次更多细节以后逐渐补充。

Rcmp: Reconstructing RDMA-Based Memory Disaggregation via CXL——论文阅读TACO 2024 Paper CXL论文阅读笔记整理RDMA：RDMA是一系列协议，允许一台机器通过网络直接访问远程机器中的数据。RDMA协议通常固定在RDMA NIC（RNIC）上，具有高带宽（>10 GB/s）和微秒级延迟（~2μs），这些协议得到了InfiniBand、RoCE和OmniPath等公司的广泛支持[20, 47, 62]。RDMA基于两种类型的操作原语提供数据传输服务：单侧动词，包括RDMA READ、WRITE、ATOMIC（例如FAA、CAS）；双侧动词，包括RDMA SEND、