centos linux 安装RDMA Soft-RoCE|虚拟机安装Soft-RoCE

RoCE既可以通过硬件实现,也可以通过软件实现。 Soft-RoCE 是 RDMA 传输的软件实现。

什么是Soft-RoCE

softRoCE的目标是在所有支持以太网的设备上都可以部署RDMA传输,可以使不具备RoCE能力的硬件和支持RoCE的硬件间进行基于IB语义的交流。

大白话就是模拟RDMA的软件栈,使得在没有RDMA网卡的环境上,也可以运行基于RDMA写的传输程序。

但是因为RDMA网卡的一大特色之一就是,传输的动作是网卡上的芯片处理的,普通网卡没有这样的硬件,所以只是实现了0拷贝,而没有真正的RDMA网卡的CPU减负功效。

更多关于Soft-RoCE,见:http://t.csdn.cn/SuM9m

http://t.csdn.cn/fD7iy

安装 (内核应当高于4.11)

红帽系统

Soft-RoCE 作为 upstream kernel 4.8(或更高版本)的一部分发布。

从 Red Hat Enterprise Linux 7.4 开始,Soft-RoCE 驱动程序已合并到内核中。用户空间驱动程序也合并到 rdma-core 包中。 Soft-RoCE 也称为 RXE。要启动、停止和配置 RXE,请使用 rxe_cfg 脚本。要查看 rxe_cfg 的选项,请输入 rxe_cfg help。

所以红帽系统的可以直接去配置,教程:https://access.redhat.com/documentation/en-us/red_hat_enterprise_linux/7/html/networking_guide/sec-configuring_soft-_roce

其他系统可以通过安装 Mellanox的OFED 获得Soft-RoCE

可以使用 Mellanox OFED 4.0 或上游驱动程序。如果安装 MLNX_OFED 4.0,您将自动获取 Soft-RoCE 内核模块和用户空间库。 (rdma_rxe模块在mellanox驱动包的kmod-mlnx-ofa_kernel 这个rpm包里面)

chatGPT的教程

要在CentOS上安装Soft-RoCE(RDMA over Ethernet),请按照以下步骤进行操作:

  1. 检查内核版本

在终端中运行以下命令,检查内核版本是否支持Soft-RoCE:

```

uname -r

```

如果内核版本低于4.11,您需要先升级内核。您可以使用`yum`命令安装最新的内核版本。

  1. 安装依赖软件包

在终端中运行以下命令,安装软件包以满足Soft-RoCE的依赖关系:

```

sudo yum install rdma libibverbs libibverbs-utils librdmacm librdmacm-utils

```

  1. 加载内核模块

在终端中运行以下命令,加载相关的内核模块:

```

sudo modprobe rdma_rxe

sudo modprobe ib_core

sudo modprobe ib_cm

```

  1. 配置Soft-RoCE

在终端中运行以下命令,编辑RoCE的配置文件:

```

sudo vi /etc/rdma/rdma.conf

```

将以下行添加到配置文件中:

```

Enable RoCE

RDMA_LOAD=yes

```

保存并关闭文件。

  1. 启动Soft-RoCE服务

在终端中运行以下命令,启动Soft-RoCE服务:

```

sudo systemctl start rdma

```

如果您希望Soft-RoCE在系统引导时自动启动,还可以运行以下命令:

```

sudo systemctl enable rdma

```

  1. 验证Soft-RoCE状态

运行以下命令,验证Soft-RoCE的状态:

```

sudo rxe_cfg

```

如果Soft-RoCE已成功配置和启动,您将看到适配器和端口的详细信息。

恭喜您,现在已成功在CentOS上安装Soft-RoCE。您可以使用Soft-RoCE进行RDMA over Ethernet通信了。请确保您的网络硬件和驱动程序支持RoCE。

相关推荐
姚不倒2 小时前
etcd 学习系列(一):从业务需求出发,理解 etcd 是什么
运维·数据库·etcd
susplus2 小时前
【linux应用软件编程】数据库sqlite3
linux·数据库·sqlite
GeW2 小时前
RHCE的评分潜规则:这样做实验,每题多拿20%分数
linux
运维全栈笔记2 小时前
Windows 安装 WSL2 并运行 Ubuntu 24.04 指南
linux·网络·windows·ubuntu
FlightYe2 小时前
音视频修炼之基础理论(五):AAC格式与解析
android·linux·c++·音视频·aac
迪康Defender2 小时前
政企内网终端安全建设:资产‑管控‑防护‑审计闭环能力拆解
运维·网络·安全·web安全·终端安全管理
Neighbor_OldY3 小时前
【实战复盘】文件上传漏洞检测与应急处置:校验绕过、图片马与WebShell的排查修复指南
运维·前端·web安全
米糕闯编程3 小时前
鱼香ros2(一)在ubuntu中安装ros2
linux·运维·ubuntu·机器学习
数字孪生视频孪生3 小时前
三维实时重构异构底座 核工危化无感定位跨境轨迹一屏统揽
大数据·运维·人工智能·重构·架构
Huangjin007_3 小时前
【Linux 系统篇(十八)】进程(六) :环境变量
linux·运维·服务器