PVE开启核显直通

启用内核 IOMMU 支持

  1. 修改/etc/default/grub配置文件以启用 IOMMU 支持,将GRUB_CMDLINE_LINUX_DEFAULT修改为:
bash 复制代码
GRUB_CMDLINE_LINUX_DEFAULT="quiet intel_iommu=on iommu=pt"

iommu=pt的参数建议添加,以提高未直通设备 PCIe 的性能,PT 模式只在必要的时候开启设备的 IOMMU 转换。

  1. 保存并更新 GRUB 配置:
bash 复制代码
update-grub

添加模块(驱动)黑名单

接着添加模块(驱动)黑名单,即让GPU设备在下次系统启动之后不使用这些驱动,把设备腾出来给vfio驱动用;

编辑 /etc/modprobe.d/pve-blacklist.conf,禁用GPU驱动,以便vfio使用。

bash 复制代码
blacklist nvidiafb
blacklist i915
blacklist snd_hda_intel
options vfio_iommu_type1 allow_unsafe_interrupts=1
参数 释义
blacklist i915 屏蔽显卡驱动
blacklist snd_hda_intel 屏蔽hdmi声音驱动
options vfio_iommu_type1 allow_unsafe_interrupts=1 允许不安全的设备中断

加载内核模块

编辑内核模块加载文件/etc/modules,追加以下内容

bash 复制代码
vfio
vfio_iommu_type1
vfio_pci
vfio_virqfd

将设备加入进vfio

  1. 找出VGA的设备ID,ID就是末尾的中括号内的例如[8086:4692],这个根据你实际情况。
bash 复制代码
lspci -D -nnk | grep VGA
  1. 打开/etc/modprobe.d/vfio.conf配置文件然后将对应的设备ID增加上去,如果多个设备ID则用,分隔开例如ids=8086:4692,xxxx:xxxx
bash 复制代码
options vfio-pci ids=8086:4692

更新重启

  1. 更新内核
    update-initramfs -u -k all
  2. 更新设备id
    update-pciids
  3. 重启
    reboot
  4. pve中虚拟机添加PCI设备

硬件直通的一些基本参数

复制代码
# 对于 Intel CPU
GRUB_CMDLINE_LINUX_DEFAULT="quiet intel_iommu=on iommu=pt initcall_blacklist=sysfb_init pcie_acs_override=downstream,multifunction pci=nommconf"

# 其他写法
GRUB_CMDLINE_LINUX_DEFAULT="quiet intel_iommu=on iommu=pt i915.enable_gvt=1 video=efifb:off" 
# GVT 模式,即共享GPU模式,少数 CPU 支持

GRUB_CMDLINE_LINUX_DEFAULT="quiet intel_iommu=on iommu=pt video=efifb:off"
# 独占模式,只能直通给一个虚拟机,无 PVE 控制台显示,大多CPU都支持

GRUB_CMDLINE_LINUX_DEFAULT="quiet intel_iommu=on iommu=pt pcie_acs_override=downstream,multifunction"
# 用于拆分iommu ,以便灵活直通板载设备,并确保每个设备单独分组,防止直通导致物理机卡死。
参数 释义
quiet 默认参数,表示在启动过程中只显示重要信息
intel_iommu=on 在虚拟化环境中,启用 IOMMU 后,可以将物理设备直通到虚拟机中,以便虚拟机可以直接访问硬件设备
amd_iommu=on 用 amd_iommu 驱动来驱动 IOMMU 硬件单元
iommu=pt 用于管理设备对系统内存的访问。建议添加,以提高未直通设备 PCIe 的性能
pci=assign-busses 部分网卡开启 SR-IOV 需要这个参数,否则可能报错
nofb 该选项允许你不用一个frame缓冲来使用图形安装程序
video=vesafb:off 禁用 vesa 启动显示设备
video=efifb:off 禁用 efi 启动显示设备
video=simplefb:off 5.15 内核开始直通可能需要这个参数
initcall_blacklist=sysfb_init 禁用 sysfb_init 内核初始化函数,以避免其在 GPU 直通时造成干扰。
i915.enable_gvt=1 启用 Intel GVT-g 以共享 GPU 给多台虚拟机;适用于支持平台,直通显卡时不添加。
相关推荐
dessler39 分钟前
Kubernetes(k8s)-集群监控(Prometheus)
linux·运维·kubernetes
一夜沐白40 分钟前
Linux用户管理
linux·运维·服务器·笔记
PLUS_WAVE1 小时前
【Tools】chezmoi 跨多台不同的机器管理 dotfiles 的工具
linux·服务器·软件工程·工具·chezmoi
唐青枫2 小时前
Linux man 命令使用教程
linux
珹洺3 小时前
Linux红帽:RHCSA认证知识讲解(十 四)分区管理、交换分区,创建逻辑卷与调整逻辑卷的大小
linux·运维·服务器
威桑3 小时前
解决Ubuntu下使用CLion构建Qt项目时找不到已安装的模块的问题
linux·运维·ubuntu
PLUS_WAVE4 小时前
【SSH 端口转发】通过SSH端口转发实现访问远程服务器的 tensorboard
linux·服务器·ssh·软件工程·端口转发·tensorboard
珹洺5 小时前
Linux操作系统从入门到实战(四)Linux基础指令(下)
linux·运维·服务器
程序猿(雷霆之王)12 小时前
Linux——进程间通信
linux·运维·服务器
riveting13 小时前
SD2351核心板:重构AI视觉产业价值链的“超级节点”
大数据·linux·图像处理·人工智能·重构·智能硬件