docker 支持 gpu

需求:

  • 原先在宿主机里运行的服务需要迁移到docker 里

进程:

  • docker 支持 gpu 需要装toolkit ,但是正常情况下没有对应的源,所以先引入源文件
bash 复制代码
distribution=$(. /etc/os-release;echo $ID$VERSION_ID) \
&& curl -fsSL https://nvidia.github.io/libnvidia-container/gpgkey | sudo gpg --dearmor -o /usr/share/keyrings/nvidia-container-toolkit-keyring.gpg \
&& curl -s -L https://nvidia.github.io/libnvidia-container/$distribution/libnvidia-container.list | \
sed 's#deb https://#deb [signed-by=/usr/share/keyrings/nvidia-container-toolkit-keyring.gpg] https://#g' | \
sudo tee /etc/apt/sources.list.d/nvidia-container-toolkit.list
  • 导入并安装
bash 复制代码
apt-get update && apt-get install -y nvidia-container-toolkit
  • 启动docker 查看是否有--gpus 的命令
bash 复制代码
docker run --gpus all -it test:1.0 nvidia-smi
  • 有正常输出就没问题了

拓展:

  • docker 启动也可以指定显卡
bash 复制代码
docker run --gpus "device=1" -it bash nvidia-smi
相关推荐
yyuuuzz1 分钟前
AI模型部署中的常见稳定性问题
运维·服务器·网络·数据库·人工智能·云计算·github
STDD3 分钟前
V Rising《夜族崛起》 专用服务器搭建教程
运维·服务器
Ameilide3 分钟前
Linux 应用软件编程 多任务并发
linux·运维·服务器
日取其半万世不竭18 分钟前
low-memory-server-swap-20260601
docker·容器·https
暮云星影21 分钟前
个人总结 docker搭建PDF操作工具
docker·容器·pdf
无限进步_30 分钟前
【Linux】环境变量:系统运行参数的“备忘录”
linux·运维·服务器
无忧.芙桃33 分钟前
Linux信号机制(上)
linux·运维·服务器
utf8mb4安全女神1 小时前
怎么让服务器给自己的邮箱发消息【shell脚本】
linux·运维·服务器
ZYH_06011 小时前
BGP策略作业
运维·服务器
zhoupenghui1681 小时前
AI大模型应用部署之Flask框架使用
运维·python·docker·容器·flask·flask框架