关于Ubuntu的 update造成的内核升级

背景:

注:当前状态无业游民,如有合适工作岗位求捞:个人简历

proxmox8虚拟化的Ubuntu vm实例,vm实例做了显卡直通:Proxmox VE 8.4 显卡直通完整指南:NVIDIA 2080 Ti 实战。安装了 NVIDIA cuda驱动,搭建了comfyui:ubuntu 22.04 anaconda comfyui。前几天刚刚升级了proxmox8到proxmox9:proxmox8升级到proxmox9

今天启动comfyui突然出现了异常:

使用如下命令启动comfyui:

plain 复制代码
systemctl start comfyui
systemctl status comfyui

但是浏览器访问15070端口无法访问:

执行netstat命令发现 15070端口确实没有监听:

plain 复制代码
netstat -ntlp

继续执行 systemctl status comfyui 发现:No CUDA GPUs are available

排查过程:

proxmox测排查

难道proxmox系统升级,pci直通失效了?登录web控制台发现vm实例pci设备在:

vm实例测排查

使用shell登录vm实例执行如下命令,NVIDIA设备也在。但是应该是驱动掉了

plain 复制代码
nvidia-smi
lsmod |grep nvidia
dmesg | grep -i nvidia
uname -a
lspci | grep -i vga

我是直接偷懒重新安装了一下显卡驱动:

plain 复制代码
cd /data/soft/
./NVIDIA-Linux-x86_64-570.144.run

参照:ubuntu22.04安装显卡驱动与cuda+cuDNN

启动comfyui测试

使用如下命令启动comfyui,测试程序是否启动:

plain 复制代码
systemctl start comfyui
systemctl status comfyui
netstat -ntlp

执行执行如

复盘:

什么造成的这种问题呢?仔细想了一下,我有执行过apt-get upgrade apt-get update命令:

是否是发生了内核升级?,如何避免这种状况呢?

禁止内核自动升级

锁定当前内核版本

plain 复制代码
# 查看当前内核版本
uname -r
# 锁定linux-image和linux-headers包
sudo apt-mark hold linux-image-generic linux-headers-generic
sudo apt-mark hold linux-image-$(uname -r) linux-headers-$(uname -r)
# 搜索并列出当前系统中所有被标记为"保留(hold)"状态的软件包
dpkg --get-selections | grep hold

通过这次update代理的思考:

  1. vm实例的备份还是很有必要的(当然了主要我这里是个人的测试环境,正式环境肯定会随时备份镜像)
  2. 用习惯了 redhat系列的 centos rockylinux 操作系统。没有锁定内核的习惯,对于Ubuntu操作系统hold一些关键的内核or其他软件包还是很有必要的。
相关推荐
学代码的CJY2 分钟前
Linux 库制作与原理:静态库、动态库、ELF 与动态链接完全指南
linux·运维·服务器
沸速存储1 小时前
CPU 和 GPU 核心差别在哪?为什么 AI 训练离不开 GPU
服务器·人工智能·科技·嵌入式硬件·电脑
呱呱巨基2 小时前
Linux 查找命令
linux·笔记·学习·查找命令
路由侠内网穿透2 小时前
本地部署企业级快速开发平台芋道管理后台并实现外部访问
运维·服务器·网络·网络协议
basketball6162 小时前
软考中级网络工程师 第4章 无线通信网 备考总结
linux·服务器·网络·网络工程师·软考
yunlaodacom2 小时前
阿里云国际站注册:性能损耗 < 1%!基于 eBPF 的服务器异常预测实战与调优指南
大数据·服务器·阿里云
好评1243 小时前
【Linux】进程信号
linux·运维·服务器
zhangrelay3 小时前
ROS 2 Lyrical 第4章 URDF机器人建模与Gazebo Garden仿真
linux·笔记·学习·ubuntu·机器人·ros2
wuminyu3 小时前
JVM利用io_uring优化堆外内存性能原理剖析
java·linux·c语言·jvm·c++
cakeism8253 小时前
Gitee DevOps 平台定位、核心能力与选型指南
运维·gitee·devops