- 现象:exits with return code -7
- 原因 :Setting the shm-size to a large number instead of default 64MB when creating docker container solves the problem in my case. It appears that multi-gpu training relies on the shared memory. ref
- 排查是否是shm-size过小: 在服务器上执行
ds_report,查看最后一行的是不是shared memory (/dev/shm) size .... 64.00 MB
- 排查是否是shm-size过小: 在服务器上执行
- 解决方案:增加docker的shm
deepseed 单机多卡程序报错:exits with return code -7
遇到好事了2024-01-16 13:30
相关推荐
Zzj_tju1 小时前
准确率不变,概率质量也不变吗?在所不辞兄3 小时前
【零基础学智能仿真-67】力学知识库与检索增强拜小白3 小时前
【论文解读】ZInD:带标注平面图、360° 全景与 3D 房间布局的 Zillow 室内数据集DevOps老兵4 小时前
Transformer拆解01:Transformer为什么出现,RNN到底卡在哪里zcg19426 小时前
通过UE制作segment和depth数据Yolanda_20229 小时前
week3深度学习处理文本(上)Smoothcloud润云9 小时前
GPU算力平台推荐:复现实验时,如何判断租用资源是否合适?Rocky Ding*10 小时前
深入浅出Xiaomi-Lens-0技术解析:像素监督如何改变视觉推理默|笙10 小时前
【AI应用】认识机器学习与深度学习JAVA_AI人工智能项目实战10 小时前
深度学习实验笔记