解决容器内deepspeed微调大模型报错

解决容器内deepspeed微调大模型报错:[launch.py:315:sigkill_handler] Killing subprocess

问题描述:

在容器中用deepspeed微调百川大模型2时,出现上述错误,错误是由于生成容器时,共享内存没有设置,采用默认值引起的。终端输入ds_report,可以查看shared_memory,(之前是默认63M,现已调整50G)

解决办法

docker stop 容器名

docker rm 容器名

重新生成容器时加上共享内存参数:--shm-size=1g

例:

docker run -it -d --shm-size=50g --name 容器名--net host --gpus all -v 宿主机路径:容器内路径 -e NVIDIA_DRIVER_CAPABILITIES=compute,utility ubuntu:latest /bin/bash

相关推荐
zhangfeng1133几秒前
ai辅助工作 agent 小龙虾 WorkBuddy vs OpenClaw 深度对比
人工智能
05候补工程师3 分钟前
深度解构 ROS 2:如何手动调通 Nav2 A* 路径规划引擎
linux·人工智能·经验分享·算法·机器人
呆萌的代Ma9 分钟前
docker内的n8n配置Code节点运行python代码
python·docker·容器
fpcc9 分钟前
并行编程实战——异步编程的屏障的整体分析
人工智能·cuda
Jing_jing_X18 分钟前
MCP (一)是什么?一文讲清 AI 如何连接现实世界
数据库·人工智能·oracle
好运的阿财21 分钟前
OpenClaw工具拆解之host_workspace_write+host_workspace_edit
前端·javascript·人工智能·机器学习·ai编程·openclaw·openclaw工具
CodePlayer竟然被占用了23 分钟前
Cursor SDK:用写代码的方式写 Agent
人工智能
eastyuxiao24 分钟前
OpenClaw 自动处理流程图 + 配置清单 可应用场景
人工智能·流程图
沪漂阿龙25 分钟前
从买菜做饭到大模型:一份真正看懂深度学习的硬核指南
人工智能·深度学习
AI周红伟1 小时前
AI学习第一课:OpenClaw企业实战应用工作坊
大数据·人工智能