llama-factory微调报错:

报错信息

INFO\] \[utils.py:789:see_memory_usage\] CPU Virtual Memory: used = 81.51 GB, percent = 64.9% W0419 10:14:27.573000 108354 site-packages/torch/distributed/elastic/multiprocessing/api.py:897\] Sending process 108373 closing signal SIGTERM W0419 10:14:27.594000 108354 site-packages/torch/distributed/elastic/multiprocessing/api.py:897\] Sending process 108375 closing signal SIGTERM W0419 10:14:27.594000 108354 site-packages/torch/distributed/elastic/multiprocessing/api.py:897\] Sending process 108376 closing signal SIGTERM E0419 10:14:33.446000 108354 site-packages/torch/distributed/elastic/multiprocessing/api.py:869\] failed (exitcode: -9) local_rank: 1 (pid: 108374) of binary: /opt/conda/envs/llamaf/bin/python Traceback (most recent call last): File "/opt/conda/envs/llamaf/bin/torchrun", line 33, in sys.exit(load_entry_point('torch==2.5.1', 'console_scripts', 'torchrun')()) xxx xxx xxx torch.distributed.elastic.multiprocessing.errors.ChildFailedError: /home/LLaMA-Factory/src/llamafactory/launcher.py FAILED

由于看到CPU Virtual Memory 只加载到了64.9%,发现是内存不足。

解决方法:

bash 复制代码
# 创建分区路径
sudo mkdir -p /data/swap/
# 设置分区的大小
# bs=128M是块大小,count=64是块数量,
# 所以swap空间大小是bs*count=96GB
sudo dd if=/dev/zero of=/data/swap/swap0 bs=512M count=192
# 设置该目录权限
sudo chmod 0600 /data/swap/swap0
# 创建SWAP文件
sudo mkswap /data/swap/swap0
# 激活SWAP文件
sudo swapon /data/swap/swap0
# 查看SWAP信息是否正确
sudo swapon -s
相关推荐
蛋仔聊测试5 分钟前
Playwright 中特定的 Fixtures
python
蹦蹦跳跳真可爱58912 分钟前
Python----大模型(使用api接口调用大模型)
人工智能·python·microsoft·语言模型
好开心啊没烦恼23 分钟前
Python 数据分析:numpy,抽提,整数数组索引与基本索引扩展(元组传参)。听故事学知识点怎么这么容易?
开发语言·人工智能·python·数据挖掘·数据分析·numpy·pandas
清幽竹客28 分钟前
Day 3:Python模块化、异常处理与包管理实战案例
python
菜包eo1 小时前
二维码驱动的独立站视频集成方案
网络·python·音视频
Yo_Becky2 小时前
【PyTorch】PyTorch预训练模型缓存位置迁移,也可拓展应用于其他文件的迁移
人工智能·pytorch·经验分享·笔记·python·程序人生·其他
yzx9910132 小时前
关于网络协议
网络·人工智能·python·网络协议
fangeqin2 小时前
ubuntu源码安装python3.13遇到Could not build the ssl module!解决方法
linux·python·ubuntu·openssl
Jay Kay3 小时前
TensorFlow源码深度阅读指南
人工智能·python·tensorflow
会的全对٩(ˊᗜˋ*)و3 小时前
【数据挖掘】数据挖掘综合案例—银行精准营销
人工智能·经验分享·python·数据挖掘