解决docker使用pandarallel报错OSError: [Errno 28] No space left on device

参考:https://github.com/nalepae/pandarallel/issues/127

在使用pandarallel报错OSError: [Errno 28] No space left on device,根据上述issue发现确实默认使用的MEMORY_FS_ROOT为 /dev/shm,而在docker环境下这个目录大小只有64M,完全不够处理数据

因此,需要添加如下代码:

复制代码
os.environ['MEMORY_FS_ROOT'] = "/root" 
os.environ['JOBLIB_TEMP_FOLDER']  = "/root"

一开始已经加了参数而而在pandarallel/core.py中依旧没有被覆盖改写,后来经过打印os.environ发现传入的参数没有覆盖成功,需要将上述代码

复制代码
import os
os.environ['MEMORY_FS_ROOT'] = "/root" 
os.environ['JOBLIB_TEMP_FOLDER']  = "/root"

放在执行文件的最上面即可成功覆盖参数。

相关推荐
BestAns17 分钟前
Docker+Jenkins 自定义镜像指南
docker
荔枝爱编程1 小时前
如何在 Docker 容器中使用 Arthas 监控 Java 应用
java·后端·docker
HONG_YANG2 小时前
2025 热门的 Web 化容器部署工具对比:Portainer VS Websoft9
docker
Peter·Pan爱编程4 小时前
Docker在Linux中安装与使用教程
linux·docker·eureka
__lll_7 小时前
Docker 从入门到实战:容器、镜像与 Compose 全攻略
前端·docker
柏成8 小时前
写给前端仔仔的docker实战
前端·docker·面试
进击的阿尔法猿10 小时前
docker
运维·docker·容器
iceland911 小时前
kubeadm方式部署k8s集群
云原生·容器·kubernetes
木易双人青17 小时前
01-Docker-简介、安装与使用
运维·docker·容器
罗不俷1 天前
【RH134知识点问答题】第13章:运行容器
容器·rhel