conda pack环境迁移并下载安装离线包

背景

训练服务器为了安全起见,限制不能联网,无法直接创建虚拟环境及安装模型的依赖库,所以需要把另一台测试服务器已经部署好的虚拟环境迁移到训练服务器上,并在不能联网的情况下安装一些离线包。过程记录如下记录。


一、环境迁移

  1. 进入部署好的虚拟环境的测试服务器,并激活要迁移的环境,我这里的环境名为TSAD,所以相应的激活命令为:

conda activate TSAD

  1. 在TSAD环境下安装pack包

pip install conda-pack

  1. 在TSAD环境下进行打包,打包完成后会在当前目录下生成一个 tar.gz 文件

conda pack -n TSAD

  1. 进入到训练服务器虚拟环境文件夹下,并新建环境文件夹。
    比如我的anaconda3的环境变量路径为:/opt/anaconda3/envs/,则:

cd /opt/anaconda3/envs/

mkdir TSAD

cd TSAD

  1. 将打包好的环境压缩包放到/opt/anaconda3/envs/TSAD目录下并解压:

tar -xzvf TSAD.tar.gz

  1. 解压完毕后,就可以激活环境正常使用了。

二、离线包下载与安装

  1. 在测试服务器(能联网)上下载matplotlib包:

pip download matplotlib==3.6.0 --dest=<下载到地址> -i

https://pypi.tuna.tsinghua.edu.cn/simple

  1. 将下载好的离线包放到训练服务器并安装

pip install --no-index --find-links=<离线包路径> *.whl

三、可能会出现的问题

这里我的测试服务器和训练服务器都是liunx,python都是3.8;如果在windows上下载或者python版本不一样,可能安装时会报错:

xxx is not a supported wheel on this platform

如果出现了上述问题,可参考:
https://blog.csdn.net/happylele77/article/details/134707428
https://blog.csdn.net/lovedingd/article/details/126886431
https://blog.csdn.net/happywlg123/article/details/107281936/

但个人更建议保证下载和安装的服务器都是同系统和同python环境的,这样会更简便,如果下载和安装的服务器是不同系统,按照上述连接的方法比较麻烦而且还有可能会出现下载失败的情况。

相关推荐
怪兽学LLM9 小时前
Conda 环境依赖导出指南:四种常用方法总结
conda
许彰午9 小时前
95_Python内存管理与垃圾回收
开发语言·python
骄阳如火10 小时前
Python 性能深度剖析:从“被诟病的慢”到“Rust 重塑”的拐点
python
满怀冰雪10 小时前
03-第一个 Paddle 程序:Tensor 创建、计算与设备管理
人工智能·python·paddle
CClaris11 小时前
大模型量化从0到1(九):用 llama.cpp 把模型转成 GGUF 并跑本地推理
人工智能·pytorch·python·深度学习·llama
学编程的小虎11 小时前
SenseVoice微调
人工智能·python·自然语言处理
诸葛说抛光11 小时前
国内大型汽车改装展览会定展 佛山改装 佛山汽车赛事
python·汽车
chouchuang11 小时前
day-030-综合练习-笔记管理器
开发语言·笔记·python
乖巧的妹子12 小时前
Python基础核心知识点详解:内置函数、运算符、字符串方法、数据结构与类型转换
python
幸福清风12 小时前
Python 完美处理Excel合并单元格:拆分填充+自动合并
python·excel·合并单元格·拆分单元格