文章目录
- [问题一:在conda虚拟环境中报错ImportError: libcupti.so.11.7:cannot open shared object file: No such file or directory](#问题一:在conda虚拟环境中报错ImportError: libcupti.so.11.7:cannot open shared object file: No such file or directory)
- 解决步骤
- [问题二: RuntimeError: CUDA error: CUBLAS_STATUS_INVALID_VALUE when calling cublasSgemmStridedBatched( handle, opa, opb, m, n, k, &alpha, a, lda, stridea, b, ldb, strideb, &beta, c, ldc, stridec, num_batches)。](#问题二: RuntimeError: CUDA error: CUBLAS_STATUS_INVALID_VALUE when calling cublasSgemmStridedBatched( handle, opa, opb, m, n, k, &alpha, a, lda, stridea, b, ldb, strideb, &beta, c, ldc, stridec, num_batches)。)
- 解决方案:
- [问题三: RuntimeError: ProcessGroupNCCL is only supported with GPUs, no GPUs found!](#问题三: RuntimeError: ProcessGroupNCCL is only supported with GPUs, no GPUs found!)
- 解决方案
问题一:在conda虚拟环境中报错ImportError: libcupti.so.11.7:cannot open shared object file: No such file or directory
解决步骤
- 查询是否存在libcupti.so.11.7文件
bash
find / -name libcupti.so.11.7
- 将到nvidia这步都拷贝到conda环境中
bash
# conda 虚拟环境的路径在 cd /opt/conda/envs/你的虚拟环境的名字 下
cp -r /home/ubuntu/.local/lib/python3.8/site-packages/nvidia/ /opt/conda/envs/你的虚拟环境的名字/
问题二: RuntimeError: CUDA error: CUBLAS_STATUS_INVALID_VALUE when calling cublasSgemmStridedBatched( handle, opa, opb, m, n, k, &alpha, a, lda, stridea, b, ldb, strideb, &beta, c, ldc, stridec, num_batches)。
解决方案:
- 方法一:
bash
pip uninstall nvidia-cublas-cu11
- 方法二:
bash
unset LD_LIBRARY_PATH
该命令作用:
unset LD_LIBRARY_PATH 是一个用于清空 Linux 或 Unix 操作系统环境变量 LD_LIBRARY_PATH 的命令。
在 Linux 或 Unix 系统中,LD_LIBRARY_PATH 是一个环境变量,用于指定共享库文件(也称为动态链接库)的搜索路径。当一个程序启动时,系统会在 LD_LIBRARY_PATH 指定的路径下搜索共享库文件。如果 LD_LIBRARY_PATH 没有被设置,系统会使用默认的共享库搜索路径。
使用 unset LD_LIBRARY_PATH 命令可以清空 LD_LIBRARY_PATH 环境变量,这意味着系统将只使用默认的共享库搜索路径。这个命令通常用于解决程序运行时由于错误的 LD_LIBRARY_PATH 设置导致的问题。
问题三: RuntimeError: ProcessGroupNCCL is only supported with GPUs, no GPUs found!
解决方案
- cuda版本和torch版本不匹配的问题
- 查看cuda版本: nvcc --version
- 再去这里查看对应版本并用conda命令安装。