Linux 35.6 + JetPack v5.1.4之编译 pytorch

Linux 35.6 + JetPack v5.1.4之编译 pytorch

  • [1. 源由](#1. 源由)
  • [2. 折腾](#2. 折腾)
  • [3. 构建步骤](#3. 构建步骤)
    • [3.1 下载代码](#3.1 下载代码)
    • [3.2 编译选项](#3.2 编译选项)
    • [3.3 CUDA选项](#3.3 CUDA选项)
    • [3.4 CUDA路径](#3.4 CUDA路径)
    • [3.5 版本控制](#3.5 版本控制)
    • [3.6 编译whl](#3.6 编译whl)
  • [4. 总结](#4. 总结)
  • [5. 参考资料](#5. 参考资料)

1. 源由

目前,有很多科研性质的自动导航的开源代码,例如:

但是这些代码都有一个特性,基于ROS系统的一些组件:

当然逻辑上ROS2系统有对应的组件,但是要做升级就需要解决一些兼容性,以及异常问题的DEBUG。可以做,但是。。。。

从学习、研究、以及短平快项目的国内大体环境下,不会去深入系统性的解决问题,除非有利润,这是企业需要做的事情。

为了工作、学习上的收敛,期望jetson orin平台上能够集成更多的功能,我们暂时将目标对准了支持ROS中间件的Jetpack 5.1.4版本。

因为,该版本基于ubuntu20.04,支持ROS中间件,并且NVIDIA大部分AI算法以及Deepstream的功能都支持,且应该BUG修复的相对完善。

但是,pytorch官方仅支持到到2.1版本,虽然Jetpack5系列并未EOL。而在实际应用过程发现NVIDIA pytorch2.1存在导出onnx问题。

因此,想在Jetpack5系列上支持更新的pytorch版本。

2. 折腾

功夫不负有心人,但要做好徒劳无果的准备,通常都是徒劳无果的情况居多!

3. 构建步骤

3.1 下载代码

bash 复制代码
$ git clone git@github.com:pytorch/pytorch.git
$ git checkout v2.3.1
$ git submodule update --init --recursive

注:大家可以直接从pytorch官方网站获取代码,或参考SnapDragonfly/pytorch

3.2 编译选项

bash 复制代码
$ export USE_NCCL=0
$ export USE_DISTRIBUTED=0
$ export USE_QNNPACK=0
$ export USE_PYTORCH_QNNPACK=0
$ export USE_PRIORITIZED_TEXT_FOR_LD=1

注:不同的版本,选项可能有所不同,具体根据实际情况调整。

3.3 CUDA选项

bash 复制代码
$ export TORCH_CUDA_ARCH_LIST="8.7"

注:8.7 是jetson orin板子的CUDA版本。

3.4 CUDA路径

bash 复制代码
$ export PATH=/usr/local/cuda/bin:$PATH
$ export LD_LIBRARY_PATH=/usr/local/cuda/lib64:$LD_LIBRARY_PATH

注:当前使用的CUDA版本,这里是一个软连接。

3.5 版本控制

bash 复制代码
$ export PYTORCH_BUILD_VERSION=2.3.1
$ export PYTORCH_BUILD_NUMBER=1
$ export L4T_BUILD_VERSION=35.6

注1:PYTORCH_BUILD_VERSION 是对应checkout的pytorch版本。
注2:L4T_BUILD_VERSION 是NVIDIA L4T版本号。

3.6 编译whl

bash 复制代码
$ python3 setup.py bdist_wheel

4. 总结

通过不懈的努力,顺利构建了一下二进制:

注:这里需要注意各自板子当前系统的swap内存大小,笔者看到最大使用到9.2GB。

希望,在不久的将来,能够构建出 2.3.1 / 2.4.1 甚至更高的版本!

5. 参考资料

【1】Linux 35.6 + JetPack v5.1.4@yolo安装

【2】Linux 35.6 + JetPack v5.1.4@python opencv安装

【3】Linux 35.6 + JetPack v5.1.4@DeepStream安装

【4】Linux 35.6 + JetPack v5.1.4之RTP实时视频Python框架

【5】Linux swap 配置与虚拟内存

相关推荐
---学无止境---11 分钟前
Linux中系统调用sys_mount函数的实现
linux
黑马金牌编程12 分钟前
tcpdump 常用命令及参数解析
linux·网络·tcpdump·网络抓包
潇I洒13 分钟前
Linux写sh开机启动脚本-bash报错的两种解决方法
java·linux·bash
好记忆不如烂笔头abc13 分钟前
ob恢复租户报错result: -4184(Server out of disk space)
运维·服务器
蓝博AI15 分钟前
基于卷积神经网络的汽车类型识别系统,resnet50,vgg16,resnet34【pytorch框架,python代码】
人工智能·pytorch·python·神经网络·cnn
孙同学要努力16 分钟前
《Linux篇》进程/虚拟地址空间
linux·运维·服务器
zhilin_tang24 分钟前
揭开Linux跨平台 adb调试原理神秘面纱
android·linux
lxw184491251428 分钟前
docker 核心技术浅析
运维·docker·容器
喆星时瑜1 小时前
ComfyUI本地部署Stable Diffusion:核心组件(Python、PyTorch、CUDA)版本与显卡配置全指南
pytorch·python·stable diffusion
梁正雄1 小时前
14、Docker swarm-1-理论
运维·docker·容器