jetson orin nano 部署FastDeploy

可能无法编译成功,或编译成功但是无法使用!

据了解飞浆不支持到jetsonr orin nano所使用的jetpack 5.x 6.x版本

先安装PaddlePaddle基础

https://blog.csdn.net/canyingfeixue/article/details/153033153?spm=1001.2014.3001.5501

https://blog.csdn.net/qq_41251963/article/details/130265105

官方编译

https://github.com/PaddlePaddle/FastDeploy/blob/release/2.2/docs/get_started/installation/nvidia_gpu.md

一、下载编译

复制代码
git clone https://github.com/PaddlePaddle/FastDeploy.git
cd FastDeploy/

export BUILD_ON_JETSON=ON
export ENABLE_VISION=ON
 
python setup.py build
python setup.py bdist_wheel

或者

bash build.sh 1 python false [80,90]

import paddle
from paddle.jit.marker import unified
# Verify GPU availability
paddle.utils.run_check()
# Verify FastDeploy custom operators compilation
from fastdeploy.model_executor.ops.gpu import beam_search_softmax

二、报错处理

安装triton

复制代码
git clone https://github.com/triton-lang/triton.git
cd triton

pip install -r python/requirements.txt # build-time dependencies
pip install -e .
相关推荐
玖石书4 小时前
Ubuntu 更换 USTC 镜像源完整指南(AMD64 / AARCH64)
linux·运维·ubuntu
牢姐与蒯5 小时前
Linux进程(五).之环境变量
linux·运维·服务器·ubuntu
黑臂麒麟6 小时前
Harmony鸿蒙实战应用4:随手账本——编辑与删除账单
ubuntu·华为·鸿蒙
玖石书7 小时前
WSL2 手动安装 Ubuntu 24.04 到指定磁盘位置
linux·运维·ubuntu·wsl
冰雪青松18 小时前
Ubuntu 运维命令大全:从入门到精通的实战参考手册
运维·服务器·ubuntu
feilieren1 天前
ubuntu 安装 docker
linux·ubuntu·docker
飞询1 天前
ubuntu 安装 docker
ubuntu·docker
loong_XL1 天前
Windows WSL2 Ubuntu 搭建 Xvfb 虚拟桌面环境,完美支持多 Agent 隔离
linux·windows·ubuntu
钟良堂2 天前
Ubuntu 20.04 部署 ORB_SLAM3 完整流程与踩坑总结
linux·运维·ubuntu