jetson orin nano 部署FastDeploy

可能无法编译成功,或编译成功但是无法使用!

据了解飞浆不支持到jetsonr orin nano所使用的jetpack 5.x 6.x版本

先安装PaddlePaddle基础

https://blog.csdn.net/canyingfeixue/article/details/153033153?spm=1001.2014.3001.5501

https://blog.csdn.net/qq_41251963/article/details/130265105

官方编译

https://github.com/PaddlePaddle/FastDeploy/blob/release/2.2/docs/get_started/installation/nvidia_gpu.md

一、下载编译

复制代码
git clone https://github.com/PaddlePaddle/FastDeploy.git
cd FastDeploy/

export BUILD_ON_JETSON=ON
export ENABLE_VISION=ON
 
python setup.py build
python setup.py bdist_wheel

或者

bash build.sh 1 python false [80,90]

import paddle
from paddle.jit.marker import unified
# Verify GPU availability
paddle.utils.run_check()
# Verify FastDeploy custom operators compilation
from fastdeploy.model_executor.ops.gpu import beam_search_softmax

二、报错处理

安装triton

复制代码
git clone https://github.com/triton-lang/triton.git
cd triton

pip install -r python/requirements.txt # build-time dependencies
pip install -e .
相关推荐
张飞飞飞飞飞13 天前
Tmux命令使用教程
linux·服务器·ubuntu
盼小辉丶13 天前
Ubuntu极速部署OpenClaw完全指南(本地模型+DeepSeek)
linux·ubuntu·openclaw
黑白园13 天前
【环境搭建】Ubuntu安装(一)
linux·ubuntu
Moshow郑锴13 天前
Ubuntu用SDKMAN轻松管理多个Java 版本
java·ubuntu·sdkman
error:(13 天前
Ubuntu 22.04 GNOME远程桌面配置问题排查与解决全流程
linux·运维·ubuntu
Java知识技术分享13 天前
在windows上使用wsl安装Ubuntu~linux系统
linux·人工智能·windows·ubuntu
天疆说13 天前
在 Ubuntu 24.04 上安装 MATLAB R2021b
数据库·ubuntu·matlab
Clang's Blog13 天前
Ubuntu(20.04/22.04/24.04)国内环境一键安装 Docker、JDK17 和 Maven
ubuntu·docker·maven
izcll13 天前
ubuntu系统安装软件的方法
linux·运维·ubuntu
天疆说13 天前
在 Ubuntu 的 VSCode 中配置 MATLAB
vscode·ubuntu·matlab