jetson orin nano 部署FastDeploy

可能无法编译成功,或编译成功但是无法使用!

据了解飞浆不支持到jetsonr orin nano所使用的jetpack 5.x 6.x版本

先安装PaddlePaddle基础

https://blog.csdn.net/canyingfeixue/article/details/153033153?spm=1001.2014.3001.5501

https://blog.csdn.net/qq_41251963/article/details/130265105

官方编译

https://github.com/PaddlePaddle/FastDeploy/blob/release/2.2/docs/get_started/installation/nvidia_gpu.md

一、下载编译

复制代码
git clone https://github.com/PaddlePaddle/FastDeploy.git
cd FastDeploy/

export BUILD_ON_JETSON=ON
export ENABLE_VISION=ON
 
python setup.py build
python setup.py bdist_wheel

或者

bash build.sh 1 python false [80,90]

import paddle
from paddle.jit.marker import unified
# Verify GPU availability
paddle.utils.run_check()
# Verify FastDeploy custom operators compilation
from fastdeploy.model_executor.ops.gpu import beam_search_softmax

二、报错处理

安装triton

复制代码
git clone https://github.com/triton-lang/triton.git
cd triton

pip install -r python/requirements.txt # build-time dependencies
pip install -e .
相关推荐
南城猿2 小时前
保姆级 Ubuntu 部署 禅道
linux·运维·ubuntu
zhangrelay3 小时前
三分钟云课实践速通--模拟电子技术-模电--SimulIDE
linux·笔记·学习·ubuntu·lubuntu
政宇 | STAR3 小时前
docker相关
ubuntu
wj3055853783 小时前
CC-Switch 在 WSL Ubuntu 中安装记录
linux·运维·ubuntu
Lw老王要学习4 小时前
Ubuntu(WSL2)完全可以安装到其他盘,避免占用 C 盘空间
ubuntu
Lw老王要学习8 小时前
本地部署OpenClaw + WSL Ubuntu + 千问云+QQ+微信+飞书
ubuntu·llm·agent·openclaw·龙虾
Digital2Slave8 小时前
如何在ubuntu20.04系统配置Claude code使用中国大模型
ubuntu·claude code
Danileaf_Guo8 小时前
手搓KVM虚拟化!Ubuntu 26.04 + KVM 7.0.0,告别VMware的低成本玩法
linux·运维·服务器·ubuntu
暮色念了红尘8 小时前
CC Switch — Ubuntu 20.04 可用版本
ubuntu·ai·rust·ubuntu 20.04·vibe coding·cc swich
ting94520009 小时前
Plurai 深度解析:用 “氛围训练” 重构 AI 智能体可靠性,从原型到生产的全链路解决方案
人工智能·ubuntu·重构