jetson orin nano 部署FastDeploy

可能无法编译成功,或编译成功但是无法使用!

据了解飞浆不支持到jetsonr orin nano所使用的jetpack 5.x 6.x版本

先安装PaddlePaddle基础

https://blog.csdn.net/canyingfeixue/article/details/153033153?spm=1001.2014.3001.5501

https://blog.csdn.net/qq_41251963/article/details/130265105

官方编译

https://github.com/PaddlePaddle/FastDeploy/blob/release/2.2/docs/get_started/installation/nvidia_gpu.md

一、下载编译

复制代码
git clone https://github.com/PaddlePaddle/FastDeploy.git
cd FastDeploy/

export BUILD_ON_JETSON=ON
export ENABLE_VISION=ON
 
python setup.py build
python setup.py bdist_wheel

或者

bash build.sh 1 python false [80,90]

import paddle
from paddle.jit.marker import unified
# Verify GPU availability
paddle.utils.run_check()
# Verify FastDeploy custom operators compilation
from fastdeploy.model_executor.ops.gpu import beam_search_softmax

二、报错处理

安装triton

复制代码
git clone https://github.com/triton-lang/triton.git
cd triton

pip install -r python/requirements.txt # build-time dependencies
pip install -e .
相关推荐
缘友一世5 小时前
GLM5.3 flash cybersec本地部署[5]:生产运维与故障恢复
ubuntu·vllm·glm5.3 flash
工业一体机老司机18 小时前
工业一体机选购后的系统部署:Ubuntu下Docker容器化运行与GPIO配置
linux·ubuntu·docker·人机交互
夏虫不可与之言冰19 小时前
Windows WSL2 (Ubuntu) 搭建 ESP‑IDF 6.1 开发环境全过程演示
linux·windows·ubuntu·esp32·乐鑫科技·乐鑫eim·乐鑫代理商
人生百态,人生如梦1 天前
Ubuntu在低版本下使用ccswitch+claudecode(CCSwitch+Docker+Claude)连调教程
linux·ubuntu·docker·claudecode·ccswitch
坐看风云变幻1 天前
Betaflight 开发环境搭建保姆级教程(Ubuntu / Windows+WSL / Docker 三方案 + 官方网址大全)
windows·ubuntu·docker·无人机·飞控·betaflight
远牧1 天前
Ubuntu 26 升级踩坑实录:hermes-agent venv 重建全过程
linux·ubuntu·ai·agent
眼不痛请看我1 天前
Ubuntu_22.04_LTS虚拟机安装指南
linux·数据库·ubuntu
缘友一世1 天前
校园网有线网络排查(NetworkManager与netplan的坑)
ubuntu·校园网
大鹏的NLP博客2 天前
WSL Ubuntu 26.04 升级与环境整理记录
linux·ubuntu·wsl
忆挽篱笙歌2 天前
gdb/cgdb
linux·ubuntu