jetson orin nano 部署FastDeploy

可能无法编译成功,或编译成功但是无法使用!

据了解飞浆不支持到jetsonr orin nano所使用的jetpack 5.x 6.x版本

先安装PaddlePaddle基础

https://blog.csdn.net/canyingfeixue/article/details/153033153?spm=1001.2014.3001.5501

https://blog.csdn.net/qq_41251963/article/details/130265105

官方编译

https://github.com/PaddlePaddle/FastDeploy/blob/release/2.2/docs/get_started/installation/nvidia_gpu.md

一、下载编译

复制代码
git clone https://github.com/PaddlePaddle/FastDeploy.git
cd FastDeploy/

export BUILD_ON_JETSON=ON
export ENABLE_VISION=ON
 
python setup.py build
python setup.py bdist_wheel

或者

bash build.sh 1 python false [80,90]

import paddle
from paddle.jit.marker import unified
# Verify GPU availability
paddle.utils.run_check()
# Verify FastDeploy custom operators compilation
from fastdeploy.model_executor.ops.gpu import beam_search_softmax

二、报错处理

安装triton

复制代码
git clone https://github.com/triton-lang/triton.git
cd triton

pip install -r python/requirements.txt # build-time dependencies
pip install -e .
相关推荐
用户8351414049493 小时前
把日志和寄存器值喂给AI做故障定位,我的实际问法
linux·ubuntu
进击的荆棘4 小时前
MySQL——在ubuntu环境下安装MySQL
数据库·mysql·ubuntu
易点云徐源1 天前
HP 暗影精灵 PRO 16 安装双系统后,开机直接进入 Windows,按 F9 才能进入 Ubuntu:GRUB 菜单不显示的处理方法
linux·运维·ubuntu
Sayai1 天前
Ubuntu 开发环境搭建避坑(一):网卡 EEE 致 60% 周期性丢包,Realtek RTL8125 网络黑洞排查与修复
linux·运维·网络·ubuntu·性能优化
牢姐与蒯1 天前
WSL2 迁移教程:把Ubuntu+WSL2从C盘挪到别的盘
linux·运维·服务器·网络·ubuntu·1024程序员节
小菜要扣篮1 天前
Ubuntu 下使用 vscode 打开 C++ 项目后,无法通过 F12 定位到定义问题解决
c++·vscode·ubuntu
hhhjhl3 天前
Undici 跨端三方库仓颉适配全流程
java·开发语言·ubuntu
~城南花已开~3 天前
Intel E810 SR-IOV VF Spoofcheck 防伪造测试-KVM3
服务器·网络·笔记·学习·ubuntu·etl工程师
十年磨一剑~3 天前
APT 仓库包查看方法文档
linux·ubuntu
技术小事3 天前
Surface 装 Ubuntu 双系统
linux·运维·ubuntu