YOLOv5 移植 RK3588 踩坑记录

YOLOv5 移植 RK3588 踩坑记录

(pt → onnx → rknn 全流程)

环境:YOLOv5-5.x / rknn-toolkit2 / Python≥3.8 板卡:RK3588

目标:复用官方 yolov5_rknn 示例,仅替换 *.rknn + *.yaml 即可跑通


1. pt → onnx 转换

1.1 原生 export.py 直接转会报错

bash 复制代码
python export.py --weights yolov5s.pt --include onnx

运行 rknn 示例 test.py 时:

sql 复制代码
IndexError: list index out of range

原因:Detect 层输出 tuple,而 rknn 示例只拿 list 第 1 个特征图。


1.2 修改 1:去掉 Detect 后处理,只输出 3 个 sigmoid 特征图

文件 models/yolo.py
Detect.forward()
原始代码(已注释):

python 复制代码
def forward(self, x):
    z = []
    for i in range(self.nl):
        x[i] = self.m[i](x[i])  # conv
        bs, _, ny, nx = x[i].shape
        x[i] = x[i].view(bs, self.na, self.no, ny, nx).permute(0, 1, 3, 4, 2).contiguous()
        if not self.training:
            ...
            z.append(y.view(bs, self.na * nx * ny, self.no))
    return x if self.training else (torch.cat(z, 1), ) if self.export else (torch.cat(z, 1), x)

修改为

python 复制代码
def forward(self, x):
    z = []
    for i in range(self.nl):
        z.append(torch.sigmoid(self.m[i](x[i])))  # 仅卷积+sigmoid
    return z

说明:

  1. 不再做 view/permute/grid/anchor 等后处理;
  2. 返回 List[Tensor],rknn 侧直接拿 3 个特征图。

1.3 修改 2:export.py 支持 list 类型输出

文件 export.py
位置run() 函数里获取 output shape 处
原始

python 复制代码
shape = tuple((y[0] if isinstance(y, tuple) else y).shape)

改为

python 复制代码
shape = tuple((y[0] if (isinstance(y, tuple) or isinstance(y, list)) else y).shape)

保证 y 为 list 时也能正常取第 0 个元素。


1.4 重新转 onnx

bash 复制代码
python export.py --weights yolov5s.pt --include onnx

用 Netron 打开,确认尾部只剩 3 个 Sigmoid 节点,无 Detect 算子。


2. anchors 文件生成(踩坑 2)

背景 :RKNN 示例后处理需要 anchors,必须与训练时保持一致。
工具 :官方 yolov5_rknn 已提供 export.py无需手动改 anchor

bash 复制代码
git clone https://github.com/airockchip/yolov5_rknn
cd yolov5_rknn
python export.py --rknpu --weights car_tk_hanma.pt

执行完毕会自动生成:

复制代码
RK_anchors.txt

内容示例(9 行):

erlang 复制代码
32.0
32.0
...

若用自己改过的 export.py 忘记生成,会导致 rknn 推理框全部漂移或 0 检出。


3. onnx → rknn

  1. 把上一步得到的 *.onnx + RK_anchors.txt 复制到
    rknn-toolkit2/examples/yolov5/python 目录。

  2. 修改 yaml 文件(类别名/anchor 路径):

    yaml 复制代码
    anchors_path: RK_anchors.txt
    names: ['class1', 'class2', ...]
  3. 执行:

    bash 复制代码
    python test.py

    会自动完成 onnx → rknn 转换 + 板端推理。


4. 一键总结

步骤 关键修改 文件
① 去掉 Detect 后处理 forward 返回 List[sigmoid(feat)] models/yolo.py
② export 支持 list isinstance(y, tuple) or isinstance(y, list) export.py
③ 生成 anchors --rknpu 开关 官方 export.py
④ 转 rknn 直接跑 test.py rknn-toolkit2 示例

相关推荐
iCxhust2 小时前
【无标题】8086/8088裸机对于学习微机原理的重要意义
汇编·单片机·嵌入式硬件·嵌入式·微机原理
左手厨刀右手茼蒿16 小时前
Linux 内核中的设备驱动开发:从字符设备到网络设备
linux·嵌入式·系统内核
吃米饭1 天前
HC32L021C8UB 移植 FreeRTOS
stm32·嵌入式·freertos·rtos
2023自学中2 天前
make clean 与 make distclean
linux·嵌入式
栈时没有名字2 天前
git仓库管理,commit或push上传服务器失败问题
git·嵌入式
CodeQingqing2 天前
反汇编在嵌入式的使用
stm32·嵌入式·反汇编
济6172 天前
FreeRTOS 控制任务设计 (3)--- 闭环控制验证:仿真电机模型与软反馈实现
嵌入式·freertos
凉、介2 天前
C 语言类型强转引发的隐蔽内存破坏问题分析
c语言·开发语言·笔记·学习·嵌入式
嵌入式小企鹅3 天前
嵌入式面试宝典
学习·面试·嵌入式·嵌入式工程师·高薪offer
星瞳科技OpenMV3 天前
国家级高新技术企业星瞳科技,定义嵌入式机器视觉行业新标杆
人工智能·嵌入式·图像识别·机器视觉·openmv·星瞳科技·星瞳科技openmv