ncnn-android-yolov7跑自己模型的注意事项

ncnn-android-yolov7


这是一个示例 ncnn android 项目,它依赖于 ncnn 库和 opencv

https://github.com/Tencent/ncnn

https://github.com/nihui/opencv-mobile

https://github.com/xiang-wuu/ncnn-android-yolov7

如何构建和运行


步骤1

https://github.com/Tencent/ncnn/releases

下载 ncnn-YYYYMMDD-android-vulkan.zip或自己构建 ncnn for android

将 ncnn-YYYYMMDD-android-vulkan.zip 提取到 app/src/main/jni 中,并在 app/src/main/jni/CMakeList 中将ncnn_DIR路径更改为您的路径.txt

步骤2

https://github.com/nihui/opencv-mobile

下载opencv-mobile-XYZ-android.zip

将opencv-mobile-XYZ-android.zip提取到app/src/main/jni中,并在app/src/main/jni/CMakeLists中将OpenCV_DIR路径更改为您的路径.txt

步骤3

使用Android Studio打开这个项目,构建它并享受!

一些注意事项

  1. 安卓 ndk 相机用于最佳效率
  2. 由于缺少HAL3相机接口,崩溃可能发生在非常旧的设备上
  3. 所有模型均手动修改以接受动态输入形状
  4. 大多数小型模型在 GPU 上的运行速度比在 CPU 上的运行速度慢,这很常见
  5. 由于相机曝光时间较长,在黑暗环境中的FPS可能较低

跑自己的模型


流程:pt->onnx->ncnn。

1、yolov7(pt->onnx)

下载代码和权重,这里用的是tiny。

代码用main分支的,权重手动下载release里的。

运行

复制代码
python export.py yolov7-tiny.pt --simplify

运行时要加simplify,不然onnx转ncnn会有不支持的算子。

2、ncnn(onnx->ncnn)

使用下面这个网站转换,要把三个勾都选上。

https://convertmodel.com

3、修改权重输入输出

进入Netron,上传自己的param文件查看权重输入输出(1个输入、3个输出),并更改代码后即可直接编译;

获取晚后在ncnn-android-yolov7/app/src/main/jni/yolo.cpp的Yolo::detect方法修改着几个地方:

复制代码
in0->images
out0->265
out1->279
out2->293

4、修改标注类别名称

不出意外,到这里重新编译一下就可以

由于部分设备不支持camera2,新增JNI方法,传图片进行识别


具体调用看MainActivity处理

THE END


感谢查阅

玉念聿辉:编辑

相关推荐
蒸鱼Yuzheng6 小时前
设备端性能工件可靠导出:断点续传、哈希、manifest 与失败恢复
android·自动化测试·python·adb·数据完整性
美狐美颜sdk7 小时前
直播APP接入美颜SDK后出现卡顿怎么办?从性能瓶颈寻找解决方案
android·人工智能·音视频·美颜sdk·直播美颜sdk
美狐美颜SDK开放平台8 小时前
直播APP开发实战:从摄像头调用到视频美颜sdk集成
android·人工智能·计算机视觉·音视频·直播美颜sdk
richard_yuu8 小时前
动态规划:强化学习的「数学基础」,从 MDP 到值迭代
深度学习·神经网络·算法·yolo·机器学习·动态规划
alexhilton8 小时前
生命周期感知的多模块启动模式
android·kotlin·android jetpack
三少爷的鞋9 小时前
Android 架构指南:suspend 如何响应取消?别再给 Repository 加 `cancel()`
android
迪飞特科技10 小时前
【无标题】
android·人工智能·本地化大模型
FlightYe10 小时前
视界原理之2D视频(二):视频文件里有什么
android·linux·网络·c++·ffmpeg·音视频·aac
传奇开心果编程11 小时前
【Flutter入门练中学】第8课:动画与过渡
android·学习·flutter·ui·ios
初学大模型12 小时前
先剔后识:OpenCV三维预处理与YOLO语义检测协同的机器人视觉系统可行性分析
人工智能·opencv·yolo·计算机视觉·机器人