Tensorflow调用训练好的yolov5模型进行推理

文章目录

1、安装TensorFlow-GPU版本

bash 复制代码
1、创建虚拟环境python=3.8
conda create -n TF2.4 python=3.8

2、进入虚拟环境
conda activate TF2.4

3、去官网查看tensorflow对应cuda的版本
https://tensorflow.google.cn/install/source_windows?hl=zh-cn

conda search找找当前源下的CUDA与cuDNN有没有我们要的版本:

bash 复制代码
conda search cuda
conda search cudnn

conda install cudatoolkit=11.0.221
conda install cudnn=8.2.1

# 安装tensorflow-gpu版本
pip install tensorflow-gpu==2.4.0


1.2、验证是否安装正常

python 复制代码
import tensorflow as tf
print(tf.__version__)
print(tf.test.is_gpu_available())

2、将训练好的pt文件转换成onnx文件

2.2、什么是Onnx模型和Tensorflow模型

Onnx(Open Neural Network Exchange)是一种开放的深度学习模型交换格式,用于在不同的深度学习框架之间共享模型。它提供了一个中间格式,可以将模型从一个框架转换为另一个框架。

Tensorflow是一个广泛使用的深度学习框架,提供了强大的模型构建和训练工具。Tensorflow模型通常以.pb文件格式保存,它包含了模型的结构和参数。

2.1、将onnx文件转换成pb文件

可以通过yolov5中export.py文件进行转换

python 复制代码
python export.py --weights weights/best.pt --include onnx engine --img 640 --device 0

pb文件是tensorflow中可以使用的文件

使用代码进行转换

pip install --user tensorflow_probability==0.7.0

python 复制代码
import onnx
from onnx_tf.backend import prepare
import tensorflow.keras as keras



# 加载Onnx模型
onnx_model = onnx.load('best.onnx')

# 转换为Tensorflow模型
tf_model = prepare(onnx_model)

# 保存为.pb文件
tf_model.export_graph('best.pb')

源码进行转换

源码下载:https://github.com/onnx/onnx-tensorflow#installation

之后再终端安装:

python 复制代码
pip install -e.
pip install tensorflow-addons

都安装好之后就可以直接在终端进行转换了

python 复制代码
onnx-tf convert -i D:\\yolov5_back\\weights\\best.onnx -o D:\\yolov5_back\\weights\\best.onnx.pb

转换过程中可能会报两个错误:

错误1:from keras import backend

ModuleNotFoundError: No module named 'keras'

python 复制代码
# 点击进入报错的文件中,修改这行
from tensorflow.keras import backend

错误2:

from tensorflow.keras.utils import tf_utils

ImportError: cannot import name 'tf_utils' from 'tensorflow.keras.utils' (C:\Users\Administrator.conda\envs\Tensorflow_gpu_2.4\lib\site-packages\tensorflow\keras\utils_init_.py)

python 复制代码
# 解决方法直接将这行注释掉
from keras.utils import tf_utils
相关推荐
心念枕惊4 天前
Conda 环境一键搬家:用 conda-pack 打包带走,连网都不用
conda·neo4j
码农学院13 天前
Neo4j知识图谱赋能跨境电商GEO:LLM实体识别与AI搜索引擎结构化数据输出实战
人工智能·知识图谱·neo4j
TE-茶叶蛋13 天前
RAG智能电商客服什么时候上Neo4j?
neo4j
羊羊小栈13 天前
基于GraphRAG的税务财务智能问答系统(Neo4j_大语言模型)
人工智能·算法·语言模型·自然语言处理·毕业设计·neo4j·大作业
hhzz15 天前
(九)在MCU上跑AI推理:ESP-DL vs TFLite Micro,选哪个?怎么优化?
人工智能·单片机·neo4j·esp·ai推理
༄沐࿆风࿆࿆15 天前
neo4j Desktop下载学习笔记
笔记·学习·neo4j
我是唐青枫15 天前
Java Neo4j 实战指南:从图模型、Cypher 到 Spring Boot 关系查询
java·spring boot·neo4j
AI-好学者20 天前
RDF对比与Neo4j性能优化
人工智能·知识图谱·neo4j·knowledge graph
冷小鱼25 天前
Neo4j 深度解析:从原生图存储到 GraphRAG 的知识图谱革命
人工智能·知识图谱·neo4j
24计网1王仔寿1 个月前
Linux运维与云计算全栈系统化学习指南(Shell+虚拟化+OpenStack+Docker+公私云实战)
linux·课程设计·数据库开发·微信公众平台·neo4j·命令模式·sequoiadb