Linux_54:RV1126的VI模块讲解

一.本章节介绍

本章节主要是介绍rockx+rv1126人脸识别推流项目的VI模块的初始化,这个项目的VI模块需要初始化两个,一个是用于rockx的人脸检测、人脸识别的处理。另外一个则用于显示AI处理结果。设置VI模块的代码在rkmedia_module_function.cpp里面。

二.VI模块的思维导图

上面思维导图主要是描述VI模块设置的大致流程,这里要创建两个RV1126_VI_CONFIG结构体并进行参数设置,第一个是用于rockx人脸检测、识别,第二个是用于显示AI处理结果。设置完参数之后,则需要调用rkmedia_vi_init去初始化这两个VI模块并且使能,最后把这两个VI模块的ID号存放到数组里面(vi_containers)。

三、VI模块代码的截图

3.1. rockx VI 模块设置

id **:**VI模块的id号,用于初始化和使能VI模块

pcVideoNode: 摄像头的视频节点,这里默认是rkispp_scale0

u32BufCnt **:**缓冲区计数,默认是3

u32Width **:**VI模块分辨率宽度1920

u32Height **:**VI模块分辨率高度1080

enPixFmt **:**图像格式默认是NV12,这里填的是IMAGE_TYPE_NV12

enBufType **:**VI模块捕捉视频的类型,这里默认填写MMAP

enWorkMode **:**VI工作模式,这里写的是VI_WORK_MODE_NORMAL

设置完上述参数后,则需要调用set_vi_container把VI的模块号放到数组里面,这里数组的索引号是0。

3.2. 显示 AI 结果的 VI 模块设置

这部分的参数跟上面大部分是相同的,区别在于pcVideoNode rockx VI模块的pcVideoNode是rkispp_scale0 ,而显示VI模块的pcVideoNode是rkispp_scale1,下面我们来看具体的参数设置。

id **:**VI模块的id号,用于初始化和使能VI模块

pcVideoNode: 摄像头的视频节点,这里选择的是rkispp_scale1

u32BufCnt **:**缓冲区计数,默认是3

u32Width **:**VI模块分辨率宽度1920

u32Height **:**VI模块分辨率高度1080

enPixFmt **:**图像格式默认是NV12,这里填的是IMAGE_TYPE_NV12

enBufType **:**VI模块捕捉视频的类型,这里默认填写MMAP

enWorkMode **:**VI工作模式,这里写的是VI_WORK_MODE_NORMAL

设置完上述参数后,则需要调用set_vi_container把VI的模块号放到数组里面,这里数组的索引号是1。

3.3. 启动两个 VI 模块进行视频采集

设置完两个VI模块的参数之后,就需要启动模块进行视频数据的采集,这里直接调用RK_MPI_VI_StartStream去开启摄像头的两个视频模块进行采集。

3.4. rkmedia_vi_init 函数的实现

rkmedia_vi_init 这个自定义函数里面,关键是对VI进行初始化和使能,它分别调用了RK_MPI_VI_SetChnAttr的API对VI模块的属性进行初始化,然后再调用RK_MPI_VI_EnableChn对其使能。

3.5. set_vi_container 函数的实现

上面是set_vi_container 函数的实现,这里要把VI的模块号存放到RV1126_VI_CONTAINTER结构体容器里面。

相关推荐
cuguanren3 分钟前
Agent 框架的会话记忆管理机制
人工智能·ai·大模型·llm·agent·上下文管理·会话记忆管理
不会就选b8 分钟前
Linux之线程池(三)
linux·开发语言
高工智能汽车9 分钟前
从“借船”到“造船”,汽车芯片出海迎历史性一跃
人工智能·汽车
l1258659 分钟前
# LangGraph Deep Research Agent 全流程设计:多轮研究、人机协同与真实来源管理
数据库·人工智能·python·算法·自然语言处理·oracle·langchain
leoZ23110 分钟前
AI+前端提效- 06 AI辅助调试排错:前端报错、白屏、兼容问题极速定位
前端·人工智能·chatgpt·状态模式·超分辨率重建·openvino·dreamfusion
方银的技术分享11 分钟前
五、AI训练师:数据标注-视频标注
人工智能·音视频
Sylvia-girl14 分钟前
【一】:Linux基础指令
linux·运维·服务器
李昊哲小课16 分钟前
SpringBoot4 云端咖啡站 阶段五:交付与进阶
人工智能·spring boot·大模型·log4j·智能体
阿里云大数据AI技术22 分钟前
一套 Spark SQL,打通多种 Catalog:EMR Serverless Spark 统一数据处理实践
人工智能·sql·spark
BFT白芙堂23 分钟前
Franka & DROID :面向真实场景的机器人操作数据集
人工智能·学习·机器学习·机器人·具身智能·franka·robotiq