Linux45:RV1126+OPENCV对视频流进行视频腐蚀操作

1**.RV1126+OPENCV** 对视频流进行视频腐蚀操作的大体流程图

本章节属于实战课程,主要是利用RV1126的视频流结合OPENCV的API对视频流进行腐蚀,然后对其进行编码保存。要完成这个功能我们首先要初始化VI、VENC的模块,并且使能,然后需要创建两个线程。第一个线程是opencv_vi_erode_thread 它的主要功能是获取VI原始数据并用OPENCV转换成Mat矩阵然后用erode对其VI数据进行腐蚀,然后把VI数据发送到VENC编码器。

第二个线程是GET_VENC_STREAM_THREAD它主要是获取H264的VENC码流数据,并且保存到H264文件。

二.具体代码实现

2.1. RV1126 模块初始化并启动 VI 工作

上面代码是RV1126模块的初始化,包括VI模块的初始化(RK_MPI_VI_SetChnAttr )、使能VI模块(RK_MPI_VI_EnableChn )、VENC模块的初始化(RK_MPI_VENC_CreateChn )、启动VI工作(RK_MPI_VI_StartStream)。关于这方面的参数设置,我们就不详细说了,因为这方面的内容之前的课程已经详细说过。

2.2. opencv_erode_vi_thread 线程的讲解:

上面是opencv_erode_vi_thread 线程的具体实现,首先我们要通过RK_MPI_SYS_GetMediaBuffer获取每一帧的VI视频原始数据,然后把每一帧的原始数据通过OPENCV转换成Mat矩阵。Mat矩阵的转换用构造器就可以,Mat rv1126_mat = Mat(HEIGHT, WIDTH, CV_8UC1, RK_MPI_MB_GetPtr(mb)); 第一个参数是HEIGHT:1080,第二个参数WIDTH:1920,第三个参数:图像格式CV_8UC1,第四个参数:具体的图像数据RK_MPI_MB_GetPtr(mb) 然后调用erode的对其Mat矩阵进行腐蚀,这里的膨胀参数我们设置成矩形和Size(15,15),具体的( Mat rv1126_structure = getStructuringElement(MORPH_RECT, Size(15, 15)))。

2.3. get_venc_stream_thread 线程的讲解

上面是get_venc_stream_thread 的具体实现,在这个线程里面要通过RK_MPI_SYS_GetMediaBuffer获取每一帧H264的编码数据,然后用fwrite写入。

经过上面的编码后,我们来看看输出的H264文件。这个视频流明显更加暗淡,并且细节都变小了,包括手的部分、窗的部分等等。

相关推荐
AI科技星几秒前
全域谱分析:无穷维超复数信息场分形统一场论 ——自然、量子、金融多重分形第一性原理完整体系(中英双语终稿)
人工智能·机器学习·金融·乖乖数学·全域数学
stormzhangV19 分钟前
为什么你的 AI 像智障
人工智能
ai产品老杨38 分钟前
H264 H265视频分析常见问题和排查清单
人工智能·算法·音视频
项目经理老王1 小时前
OpenClaw无捆绑安装包,安全纯净版AI助手部署
人工智能·安全
梦帮科技1 小时前
GRAVIS v4.0:基于Web的极速套利架构设计与实时数据流实现
前端·人工智能·rust·自动化·区块链·智能合约·数字货币
“码”力全开1 小时前
AI视频分析API性能优化指南
人工智能·性能优化·音视频
liuyicenysabel2 小时前
大模型学习笔记 · 第八篇 · 进阶:偏好对齐与多卡训练
人工智能·笔记·学习
CIO_Alliance2 小时前
iPaaS 生态与选型对比(1)| 开源vs商业 iPaaS:国内外iPaaS系统集成平台怎么选
人工智能·科普·ipaas·选型·系统集成
米小虾2 小时前
为什么 AI 的下一个突破口,不是更大的模型,而是更好的"世界"?
人工智能·agent
有什么事2 小时前
合规倒逼业务重构:豆包下线UGC智能体背后的AI产业变革
人工智能·智能手机