RTMP|RTSP播放器只解码视频关键帧功能探讨

技术背景

我们在做RTMP|RTSP直播播放器的时候,遇到过这样的技术诉求,在一些特定的应用场景中,可能只需要关键帧的信息,例如视频内容分析系统,可能只对关键帧进行分析,以提取特征、检测对象或场景变化。鉴于关键帧包含完整的图像信息,解码时不需要依赖其他帧,可以独立解码。相比之下,预测帧(P 帧)和双向预测帧(B 帧)需要参考其他帧的信息进行解码,在这种情况下,仅解码关键帧可以满足需求,同时避免不必要的解码工作。

技术实现

以大牛直播SDK的Windows平台为例,特别是多路播放或视觉算法内容处理场景下,仅解码播放关键帧非常有必要,为此,我们设计的接口如下:

cpp 复制代码
/*
 * smart_player_sdk.h
 * Created by daniusdk.com (C) All rights reserved.
 *
 *设置只解码视频关键帧
 *is_only_dec_key_frame: 1:表示只解码关键帧, 0:表示都解码, 默认是0
 *成功返回NT_ERC_OK
 */
NT_UINT32(NT_API *SetOnlyDecodeVideoKeyFrame)(NT_HANDLE handle, NT_INT32 is_only_dec_key_frame);

调用非常简单:

cpp 复制代码
void CSmartPlayerDlg::OnBnClickedCheckOnlyDecodeVideoKeyFrame()
{
	if (player_handle_ != NULL)
	{
		player_api_.SetOnlyDecodeVideoKeyFrame(player_handle_, BST_CHECKED == btn_check_only_decode_video_key_frame_.GetCheck() ? 1 : 0);
	}
}

总结

设置只解码视频关键帧,一般来说,需要设计成可动态切换解码绘制所有帧的,方便实际场景下,需要全帧解码播放的时候,确保数据的灵活性和完整性。

相关推荐
爱分享的飘哥39 分钟前
【V6.0 - 听觉篇】当AI学会“听”:用声音特征捕捉视频的“情绪爽点”
人工智能·音视频
许白掰1 小时前
【stm32】HAL库开发——CubeMX配置RTC,单片机工作模式和看门狗
stm32·单片机·嵌入式硬件·学习·实时音视频
菜包eo2 小时前
二维码驱动的独立站视频集成方案
网络·python·音视频
阿蒙Amon4 小时前
【Python小工具】使用 OpenCV 获取视频时长的详细指南
python·opencv·音视频
aqi006 小时前
FFmpeg开发笔记(七十一)使用国产的QPlayer2实现双播放器观看视频
android·ffmpeg·音视频·流媒体
正在走向自律8 小时前
第二章-AIGC入门-开启AIGC音频探索之旅:从入门到实践(6/36)
人工智能·aigc·音视频·语音识别·ai音乐·ai 音频·智能语音助手
美狐美颜sdk16 小时前
跨平台直播美颜SDK集成实录:Android/iOS如何适配贴纸功能
android·人工智能·ios·架构·音视频·美颜sdk·第三方美颜sdk
melonbo19 小时前
使用FFmpeg将H.264码流封装为MP4
ffmpeg·音视频·h.264
aqi0021 小时前
FFmpeg开发笔记(七十七)Android的开源音视频剪辑框架RxFFmpeg
android·ffmpeg·音视频·流媒体
慢行的骑兵1 天前
Android音视频探索之旅 | CMake基础语法 && 创建支持Ffmpeg的Android项目
ffmpeg·音视频