第四章 音视频-FFmpeg实现播放器思维

第四章 音视频-FFmpeg实现播放器思维

第一章 音视频-FFmpeg解码流程和对应结构参数意
第二章 音视频-FFmpeg对应解析格式说明
第三章 音视频-FFmpeg对应AVFrame解码处理思路和用途
第四章 音视频-FFmpeg实现播放器思维
第五章 音视频-FFmpeg实现播放器解封装、读AVPacket包
第六章 音视频-FFmpeg实现播放器解码和对应数据处理

播放器实现架构

下图是播放器实现解码原理图

下图播放器上层输出的对应接口设计图,按照播放器调用习惯去设计,可以根据自己需求。

通过以上的解码原理和要实现接口框架,我们就可以形成做播放器的思维,可以根据前面几章节就可以知道,我们要先解封装,创建解码器,实现读包,这里要对应线程去读包,分别去解码音频和视频,在播放时候,视频跟音频同步,最后提供正常播放器接口给调用者。

播放器实现步骤

通过上图的步骤我们清楚知道播放器大概实在,这里的循环解码,写在一起,正常情况,会用到队列分别存储音频和视频的avpaket的包,在音频线程解码音频,在视频线程解码视频,然后进行同步,想要做自己播放器,要先会用别人的,在成熟框架懂得原理,再自己写会更好,这里我们先去学习开源的ijk的播放器,因为ijk包涵ffplay和移动端平台的硬解码播放器,先把思想打开,再开始写自己播放器,上面都为了让你明白播放器流程,可以去git下载ijkplayer,通过下图是ijk的整体流程图:

通过上图就可以查看ijk的实现播放器整个流程,对应创建的线程,可以自己去写一个播放器,这样思维会写更具好,可以参考音视频同步策略,丢帧策略、音频的重采样、视频对应格式转染(格式转换),全搞明白去写自己播放器才能上线使用。

ijkplayer对应git:https://github.com/bilibili/ijkplayer

相关推荐
REDcker12 天前
WebCodecs VideoDecoder 的 hardwareAcceleration 使用
前端·音视频·实时音视频·直播·webcodecs·videodecoder
gihigo199812 天前
基于TCP协议实现视频采集与通信
网络协议·tcp/ip·音视频
山河君12 天前
四麦克风声源定位实战:基于 GCC-PHAT + 最小二乘法实现 DOA
算法·音视频·语音识别·信号处理·最小二乘法·tdoa
音视频牛哥12 天前
Android平台RTMP/RTSP超低延迟直播播放器开发详解——基于SmartMediaKit深度实践
android·人工智能·计算机视觉·音视频·rtmp播放器·安卓rtmp播放器·rtmp直播播放器
qq_4162764212 天前
通用音频表征的对比学习
学习·音视频
美狐美颜sdk12 天前
Android全局美颜sdk实现方案详解
人工智能·音视频·美颜sdk·视频美颜sdk·美狐美颜sdk
EasyDSS12 天前
私有化部署EasyDSS视频点播能力:全链路视频技术赋能,打造企业级视听新体验
音视频·hls·m3u8·点播技术·智能转码
qq_4162764212 天前
DeLoRes——一种通用的音频表征学习新方法(DeLoRes(基于 Barlow Twins 的冗余最小化方法)
学习·音视频
Q_45828386812 天前
从定位到视频:808 + 1078 在各行业的落地实践
音视频
山顶望月川12 天前
实测MiniMax-Hailuo-02:当“开工大吉“变成“无字天书“,国产AI视频模型的能与之不能
人工智能·音视频