完整代码:putaoc/音视频
一.整体逻辑

二.细节讲解
1.音频重采样
为什么要进行重采样,因为原始音频存储是以AV_SAMPLE_FMT_S16, 而对于MP4文件通常是以AV_SAMPLE_FMT_FLTP存储数据并且,对于编译器来讲浮点数 更加的好处理。
2.音视频编码
对于编码,将音频和视频进行封装成AudioEncoder VideoEncoder,对于编码需要初始 上下文,一个是要找对对应的编码器比如 编码为H264 AAC 对应格式的编码器,然后需要对上下文初始化原始音频的一些参数如图上的List。
3.音视频封装
将对应的 音频流 视频流加入到AVFormatContext,然后利用AVCodecContext 初始化对应的流参数。最终调用send recieve 后得到mp4数据。
这里需要注意的是记得调用avformat_write_header av_write_trailer,因为对于封装音视频的容器通常会有对于的信息头 和 信息尾。所以再写之前和写完后记得调用。
4.音视频同步
对于音视频同步 首先需要将自己设置一个基准,然后 再进行对于的编码时候,要将pts转换为,因为编码器的 base_time与我们自己设置的不同 所以为了 保持 pts*base_time后的时间一致,需要进行转换 pts1 * base_time1=pt2*base_time2,就能算出pts2,这个就是发送帧需要设置的 pts。
5.Flush
最后如果文件读取结束,要对编码器的进行flush,避免数据的丢失。