ffmpeg播放音视频流程

文章目录

    • [🎬 FFmpeg 解码播放流程概览(以音视频文件为例)](#🎬 FFmpeg 解码播放流程概览(以音视频文件为例))
      • [1️⃣ 创建结构体](#1️⃣ 创建结构体)
      • [2️⃣ 打开音视频文件](#2️⃣ 打开音视频文件)
      • [3️⃣ 查找解码器并打开解码器](#3️⃣ 查找解码器并打开解码器)
      • [4️⃣ 循环读取数据包(Packet)](#4️⃣ 循环读取数据包(Packet))
      • [5️⃣ 解码成帧(Frame)](#5️⃣ 解码成帧(Frame))
      • [6️⃣ 播放 / 显示 / 播放音频](#6️⃣ 播放 / 显示 / 播放音频)
      • [7️⃣ 清理资源](#7️⃣ 清理资源)
    • [✅ 总结一句话流程:](#✅ 总结一句话流程:)

🎬 FFmpeg 解码播放流程概览(以音视频文件为例)

1️⃣ 创建结构体

准备容器结构体,用于打开媒体文件并读取信息

  • 创建 AVFormatContext

    c 复制代码
    AVFormatContext *fmt_ctx = NULL;
  • 【可选】使用 avformat_alloc_context 手动分配(很多时候由 avformat_open_input 自动完成)


2️⃣ 打开音视频文件

打开媒体文件并读取格式头部信息

  • 使用 avformat_open_input() 打开文件
  • 使用 avformat_find_stream_info() 读取流信息(视频流、音频流)

3️⃣ 查找解码器并打开解码器

  • 遍历 fmt_ctx->streams[i],找到视频流和音频流的索引
  • 获取 AVCodecParameters
  • 使用 avcodec_find_decoder() 找到对应的解码器
  • 使用 avcodec_alloc_context3() 创建解码器上下文 AVCodecContext
  • 使用 avcodec_parameters_to_context() 拷贝参数
  • 使用 avcodec_open2() 打开解码器

4️⃣ 循环读取数据包(Packet)

将原始的压缩音视频数据读取出来

  • 使用 av_read_frame() 读取 AVPacket
  • 判断 packet.stream_index 来区分是视频包还是音频包

5️⃣ 解码成帧(Frame)

将压缩包解码成原始帧

  • 使用 avcodec_send_packet() 将 AVPacket 发送给解码器
  • 使用 avcodec_receive_frame() 获取解码后的 AVFrame

6️⃣ 播放 / 显示 / 播放音频

这一步跟平台相关:

  • 视频帧可以用 SDL、OpenGL、Qt 等显示
  • 音频帧可以送给音频设备播放(如 SDL、PortAudio、ALSA)

7️⃣ 清理资源

  • av_packet_unref() 和 av_frame_unref() 用于复用
  • avcodec_free_context() 释放解码器上下文
  • avformat_close_input() 和 avformat_free_context() 释放格式上下文

✅ 总结一句话流程:

创建结构体 → 打开文件 → 查找流 → 找解码器 → 解码成帧 → 播放 → 释放资源


相关推荐
归秋14212 小时前
多轨音频智能混音软件怎么选:从 demo 到更完整作品的 AI 后期工具思路
人工智能·音视频
小猴子爱上树15 小时前
跨马翻译:批量图片翻译与视频字幕、智能抠图一站式在线图片翻译工具
大数据·人工智能·python·音视频
每天死循环15 小时前
ComfyUI MiniMax H3文生视频(t2v)提示词教程:四段式写法+5秒768p实测(附模板和参数)
音视频·文生视频·comfyui·ai视频·minimax
企业数字化笔记17 小时前
视频像素分割怎么选?HSV 阈值、传统掩膜、语义分割和实例分割的效果与代价
opencv·音视频
Maynor99617 小时前
6张商品图→17秒带货短视频:开源12个Claude Skills,配音、字幕花字、BGM本地一条命令出片
ffmpeg·ai编程·claude·电商·agent skills
youdexiang18 小时前
AI 生成会议纪要好用吗?多款 APP 功能分析
java·人工智能·音视频
AI创界者18 小时前
【开源实战】MiniMax-H3 本地离线高自由度 ComfyUI 工作流搭建指南(含规则松绑与提示词映射)
人工智能·aigc·音视频
AIGC小尼18 小时前
8G 显存零基础本地部署 AI 漫剧全流程|ComfyUI+Wan2.2+FFmpeg 离线成片完整方案(含代码 / 指令 / 排坑)
人工智能·ffmpeg·php·comfyui·ai漫剧
hai31524754318 小时前
文本矩阵化拆解与视频矩阵化构建
线性代数·矩阵·音视频
昨日之日200619 小时前
Visual Enhancer:一键让模糊照片视频变清晰,升分辨率、插帧、转HDR,一键搞定素材修复
计算机视觉·音视频