ffmpeg视频编码原理和实战-(4)H264原始码流分析

H.264是一种广泛使用的视频编码标准,它采用一种分层结构,其中最重要的一个层是NAL(网络抽象层)。在H.264编码中,原始码流(bitstream)是由多个NALU(NAL Units)组成的。了解NALU 对于解析和处理H.264视频流非常重要。

NALU(NAL 单元)

NALU 是H.264码流的基本单元,每个NALU包含一个头部和有效载荷。以下是NALU的详细结构和功能:

1. NALU 头部 (Header)

NALU的头部通常由一个字节组成,具体包括以下几个部分:

  • forbidden_​​zero_bit (1 bit):强制为0,如果设置为1,表示码流存在错误。
  • nal_ref_idc (2位) : 指示当前NALU的参考的一部分,数值越大表示的一部分最高。
  • nal_unit_type (5位):指示NALU的类型,不同类型表示不同的语法元素或数据类型。
2. NALU 类型(nal_unit_type)

NALU 类型决定了该单元包含的数据的意义。以下是一些常见的 NALU 类型:

  • 1:非关键帧(Non-IDR切片)
  • 5:关键帧(IDR切片)
  • 6:补充增强信息(SEI,Supplemental Enhancement Information)
  • 7:序列参数集(SPS,Sequence Parameter Set)
  • 8:图像参数集(PPS,Picture Parameter Set)

NALU的封装和传输

H.264 码流的目标是在 NALU 前面设置一个起始码(Start Code),通常是0x000001用来0x00000001标识一个 NALU 的开始。因此,本文对于解析码流中失败的 NALU 非常重要。

示例

下面是一个简单的示例,展示一个包含多个 NALU 的 H.264 码流:

复制代码
... 0x000001 67 ... 0x000001 68 ... 0x000001 65 ...
  • 0x000001表示起始码,用于标识一个新的NALU 的开始
  • 67是序列参数集(SPS)的NALU类型,67(十六进制)转化为二进制是0110 0111,八位NALU头部
  • 68是图像参数集(PPS)的NALU类型
  • 65是关键帧(IDR切片)的NALU类型

总结

NALU 是 H.264 编码标准中的基本单元,包含了视频数据和其他辅助信息。 每个 NALU 由一个头部和有效载荷组成,通过起始码分隔符。在处理 H.264 码流时,解析和理解 NALU 都是关键的步骤

相关推荐
Wilbert Lee2 小时前
关于 Adobe Audition CC 2018 多轨音频 VBR 格式导出时长的问题
adobe·音视频
开开心心就好6 小时前
用户推荐的文件解锁与强制操作工具
安全·智能手机·pdf·scala·音视频·symfony·1024程序员节
luoqice7 小时前
linux下安装rtsp流媒体服务器
linux·音视频
searchforAI8 小时前
5款AI笔记工具实测:导入体验、结构化输出、后续能力逐项对比
人工智能·笔记·学习·ai·chatgpt·aigc·音视频
nashane8 小时前
HarmonyOS 6学习:SoundPool音频防抖与Web长截图时序重构
学习·音视频·harmonyos·harmonyos 5
ACP广源盛139246256739 小时前
OpenAI 推出的 GPT-5.5 大模型,倒逼接口芯片升级迭代@ACP#IX8024应用迭代
网络·人工智能·嵌入式硬件·电脑·音视频
ACP广源盛139246256739 小时前
OpenAI 推出的 GPT-5.5 大模型,倒逼接口芯片升级迭代@ACP#IX8012应用迭代
大数据·网络·人工智能·嵌入式硬件·电脑·音视频
java小吕布9 小时前
HyperFrames:写 HTML 就能渲染视频,专为 AI 智能体打造的开源渲染框架
人工智能·html·音视频
2601_957879331 天前
短视频矩阵的数据驱动运营:从流量监测到内容迭代的完整技术链路
大数据·矩阵·音视频
Tech-Net1 天前
推特视频怎么下载?2026最新X(Twitter)视频下载教程
经验分享·音视频·工具·视频处理·视频下载·视频下载工具·推特视频下载