ffmpeg视频编码原理和实战-(4)H264原始码流分析

H.264是一种广泛使用的视频编码标准,它采用一种分层结构,其中最重要的一个层是NAL(网络抽象层)。在H.264编码中,原始码流(bitstream)是由多个NALU(NAL Units)组成的。了解NALU 对于解析和处理H.264视频流非常重要。

NALU(NAL 单元)

NALU 是H.264码流的基本单元,每个NALU包含一个头部和有效载荷。以下是NALU的详细结构和功能:

1. NALU 头部 (Header)

NALU的头部通常由一个字节组成,具体包括以下几个部分:

  • forbidden_​​zero_bit (1 bit):强制为0,如果设置为1,表示码流存在错误。
  • nal_ref_idc (2位) : 指示当前NALU的参考的一部分,数值越大表示的一部分最高。
  • nal_unit_type (5位):指示NALU的类型,不同类型表示不同的语法元素或数据类型。
2. NALU 类型(nal_unit_type)

NALU 类型决定了该单元包含的数据的意义。以下是一些常见的 NALU 类型:

  • 1:非关键帧(Non-IDR切片)
  • 5:关键帧(IDR切片)
  • 6:补充增强信息(SEI,Supplemental Enhancement Information)
  • 7:序列参数集(SPS,Sequence Parameter Set)
  • 8:图像参数集(PPS,Picture Parameter Set)

NALU的封装和传输

H.264 码流的目标是在 NALU 前面设置一个起始码(Start Code),通常是0x000001用来0x00000001标识一个 NALU 的开始。因此,本文对于解析码流中失败的 NALU 非常重要。

示例

下面是一个简单的示例,展示一个包含多个 NALU 的 H.264 码流:

复制代码
... 0x000001 67 ... 0x000001 68 ... 0x000001 65 ...
  • 0x000001表示起始码,用于标识一个新的NALU 的开始
  • 67是序列参数集(SPS)的NALU类型,67(十六进制)转化为二进制是0110 0111,八位NALU头部
  • 68是图像参数集(PPS)的NALU类型
  • 65是关键帧(IDR切片)的NALU类型

总结

NALU 是 H.264 编码标准中的基本单元,包含了视频数据和其他辅助信息。 每个 NALU 由一个头部和有效载荷组成,通过起始码分隔符。在处理 H.264 码流时,解析和理解 NALU 都是关键的步骤

相关推荐
qq_310658514 分钟前
webrtc源码走读(二)应用层如何使用WebRTC API实现功能
服务器·c++·音视频·webrtc
你好音视频12 分钟前
FFmpeg HLS编码流程深度解析:从数据包到播放列表的完整实现
c++·ffmpeg·音视频
芒鸽20 分钟前
macOS 上用 lycium 交叉编译 FFmpeg 适配鸿蒙(OHOS):从构建到 HNP 打包
macos·ffmpeg·harmonyos
专业开发者29 分钟前
蓝牙 ® 低功耗音频(Bluetooth® LE Audio)重塑无线音频的 3 大方式
物联网·音视频
legendary_16314 小时前
Type-C 一拖二快充线:实用、便携的移动充电方式
计算机外设·电脑·音视频
EasyDSS15 小时前
视频推流平台EasyDSS与无人机推流直播技术在农业场景的科学应用
音视频·无人机
TEL1892462247717 小时前
IT6622:HDMI 1.4 发射,带 eARC RX 和嵌入式 MCU
音视频·实时音视频·视频编解码
TEL1892462247718 小时前
IT6620BFN:带音频多路输出的ARC/eARC接收机
音视频·实时音视频·视频编解码
音视频牛哥18 小时前
Android 端构建高性能 RTSP 转 RTMP|轻量级RTSP服务 网关:透传与二次编码深度实践
android·音视频·大牛直播sdk·rtsp转rtmp推送·rtsp转发到rtsp服务器·rtsp转rtmp二次编码推送·rtsp二次编码加水印
特立独行的猫a20 小时前
移植FFmpeg最新 8.1版本到鸿蒙PC(OpenHarmony)平台完整指南
ffmpeg·harmonyos·移植·交叉编译·鸿蒙pc