音视频入门基础：MPEG2-TS专题（18）——PES流简介

一、PES流

《T-REC-H.222.0-202106-S!!PDF-E.pdf》第32页对PES进行了定义。音视频及数字信号经过MPEG-2编码器进行数据压缩，形成基本码流（ES流），ES流再打包形成带有包头的码流，就是PES（Packetized Elementary Streams，打包的基本码流）。PES流就是ES流打包，再加上包头形成的：

《T-REC-H.222.0-202106-S!!PDF-E.pdf》第32页对PES packet（PES包）进行了定义。PS 流（Program Streams）和 TS流（Transport Streams）的packet（包）都是基于 PES packet创建的。由于PES packet一般要比transport packet（TS包）大，所以PES packet需要分割成多个包装载，TS流中的PES packet会被切割后装载到transport packet中。PES packet header跟在TS Header后面：

二、PES packet

根据《T-REC-H.222.0-202106-S!!PDF-E.pdf》第281页，一个PES packet结构如下：

PES流的基本单位是PES packet，一个PES packet由PES packet header（PES包的包头）和PES packet data bytes（PES包的负载）组成。即：

一个PES packet = PES packet header + PES packet data bytes

根据《T-REC-H.222.0-202106-S!!PDF-E.pdf》第61页到64页，一个PES packet包含的全部属性如下：

PES packet header分为固定长度部分和可选部分。其中：packet_start_code_prefix、stream_id、PES_packet_length这些属性是每个PES packet都会包含的，所以一般把它们称作PES packet header中的固定长度部分。

所以，PES packet header = 固定长度部分（packet_start_code_prefix、stream_id、PES_packet_length） + 可选部分（Optional PES header）

PES packet header中的固定长度部分总共占6个字节。因为packet_start_code_prefix占3字节、stream_id占1字节、PES_packet_length占2字节，这些属性加起来总共6个字节。

其中：

packet_start_code_prefix：占3字节，值固定为：0x000001：

stream_id：占1字节，指定ES流的类型和编号：

比如音频流取值为0xC0 至 0xDF，视频流取值为0xE0 至0xEF：

PES_packet_length：占2字节:。指定在这个字段后的字节数，值可以为0。如果该属性的值为零，该PES packet可以是任意的长度，并且只有当PES packet携带的是视频数据的时候，该属性的值才可以为0：

Optional PES header是PES packet header中的可选部分，是否存在Optional PES header由PES packet header中的stream_id属性决定。可以看到，当stream_id的值不为program_stream_map、padding_stream、private_stream_2、ECM、EMM、program_stream_directory、DSMCC_stream、ITU-T Rec. H.222.1 type E stream时，PES packet header中才会存在Optional PES header：

Optional PES header结构如下：

Optional PES header中比较重要的属性有：

PTS_DTS_flags：占2位，为PTS和DTS的标志位。值为'10'时，PES packet header中会存在PTS；值为'11'时，PES packet header中会同时存在PTS和DTS；值为'00'时，PES packet header中不会出现PTS和DTS；禁止使用值为'01'的情况：

即：

ESCR_flag：占1位，ESCR标志位，值为1表示PES packet header有ESCR基域和扩展域，值为0则表示没有：

即：

ES_rate_flag：占1位，为ES rate标志位，值为1表示PES packet header有ES rate域，值为0表示没有：

即：

DSM_trick_mode_flag：占1位，为DSM_trick_mode标志位，值为1表示PES packet header有DSM_trick_mode域，值为0表示没有：

即：

additional_copy_info_flag：占1位，为additional_copy_info标志位，值为1表示PES packet header有additional_copy_info_flag域，值为0表示没有：

即：

PES_CRC_flag：占1位，为PES_CRC标志位，值为1表示PES packet header有PES_CRC域，值为0表示没有：

即：

PES_extension_flag：占1位，为PES_extension标志位，值为1表示PES packet header有PES_extension域，值为0表示没有：

即：

PES_header_data_length：占1字节。指定可选字段占用的总字节数，以及包含在此PES packet header的任何填充字节。可选字段的存在和内容由PES_header_data_length属性之前的字节控制，也就是由PTS_DTS_flags、ESCR_flag、ES_rate_flag、DSM_trick_mode_flag、additional_copy_info_flag、PES_CRC_flag、PES_extension_flag这7个属性控制：