H.264视频编码标准：定时SEI消息与图像控制

"本文档详细介绍了H.264视频编码标准中的图像定时SEI（ Supplemental Enhanced Information）消息的语义和相关参数，包括cpb_removal_delay、dpb_output_delay以及pic_struct等概念，这些是确保视频正确解码和同步的关键要素。H.264是国际电信联盟制定的高级视频编码标准，广泛应用于多种场景，如视频会议、数字存储、电视广播等。" 在H.264视频编码标准中，图像定时SEI消息用于确保视频流的正确播放和时序同步。当CpbDpbDelaysPresentFlag或pic_struct_present_flag标志为1时，每个访问单元（AU）都需要包含这样的消息。cpb_removal_delay指示从CPB（编码器输出缓冲区）中删除前一个缓冲周期SEI消息后的AU到当前AU被删除所需的时钟跳动数，同时也用于计算数据进入HSS（High Speed Stream）的最早时间。这个值是一个固定长度的编码，长度由cpb_removal_delay_length_minus1 + 1决定。 dpb_output_delay则用来计算图像从DPB（解码图片缓冲区）输出的时间，表示AU从CPB移除到图像从DPB输出所需等待的时钟周期。需要注意的是，图像在输出时并不会从DPB中删除，而是标记为短期或长期参考。dpb_output_delay的长度取决于dpb_output_delay_length_minus1 + 1，当max_dec_frame_buffering为0时，其值应为0。输出时间必须确保任何图像的输出时间都超过后续图像的输出时间，以维持正确的显示顺序。 pic_struct字段指示图像应显示为单帧、单场还是多场，这对于不同帧率的视频在不同刷新率的显示器上的正确显示至关重要，例如，将25p的视频显示在50p的显示器上，或29.97p的视频显示在59.94p的显示器上。此外，对于某些特殊情况，如补充参考场对，输出顺序应与PicOrderCnt()的值保持一致，即使两者PicOrderCnt()相同，输出时间也可能不同。 H.264标准不仅关注编码效率，还注重编码图像的灵活性和适应性，使其能在多种网络环境和存储媒介中使用。随着技术的发展，H.264标准也在不断更新，以支持更高的视频质量和更多的应用领域。