H.264视频编码在RTP中的荷载格式规范

"RFC3984协议详细阐述了H.264视频编码在RTP（实时传输协议）中的荷载格式，适用于从低比特率的对话应用到高比特率的视频点播等多种场景。该协议旨在允许在一个RTP数据包中封装一个或多个由H.264视频编码器生成的网络抽象层单元（NALUs）。" 在介绍部分，文档首先定义了H.264编解码器，这是一种高效且广泛应用的视频压缩标准，用于压缩视频数据以适应网络传输。接着，引入了参数集的概念，这是H.264编码中用来描述编码参数的关键元素，包括序列参数集（SPS）和图像参数集（PPS），它们定义了编码视频的总体结构和特性。 网络抽象层单元（NALU）是H.264编码中基本的数据单元，包含了视频帧的不同部分，如宏块、切片等。RTP荷载格式设计的目标是将这些NALUs有效地封装进RTP包中，同时考虑到网络传输的可靠性和效率。 在约定和范围章节，文档规定了在使用RTP传输H.264视频时的规范和适用条件。定义和缩写部分则列出了相关术语和缩写的明确解释，帮助读者理解文档内容。 RTP荷载格式的详细描述包括了RTP头的使用方法，如何处理NALUs，以及打包策略。其中，NAL单元首字节的使用决定了NALU的类型和处理方式；打包方式涵盖了单个NAL单元、复合包、分片单元（FUs）的组织方式；解码顺序号（DON）用于确保正确的解码顺序，即使包在网络中乱序到达。 分包规则章节则讨论了如何将大的NALU拆分成多个RTP包，以及不同拆分策略（如单个NAL单元、非交错和交错方式）的优缺点。打包过程信息提供了实际操作中的指导，包括单NAL单元和非交错方式的打包，以及交错方式的打包原则。 荷载格式参数部分涉及MIME注册和SDP参数，它们是描述和协商RTP会话所必需的。文档还给出了多个示例来演示不同类型的视频电话应用，如不使用分片数据分区、使用NAL单元聚合和数据分区的视频电话等。 此外，安全考虑、拥塞控制、IANA（互联网编号分配机构）考虑等章节关注了协议的安全性、网络流量管理和标准维护。附录部分提供了解码顺序号的原理及其在多图像片断交错、健壮包调度等场景的应用，有助于深入理解协议的工作机制。 RFC3984协议详尽地定义了H.264视频在RTP环境下的封装和传输规范，对于实现和支持H.264视频通信服务至关重要。