RFC3984: H264视频编码在RTP中的封装格式

"rfc3984 (ForH264) - 中文的符合rfc3984规范的H264文档说明" 本文档详细阐述了RFC3984，它定义了一个用于互联网社区的标准跟踪协议，并请求进行讨论和改进建议。RFC3984规范适用于ITU-T H.264视频编解码器和与其技术上相同的ISO/IEC国际标准14496-10视频编解码器的RTP（实时传输协议）负载格式。该文档由互联网协会（The Internet Society）于2005年发布，并不受任何限制的分发。 1. H.264编解码器概述 H.264是一种高效能的视频编码标准，广泛应用于低比特率的对话式应用、互联网视频流传输以及高比特率的视频点播服务。其核心技术包括熵编码、运动估计与补偿、帧内预测、多参考帧等，这些都使得H.264能在保持画质的同时显著降低数据传输量。 2. 应用场景 H.264/RTP负载格式适应多种应用场景，如实时通信、流媒体传输、交错传输和点播服务。通过支持单个或多个网络抽象层单元（NALUs）的封装，H.264编码器产生的数据可以有效地在RTP包中传输。 3. RTP框架 RTP是一种面向数据包的传输协议，设计用于支持实时、时间敏感的数据传输。它依赖于底层的UDP（用户数据报协议）提供端到端的服务，但提供了序列号、时间戳和同步源标识符等额外信息，以支持数据包的排序、时序恢复和源认证。 4. RTP负载结构 H.264的RTP负载结构包含NALUs的打包方式，这些NALUs可以是编码图像的一部分，或者是编码参数集或辅助数据。每个NALU前可能附加有RTP头、前导字节、NALU头和可选的补充增强信息（SEI）。 5. RTP负载格式细节 - RTP头：包含序列号、时间戳、同步源标识符和标记位等信息，用于恢复原始视频流。 - NALU头：指示NALU的类型和语法结构，帮助解码器正确解析视频数据。 - 分割NALU（FUA）：当NALU过大无法放入单个RTP包时，可以将其分割为多个RTP包，每个包携带一部分NALU数据。 - 辅助增强信息（SEI）：提供额外的视频质量信息，如时间戳校正、显示顺序指示等。 - 丢弃操作通知（DON）：指示接收端可以丢弃某些包，以处理网络拥塞或恢复同步。 综上，RFC3984定义的H.264/RTP负载格式是实现高效、可靠传输H.264视频流的关键，它涵盖了从编码到传输的所有关键环节，确保了H.264视频在互联网环境中的广泛应用。