白皮书
采用 FPGA 实现视频和图像处理设计
2007 年3月,1.1 版 1
WP-VIDEO0306-1.1
引言
本文介绍视频和图像处理技术的发展趋势,在这种趋势下,开发人员不得不重新审视他们过去一直采用的
体系结构。本文还将讨论不同体系结构的优缺点,详细阐述 Altera 为该领域提供的新方案。采用低成本
FPGA 和结构化 ASIC,高清晰解决方案的实施成本现在已经低于每 1,000 逻辑单元 (LE)1 美金。
视频和图像处理发展趋势
以视频和图像处理为核心的 HDTV 和数字影院等创新技术的进展非常迅速,其推动力量在于图像采集和显
示分辨率、高级压缩方法以及视频智能的跨越式发展。
在过去几年中,分辨率的发展最为显著,表1列出了不同终端设备上目前能够达到的最高分辨率。
从标准清晰度 (SD) 过渡到高清晰度 (HD),需要处理的数据量提高了 6 倍。视频监控也从普通中间格式
(CIF)(352 x 288) 转向标准要求的 D1 格式 (704 x 576),某些工业摄像机甚至达到 1280 x 720 HD。军事监
控、医疗成像和机器视觉也普遍采用了分辨率非常高的图像。
高级压缩方法逐步替代了以前的技术,在保持一定质量的前提下,具有更好的数据流性能和压缩比,而且
延迟更低。 JPEG 2000 作为数字电影的标准,在军事、医疗成像和监控领域也得到了大量应用。 H.264 将
可能取代广播电视应用中的 MPEG2,以及视频监控系统的 MPEG4 Part 2 和视频会议的 H.263。虽然这些新
压缩方案得到了应用,仍然在不断改进 H.264 和 JPEG 2000 标准。
DICOM医疗成像标准已经完成了附件105,它包括JPEG 2000第2部分3D医疗成像压缩多分量变换。附件106
将包括 JPIP 协议,远程浏览使用 JPEG 2000 压缩的医疗影像。
MPEG 4 Part 10(H.264 AVC) 的进一步扩展是可更新视频编码 (SVC)技术。SVC 在现有系统资源情况下,解
决了不同网络中向各种用户可靠传送视频的编码问题,特别是事先不知道下游客户端容量、系统资源和网
络状况的时候。例如,客户端会有不同的显示分辨率,系统有不同的缓冲或者中间存储资源,网络带宽、
丢包率、最大努力服务质量 (QoS) 都在变化等。联合视频开发组 (JVT)扩展了AVC/H.264,增强比特流的
灵活性,提高压缩效率,可以自由组合各种压缩模式 ( 例如,空域、时域和 SNR/ 保真等 )。具体应用领域
包括视频监控系统、移动流视频、无线多通道视频产生和分配、多方视频电话 / 会议等。
另一快速发展的领域是视频智能。相机已经具有摇摄、俯仰、变焦、全景等拍摄功能,这些功能逐步由系
统智能实现而不需要人为干预。移动探测技术能够更高效的利用硬盘存储,它只捕获高于移动阈值的视频
帧。视频目标识别技术能够实现自动监控追踪,其效率要远远高于人工监控。
表 1. 不同终端设备的分辨率
终端设备 分辨率
HDTV
1920 x 1080 象素
数字影院 4096 x 1714 象素
视频会议 1280 x 720 象素
医疗成像 3000 x 3000 象素
工业监控 1280 x 720 象素
军事监控 4000 x 4000 象素
机器视觉 4000 x 4000 象素