基于TCP/IP协议的IP网络提供“尽力而为”的服务,网络的时延、丢包率和带宽等没有保障,视频业务对差错有一定的容忍,但是对时延不可容忍,本文依据视频业务特点和网络特性,重点研究基于H.264视频编码标准面向IP网络上鲁棒编码特性和鲁棒传输的技术。 在分析了面向存储得视频编码技术基础上,重点研究了面向网络传输的视频编码标准H.264新特性,为了使视频适应各类网络中鲁棒传输,该标准从结构上分为视频编码层和网络适配层,首先采用仿真方法研究其编码性能特性,对H.264建议采用的新技术:运动补偿块尺寸组合、多参考帧、熵编码进行了仿真研究,实验结果表明,这些新技术的采用大大提高了视频的编码性能,并为实现视频鲁棒传输具有参考意义。 其次,研究了H.264视频编码标准适合网络传输新特性:参数集、灵活的宏块排列、数据分割等错误恢复工具,通过仿真实验,证明这些新特性的应用极大提高了视频抗差错能力,在此基础上,建立IP网络丢包数学模型,在全局率失真框架内提出了联合信源/信道编码的容错打包机制,通过仿真实验,所采取的差错弹性机制具有一定的鲁棒性。 最后,构建了IP网络环境,实现了基于IP网络的视频实时动态采集、编码,在率失真框架下联合信源/信道实现容错打包传输,在客户端实时接收解压回放。本系统通过长时间的运行测试,在CIF格式下,网络延迟小于1秒,传输速率18帧/秒,可以广泛的应用于视频远程监控、视频会议等场合。