视频目标识别与跟踪是一个具有挑战性的课题,多传感器协同探测技术在目标识别与跟踪领域受到越来越广泛的关注,单传感器提供的信息具有局限性,而多传感器协同能够综合利用各传感器的信息。本文研究红外与可见光传感器协同的目标识别与跟踪系统,充分利用红外与可见光传感器的互补信息和冗余信息,实现对感兴趣目标持续、精确和鲁棒的识别与跟踪,具有重要的理论意义和实际的应用价值。本文在理论研究的基础上,针对传统可见光单传感器进行目标识别与跟踪,在有干扰的环境下存在明显的失跟问题,提出了基于红外与可见光传感器协同的目标识别与跟踪系统。在此基础上,建立了软件实验仿真平台。本文作了以下几方面研究:首先,分析了目标识别与跟踪的基础理论,重点研究了粒子滤波算法。在此基础上,建立了基于单传感器的目标识别与跟踪系统,研究了加权颜色直方图的目标特征,结合Bhattacharya距离准则判断识别优劣,接着研究了目标运动状态预测及跟踪的方法。实验结果表明,在理想环境下,系统具有较高的识别精度,较好的跟踪鲁棒性;但在有干扰的环境下,系统的鲁棒性较差,明显存在失跟现象。其次,在单传感器系统研究的基础上,提出基于智能学习的多传感器目标识别与跟踪系统,系统关键技术为基于可见光的粒子滤波算法与基于红外的混合高斯背景建模算法,结合在线学习及更新与基于策略的搜索处理,进行状态决策判断,利用红外与可见光两种传感器的结果进行协同识别与跟踪,根据协同准则进行交互。实验结果表明,在有干扰的环境下,基于多传感器的目标识别与跟踪系统同样具有较高的识别精度,较好的跟踪鲁棒性。最后,在前面理论研究的基础上,详述了系统的软件实现方法及结构,以DirectShow平台为基础,结合多线程编程技术,将多传感器目标识别与跟踪系统的算法在Visual C++上实现,建立了软件实验仿真平台,为后续的算法升级打下良好的基础。