视频图像跟踪是图像处理中一项难点而又具有重大意义的技术。如今,许多领域都已经采用这一实用性极强的技术,如刑侦,军事,公共安全等。视频跟踪算法可以用硬件或者软件来实现,高分辨率的视频跟踪采用硬件实现。随着嵌入式开发技术水平飞速发展,视频跟踪系统向着成本低,准确性高,易携带等特点发展。因此,本文采用了具有强大视频处理能力的FPGA来实现视频跟踪算法。论文主要介绍一种以FPGA为核心的视频实时性跟踪系统设计方案。由视频采集、数据存储、跟踪算法实现、VGA显示等五个模块组成了一个完整的视频实时跟踪显示系统。视频采集部分主要实现OV7670摄像头的寄存器配置以及接收视频数据；存储部分完成图像数据在跨时钟域的传输,并为数据处理做准备；VGA显示模块通过VGA控制器产生同步信号控制专用数模转换芯片ADV7123完成信号的数模转换,并在显示器上显示视频；图像处理部分是通过颜色空间的转化,并结合目标物体的颜色信息进行目标物体的跟踪,目标跟踪的方式是采用16*16的红色矩形框标记质心,并以此画出矩形框标记人体上半身。实验结果表明,本系统可以很好实现对人的跟踪。本文同时采用多种颜色空间进行皮肤像素判别,并计算皮肤质心绘制人体上半身所在的范围。使用Verilog语言进行算法建模。首先进行基于FPGA的视频采集与显示系统的设计,然后进行人体肤色识别及标记等相关设计。