含有人脸的图像处理是智能可视化人机交互的基础，人脸处理的研究包括人脸检测、人脸跟踪、人脸识别和表情识别等。人脸检测作为这些处理的基础，近年来得到了充分的关注。本文介绍了人脸检测的定义及与其相关的理论，对单一图像中人脸检测算法和视频序列中人脸跟踪算法进行了分类综述。针对人脸检测问题中的准确性与人脸跟踪问题中的快速性难以同时满足这一实际情况，提出一种将肤色和脸部特征相结合的方法。首先通过基于肤色的算法能快速定位出人脸大致位置，使得检测速度达到实时的要求；然后利用脸部特征进一步细检，保证检测的精确性。在跟踪过程中，将视频序列帧分类为检测帧和跟踪帧，对于两种类型的帧图像作不同的检测：在检测帧中使用基于肤色与脸部特征结合的方法来保证人脸跟踪整体过程的精确性，在跟踪帧中仅使用基于肤色的方法来保证人脸跟踪的快速性，最终在人脸检测与跟踪问题中最难解决的精确性与快速性中得到折衷。实验结果表明基于肤色与脸部特征的人脸检测方法可以准确的在静止图像中检测到人脸，而利用这种方法的人脸跟踪算法可以准确实时地对视频序列中的人脸进行跟踪。