随着数字电视的高速发展，交互式电视应用拥有越来越广阔的商业前景，各式应用层出不穷。为了开发具有更好用户体验以及更大商业潜能的应用，图像识别技术至关重要。近年来，在图像识别领域人脸识别技术日趋成熟，但是衣服识别技术发展缓慢，本文研究衣服的自动检测与识别技术，提出了在彩色图像中对衣服进行检测和识别的方法。根据衣服共性特征不明显的特点，本文提出采用人脸检测辅助与衣服边缘检测相结合的衣服检测算法。该算法首先使用AdaBoost人脸检测算法检测人脸，根据人脸位置确定衣服的可能区域，最后结合衣服的边缘信息，采用迭代算法找到包含衣服边缘最多的衣服外接矩形，实现衣服区域的精确定位。实验结果表明该方法可以较为有效的提取衣服区域。通常情况下衣服图像的空间维数非常高，本文提出了基于PCA主成分分析的衣服识别方法，对衣服图像空间进行降维，根据衣服的轮廓纹理特征进行匹配。考虑到衣服颜色不易随着衣服变形而变化，本文又提出了基于颜色直方图的衣服识别方法。在此基础上，最后提出了基于颜色直方图与PCA主成分分析相结合的衣服识别方法，实验表明该方法比前两种方法具有更好的识别效果。