随着摄像头的不断普及,基于摄像头的交互方式已经成为当前人机交互研究的热点问题。本文设计开发了两种基于摄像头交互的具有创新意义的应用,即基于摄像头的汽车模拟驾驶系统和基于摄像头的计算机纸笔交互系统。基于摄像头的汽车模拟驾驶系统采用一张带有标记的纸作为模拟驾驶的手段,通过纸上打印的标记来控制车的转向、档位、刹车、倒车、鸣笛等操作。摄像头采集图像信息,借助ARToolKit视觉软件包,对所采集图像进行识别,从背景中检测出标定位置和状态。然后在此基础上进行算法的设计,将识别到的信息转换成对车的控制指令。达到了通过摄像头识别信息,用现实世界中带有标记的“纸”,控制虚拟场景中的车进行模拟驾驶的目的。另外,本文提出了一种基于摄像头的计算机纸笔交互方式,使用户通过普通的纸笔和摄像头,完成类似传统键盘对计算机进行文字输入、图像输入等功能。借助OpenCV完成基本的图像采集工作,然后通过本文设计的矩形识别算法将背景中用于书写的区域提取出来,并对其位置校正,将任意摄像头角度下的书写区域映射到正投影模式,从而实现了利用OCR对书写的文字内容进行识别。汽车模拟驾驶系统使用价格低廉、广泛普及的摄像头和带有标记的纸作为交互手段,平衡了鼠标键盘式操作和模拟驾驶器操作的一些优缺点,为用户虚拟驾驶带来新的体验。计算机纸笔交互系统则通过简单的纸笔和摄像头就能对计算机进行信息输入,使得人机交互更加方便和带有个人特色。试验表明,本文基于摄像头的交互方式,为用户带来了人机交互的新体验和乐趣,使人与计算机的交流更加自然和人性化。