随着虚拟现实技术的发展,对三维虚拟人的研究成为虚拟现实领域的热点。在电视动画和计算机游戏中,逼真的模型给人以良好的视觉效果。近些年来,越来越多的学者对虚拟人的建模以及虚拟人的驱动方式的研究表现出极大的兴趣,并分别提出了自己的方法。三维虚拟人驱动方法的研究不仅减少了开发商的投资,而且让用户有更大的选择范围,所以,它的商业价值与实用价值都是不可估量的。由于语音与口型有明显的映射关系,可以通过这种映射关系实现语音信号对虚拟人口型动画的驱动。而语音与虚拟人的动作之间则没有直接的对应关系,很难通过语音信号直接驱动虚拟人动作。虽然目前研究者们已经提出了许多方法,实现了对虚拟人的驱动,但是方法的复杂度较高,有必要对其进行进一步改进。针对上述问题,本文提出一种基于汉语语音识别的方法驱动虚拟人,该方法通过语音识别,可以分别驱动虚拟人的肢体动作与面部动画。首先,建立语音识别模块,将语音信号转化为文本信息；其次,将语音识别模块加入到虚拟人聊天系统中,实现语音信号对虚拟人动作的驱动和聊天系统的控制；接着将语音识别模块加到三维人脸口型动画的系统中,实现语音信号对虚拟人口型动画以及表情细节的驱动,并通过TTS技术,得到与输入语音同步的三维人脸动画。本文使用微软语音开发包,首先通过构建语音识别类,从而建立语音识别模块,完成语音信号到文本信息的转换,接着将语音识别模块分别添加到虚拟人聊天系统和三维虚拟人脸动画的系统中,实现了汉语语音信号对虚拟人动作和面部动画的驱动。最后,实验结果表明该方法简单实用,识别的准确率也能被用户所接受。