本研究设计并实施了三个实验来尝试探索手势追踪在多媒体学习中的效应。实验一探索了手势追踪对多媒体学习环境下学习者认知负荷、学习动机和学习成绩的影响,同时探索了总结策略与不同形式的手势追踪策略相结合对多媒体学习的影响。实验一采用2（总结、无总结）x 3（手势追踪、观看手势追、无手势追踪）被试间设计,选取了156名大学生被试,并将他们随机分配到各个实验条件中。实验一结果显示,观看手势追踪条件下的被试比手势追踪和无手势追踪条件下的被试有更高兴趣水平和关联认知负荷水平;与无总结策略相比,总结策略条件下的被试在保持测试上有更高的成绩。实验二探索了食指追踪和身体追踪对认知负荷、学习动机和学习成绩的影响。实验二采用单因素3水平（食指追踪、身体追踪、无手势追踪）被试间设计,选取了59名大学生被试,并将他们随机分配到各个实验条件中。实验二结果发现,与身体追踪和无手势追踪条件下的被试相比,当学习者感知学习材料容易时,食指追踪条件下的被试在关联认知负荷上的得分更高。实验三在实验二的基础上提高了实验的还原度,且进一步分析了手势追踪的动态过程。实验三结果显示,与其他两组被试相比,身体追踪条件下的被试在兴趣水平上得分更高。在认知负荷方面,当学习者感知学习材料困难,投入中低程度的心理努力时,身体追踪条件下的被试在外在认知负荷水平上得分更低。当学习者在学习过程中感知学习材料困难,投入高程度的心理努力时,身体追踪条件下的被试在关联认知负荷水平上得分更高。基于上述三个实验的结果,本研究得出主要结论如下:（1）在学习过程中使用总结的学习策略有助于提高学习成绩;（2）在学习过程中观看手势追踪有助于提高学习兴趣和增加关联认知负荷;（3）在学习过程中使用身体追踪的学习策略有助于提高学习兴趣;（4）在学习过程中使用身体追踪的学习策略有助于增加关联认知负荷以及减少外在认知负荷,但是这两方面的积极作用受学习过程中感知困难和努力程度的影响。本研究对相关领域的理论与实验研究以及教育实践具有重要的参考意义。