Web3D中基于表情识别的自然人机交互方法研究

来源 :电子科技大学 | 被引量 : 1次 | 上传用户:loveherway110
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在过去的几年里,随着图形硬件功能的快速发展和机器“拟人化”的日益普及,人们对于信息界面的显示形式和人机交互的智能化、多样化发展有了更高的期待。三维虚拟化的信息呈现形式以及基于表情识别的人机智能化交流方式成为了本文研究的重点。Web3D(网页三维)技术可以打造充满沉浸感的虚拟三维交互环境,能够更好地发挥计算机自身强大信息传递能力及“具象化”的三维技术显示优势,进而有效地提高人机之间信息的传递效率,丰富人机交互的多元化场景。为了更具体的研究虚拟三维页面中的情感交互策略,本文主要将交互背景应用在同样对交互智能化、信息传递高效化有着迫切需求的在线教育场景中。在整个教学进程中,学生的情感波动与其认知水平的变化趋势有着千丝万缕的联系,若不能及时的了解学习者的情感及认知状态,就无法对其进行准确的、针对性的认知引导和情感干预,更无法达到真正的“个性化”教学目标。本研究提出了一种将Web3D信息虚拟化传递技术与基于表情识别的情感交互策略结合并应用于在线交互式课程的新型教学模式。针对在线教育场景中存在的知识抽象难理解、学生情感多变难感知、信息传递超负荷等难题,利用基于WebGL三维技术构建了一个适用于低龄儿童的网页版立体三维式虚拟答题场景,同时自制了一套环境多变且适用于答题环境下的表情数据集EA并基于此训练得到了一个可以实时识别人脸面部表情的CNN神经网络,准确率达75%。本文通过综合多帧面部表情变化及行为数据判别学生的内心情感状态,重点追踪学习者在答题时的情感状态变化、信息理解程度、认知状态变化等,并通过动态更改题目的难易程度和语音交互等行为进行有效地情感刺激交互,研究面向个性化伴学的智能导学方法,实现学习认知过程的多维度、智能化跟踪与干预,进而促进智慧学习的发生。
其他文献
探讨柯萨奇B组病毒(CBV)感染与胰岛素依赖型糠尿病之间的关系.用PT-PCR方法检测38例IDDM患者外周血中CBV-RNA,同时用ELISA法测定血清中CBV特异性IgM.结果显示,病例组38例患者
【摘 要】 社会对于幼儿园儿童的发展越发重视,作为人才培养的第一步,儿童在幼儿园的培养教育是社会发展的重要前提基础。而户外自主游戏作为一种新的学龄前儿童的创新性教育模式,对学龄前儿童的发展发挥着重要的作用。本文将围绕幼儿园阶段儿童的自主户外游戏进行分析,并且提出优化这种创新性教学模式的途径,以期为一线老师提供参考借鉴。  【关键词】 幼儿园;户外自主游戏;教师指导  在户外自主游戏的实行过程中,由
给出两种非正弦波形情况下计算在线式UPS功率因数的一般解析表达式。实验结果验证了它的正确性。
随着人口老龄化程度加剧,老年人退休养老问题变得越发严峻,而这很大程度上是因为社会大众对退休政策调整的不理解、不学习、不认同而造成的。因而本文在退休政策调整的社会大背景下,参考《2017年中国居民退休准备指数调研报告》中居民退休准备指数、退休准备情况、退休准备期望等相关问题的理论阐述和调查结果,选取陕西省咸阳市45-60岁的临退休人员群体作为研究对象,对其退休准备及影响因素进行了问卷调查和实证分析,
简要介绍了用于废油处理的功能材料—吸油材料的种类、吸油原理、吸油材料的应用及其发展新动向。
观察聚乙二醇化干扰素(PEG-IFN)抗病毒和抗肿瘤的生物学活性,并与干扰素IFN进行比较.结果表明:PEG-IFN抗病毒活性约下降15倍,但抗人肿瘤细胞增殖的活性明显增强.
目前,微生物的应用已经涉及到如医学、轻工、农业及环保等各个领域,因此,许多院校的多种专业都开设了微生物学课程.尤其是普通微生物学,由于它所涉及的内容是多种微生物共性
分析了水利工程施工的安全隐患,提出了水利工程施工安全的预防及管理监控措施,以促进水利工程安全运行。
以安溪县崩岗洪积扇农田为研究对象,采集不同培肥方式改良茶园的土样进行分析研究,探讨该地区沙化农田恢复过程中土壤颗粒组成及土壤养分的效应。结果表明:施化肥、施农家肥、施沼液肥、施沼液肥+种植绿肥均能有效改善洪积扇土壤理化性质。沙化农田经培肥后,砾石、砂粒含量均显著减少(P<0.05),而粉粒、粘粒含量显著增加(P<0.05);土壤CEC、有机质、氮磷钾含量也均呈显著增加趋势(P<0.05)。土壤CE
SEMI全球集成电路制造工厂报告表明,2011年资本支出将增至411亿美元,达到历史最高水平。由于某些公司基于更广泛的经济状况调整了计划,这一新出炉的预测将增长百分比下调至23%(201