三维人体模型及其强化学习训练--以虚拟乒乓球员交互为例

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:heyouzhang035
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在虚拟现实的应用中,往往对真实性和沉浸感有着非常高的要求,用户在希望虚拟场景中的模型质量、场景外观、物理仿真等尽可能地接近现实场景的同时,也希望交互对象的行为和决策具有较高的真实性和合理性。本文结合人体建模技术和强化学习技术设计了一个虚拟乒乓球角色,使之与用户在HTCVIVE平台上进行乒乓球对打交互。对于一个虚拟乒乓球交互系统而言,沉浸感和真实性主要体现在两方面:其一,虚拟场景的真实程度,即乒乓球场、球桌、球拍等实物以及虚拟角色的几何建模、物理仿真与全局渲染要尽可能地逼真;其次,虚拟角色的自我感知和自主决策能力,在这里体现为以合理的姿势与策略回击从用户方打过来的乒乓球。本文将着重从虚拟角色个性化建模及其行为决策的智能化来提高虚拟现实应用的沉浸感。
  在建模方面,实现了一个由刚性配准、特征点引导变形和稠密配准三部分组成的三维人体扫描数据拟合系统。在特征点引导变形阶段,实现了变形图变形和SMPL参数化模型拟合变形两种方案。后者让我们能够利用SMPL参数化模型来表达个性化三维人体数据,从而为乒乓求交互系统利用逆向运动学技术驱动个性化虚拟角色生成击球动作打下基础。乒乓球、球场、球拍等虚拟场景则采用Unity3D进行几何建模与物理仿真。
  在虚拟角色的自主决策方面,我们利用强化学习方法对球拍的击球策略进行训练,使之能产生一个有效的击球轨迹,然后以球拍位置对虚拟球员的右手腕关节进行约束,利用逆向运动学与强化学习相结合的人体姿态估计算法解算出球拍击球时虚拟球手的击球动作,从而得到一个能用合理姿态进行击球的虚拟球手。由于场景外观真实感强、虚拟球手击球动作有一定的智能性,使得所构建的虚拟乒乓球交互系统有较好的沉浸感。
  针对所提出的方法和策略,我们都进行了较详细的实验验证与分析。结果表明,本文提出的人体建模方法能忠实地还原扫描模型的几何细节,而本文设计的虚拟乒乓球员,则能准确地完成击球任务。
其他文献
多输入多输出(Multiple input multiple output, MIMO)雷达是一种新体制雷达,相比于传统相控阵雷达具有非常多的优势,对其技术的研究为雷达系统发展提供了新的机遇。双基地MIMO雷达结合MIMO雷达和双基地雷达布阵方式的优点,成为当前MIMO雷达的热点研究方向。本文结合张量分解及空域滤波技术,主要研究双基地MIMO雷达多目标波离方向(Directional of dep
社会情境中正确理解他人的意图有助于人际互动和社会适应。过去十年来,关于意图理解认知神经机制的研究很多,但是直接将私人与社会性(交际)的运动意图的认知神经机制相对比的研究比较少。为了探究该问题,本研究记录了16名健康被试完成三种不同的意图理解任务时的脑电反应。三种实验任务分别为:1)理解以自我为导向的私人意图;2)理解以他人为导向的交际意图;3)理解以物体为导向的物理意图。神经电生理学结果表明在大脑
随着博弈与控制交叉学科的兴起,博弈论受到了控制领域的广泛关注。基于博弈方法的控制论在多智能体的协同控制、武器分配、电力系统的经济调度等方面得到了广泛应用。然而,利用博弈理论解决控制问题的前提是对博弈系统性质的深入了解,因此对有限博弈的结构性质与演化动态的分析是很有必要的。本文主要以矩阵的半张量积为工具,基于代数状态空间方法,研究有限博弈正交分解、博弈设计、演化动态以及在武器-目标分配问题上的应用。
学位
正系统是一类非负初始状态下系统状态和输出变量能保持非负的动态系统,它被广泛用于描述经济、生物、物理和化学工业等领域中的不同对象。在实际中,系统的动态演化常常呈现出状态的瞬变,即脉冲现象。本文将同时具有正性约束和脉冲效应的动态系统称为脉冲正系统,它包含正连续时间动态和正离散时间动态,具有典型的混杂特性和丰富的动态行为。因此,脉冲正系统的研究是一项富有理论价值和应用潜力、且极具挑战性的研究课题。鉴于此
学位
在全球化竞争时代,工程建造行业需要通过产业升级来改变生产效率不高、协作困难的现状,提升产业竞争力。“互联网+”行动计划的提出,正深刻影响着各行各业,也为工程建造行业的转型升级带来了契机。随着互联网平台经济的兴起,学者们意识到工程建造平台模式将成为实现工程建造行业转型升级的必然趋势。实现工程建造平台的先决条件包括工程建造服务化和工程建造服务虚拟化;在此基础上,工程建造表现为工程建造参与方提供的一系列
液压系统具有输出功率大、传动稳定性高、功率体积比大、调速范围宽、响应速度快等优点,广泛应用民用工业领域和军事工业领域。但是液压系统属于强非线性系统,伺服阀的非线性、液压缸的摩擦力以及时变的参数等因素加大了对液压系统控制的难度。因此,对液压系统高精度的研究具有重要的理论研究和工程应用价值。  本文针对液压系统非线性、参数时变性以及摩擦对控制系统性能的影响,提出了两种控制策略。  (1)基于非线性函数
学位
随着社会智能化的加速,电子设备中电路的集成规模和复杂度也随之变高,因此对电路测试提出更高的要求。模拟电路故障诊断作为电路测试领域研究的重点,自提出以来,取得了一定的研究成果,但由于电路元件存在容差性、非线性以及所提诊断模型难以量化等问题,模拟电路故障诊断技术仍存在提升空间。  本文将模拟电路的故障诊断方法作为研究核心,以缩短诊断时间、提高诊断精度和提升模型稳定性为目的,以信号处理技术为基础,对机器
学位
开关磁阻电机(SRM )主开关器件与相绕组串联,具有不存在直通短路的极高可靠性;其转子无绕组及永磁体,结构简单、坚固,成本低,易于冷却.S RM极高的安全性以及简单坚固的结构使其成为未来新能源汽车动力系统的首选.然而SRM自身的双凸极结构以及高度的磁饱和特性给电机带来了极强的非线性特性,使得对其进行建模变得非常困难,而且低速运行时较大的转矩脉动制约了新能源汽车的推广和使用.为了有效抑制转矩脉动,提
[db:内容简介]
[db:内容简介]