基于机器学习方法的交互创作辅助系统

来源 :上海音乐学院 | 被引量 : 0次 | 上传用户:w0520
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文提出了一个基于机器学习方法的交互创作辅助系统:MMC(Machine Learning Mapping Creator),是基于Max/MSP平台与前端技术框架开发的通用型交互艺术辅助创作工具。MMC系统利用机器学习方法实现图像特征分类识别功能,通过Max/MSP实现实时控制事件触发,可用于舞台实时表演、新型乐器、装置艺术、人机交互应用等诸多场景,为艺术创作者提供了利用机器学习方法进行创新型艺术创作的创新途径。通常,为舞台表演、装置艺术等新型交互艺术形式进行创作的时候,创作者会结合诸多新型的技术,如利用各式的传感器等外部硬件设备获取实时数据流,或者利用复杂的模型方法生成音乐材料等等。这些技术为艺术创作贡献了崭新的灵感和丰富的手段的同时,也会加大相关创作的复杂度与难度。如何在交互式艺术作品创作的过程中,更好地结合新兴技术如人工智能机器学习方法,把这些方法封装成简单易用的模块供创作者使用,降低技术对艺术家尤其是个人创作者、学生等群体带来的门槛,是本文研究的目的与内容之一。利用MMC系统,用户通过启动特征分类识别应用程序,设置不同的标签,利用摄像头对每个标签进行图像数据采集,如姿势或者物件信息,然后利用采集到的这些数据,基于迁移学习的方法,“重新训练”预训练模型,在较短的时间内训练好新的分类器。用户通过在摄像头前复现姿态等信息时,模型就可以识别当前的姿态动作对应是哪一个标签。标签数据在Max/MSP被处理成开关触发物件,利用这些开关触发,用户可加载自己的Max程序以及一些外部硬件设备等,实现联动的触发控制。本文主要就机器学习方法在交互艺术创作中的应用,交互创作系统的常见特点与相关系统的案例分析研究展开。随后就提出的MMC系统的框架、实现方法、功能等特点进行研究与阐述,并进行相关定性实验分析,对MMC系统的操作使用总结出较为可行的方案。最后就MMC系统各模块的可拓展方向进行探讨。
其他文献
<正>烟碱乙酰胆碱受体(nAChRs)不仅是医药研究领域的重要靶标,也是目前农业领域中广泛使用的新烟碱类杀虫剂(neonicotinoids)的作用靶标.新烟碱杀虫剂能选择性地作用于昆虫,
Bcl-2家族蛋白质在细胞凋亡过程中起着重要的调控作用,Bax(Bcl-2-associated X proten)和Bak(Bcl-2 homologous antago-nist/killer)作为该家族中多结构域促凋亡蛋白,是线粒
随着铁路建设的迅速发展,尤其是高速铁路网的建成与运营,既有线的维护问题日益凸显,其中一个关键性的问题是保证轨道具备高平顺性的运行表面。目前我国轨道平顺性的检测与控
天宫山花岗岩体成因的研究对闽西南地区岩浆演化及动力学过程有重要意义.天宫山岩体岩性主要为正长花岗岩.前人于天宫山岩体中利用K-Ar法测得年龄值为146~149Ma,天宫山正长花
系统总结西大别白垩纪赋钼花岗岩的岩石成因,并结合这些岩体的岩石地球化学特征对西大别钼矿床形成条件进行探讨,对认识西大别钼成矿带的地球化学动力学背景具有重要意义.在
研究了Ho3+/Yb3+掺杂的氟锗酸盐玻璃在980nm激光二极管抽运下的中红外2.0μm、2.85μm和可见上转换发光特性以及两种稀土离子之间的能量转移机理。在氟锗酸盐玻璃中掺杂1%(物
黄土滑坡作为黄土高原地区常见的地质灾害,给当地人民的生命和财产安全带来极大的威胁。本文以具体的工程案例为背景,通过现场模型试验与振动台试验,展开黄土边坡在开挖降雨和地震作用下的失稳变形机制研究。通过收集分析研究区自然地理与地质条件,结合其地质分析和现场模型试验研究,得出黄土边坡在开挖降雨模式下的失稳变形机制以及其相关结论;通过振动台试验研究,得出黄土边坡在地震作用下的失稳变形机制及其相关结论。本文
引言在海军战略转型发展背景下,海军亟需建立科学有效的远海编队多样化军事任务口腔卫生勤务保障体系。方法以2008年12月起中国海军舰艇编队20余批次远赴亚丁湾、索马里海域
发动机悬置系统的动态特性对整车的振动模态有一定影响,通过调整发动机悬置系统的结构动态参数就可能降低汽车行驶时的振动响应。本文提出将整车四自由度模型划分为三类子结
【正】 在鲁迅《野草》中的不少作品都有鲜明的“绝望的抗战”的色彩,如《复仇》、《复仇(其二)》、《颓败线的颤动》、《腊叶》、《死火》、《死后》、《这样的战士》、《影
期刊