现实生活中,大众习惯于通过多种方式来获取实时创作的音乐,却很少亲自参与创作。原因是目前的实时作曲系统,往往需要专业的作曲经验,并且操作复杂。为了克服以上的障碍,帮助无创作经验的大众参与和享受作曲带来的乐趣,本文设计并实现了一个基于实感技术的手势实时作曲系统。本系统将英特尔最新的实感技术应用于手势识别中,帮助用户使用生活中常用的自然手势,实时地创作出旋律和谐多变且具有和声结构的曲子。系统主要由以下三个功能模块组成:(1)手势交互模块,通过3D实感摄像头捕捉并识别用户的手势,映射成各级的和弦输入;(2)实时作曲模块,根据和弦输入自动生成分解和弦旋律、低音贝司律动和打击乐节奏。其中,分解和弦旋律的生成模块采用基于循环神经网络的深度学习算法,用于生成具有和声关系且富于变化的琶音。低音贝司律动的生成模块采用基于旋律轮廓的生成算法,用于生成乐句间自然连贯的Walking Bass。(3)音乐输出模块,将实时作曲模块生成的MIDI和音频输出。本文设计并实现的系统不仅可以帮助非专业人士完成专业作曲,还可以帮助音乐学习者和作曲家完成即兴表演。基于自然手势的音乐创作方式,其互动性和音乐性,使得本系统拥有广泛的应用场景和潜在的商业价值。