基于计算机视觉与频谱合成的复合电子乐器研究

来源 :华中师范大学 | 被引量 : 0次 | 上传用户:zxg668888
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
自从世界上第一个电子乐器在十九世纪末被发明以来,电子乐器的性能品质不断提高,目前已得到大规模普及。电子琴轻便紧凑,音色变化多样,因而受到众多音乐爱好者的喜欢。但是电子琴毕竟只是对传统乐器的一种模拟,还无法代替传统乐器。如何进一步增强电子琴的性能和表现力,是电子琴未来发展需要解决的问题。特别是我国的民族乐器很多为弦乐器,缺乏自己的音源芯片,如何在弦乐器基音频率连续变化的情况下实现MIDI准确记谱和准确重播是一个难题。本文从电子琴的频谱合成发声技术、电子琴的结构形式和弦乐器的MIDI记谱方法等三个方面,对电子琴进行了探索研究。论文所完成的研究工作和成果总结如下。论文设计实现了一种基于计算机视觉的复合电子琴。在硬件方面,该复合电子琴用有机玻璃盒做琴体,琴面采用LED灯带侧光照明的有机玻璃板,通过广角摄像头监测手指的演奏位置。在软件方面,该复合电子琴在Visual Studio 2015开发环境下,借助OpenCV库函数进行图像处理,实时获取手指指尖的质心位置。在键盘乐器演奏模式下,系统调用传统MIDI功能进行发声、记谱和演奏;在弦乐器演奏模式下,系统调用本论文提出的增强的MIDI功能进行记谱,并通过频谱合成进行准确发声和演奏。从而实现了弦乐器和键盘乐器的统一。论文对弦乐器进行了物理建模和MATLAB仿真,进一步对几种典型乐器进行了傅里叶频谱分析,证实了通过基音和振动频率为基音频率整数倍的泛音,根据频谱包络线确定的音型进行频谱合成,可以在很大程度上还原原始声波,但是仍然可以听出两者在音质上的差异。论文进一步对基音和泛音周围邻域的频谱贡献进行了实验考察,总结出了双十规则:对大多数乐器,只要取包括基音在内的前十个泛音频谱,同时取每个泛音周围正负十赫兹内的频谱,根据频谱包络线确定的音型进行频谱合成,可以较为准确地还原原始声波,几乎听不出两者的差异。对某些频谱谱峰比较宽的乐器,在进行频谱合成发声时可以适当扩大每个泛音周围频谱的范围。论文针对连续发声的弦乐器,提出了一种增强的MIDI记谱方法,该方法首先找到弦乐器演奏某一乐音时,比该乐音频率稍低的最近邻的标准音名(假设两者的频率差为m赫兹),并采用此标准音名,按照传统MIDI指令进行记谱。进一步,再增加一条同样的MIDI指令,但新增的指令做两点改变,第一,音名序号变为m;第二,时戳加上一个很大的时间常数,使得时戳指向整首乐曲演奏完以后的某一个时刻。这样在播放时,如果采用传统MIDI播放器,由于新增的指令指向整首乐曲演奏完以后,不会影响当前标准音名乐音的演奏,但演奏效果稍差;如果采用根据本文方法增强的MIDI播放器,则在发现超长时戳后,自动减去一个很大的时间常数,并提取该指令所带音名参数m,将m加上标准音名对应的基音频率,得到准确的基音频率,再根据前述双十规则进行频谱合成发声,即可实现弦乐器的准确发声。
其他文献
琥珀是大自然的璀璨结晶,能将久远的时空定格于方寸之间,跨越亿万年的时光,这些大自然雕琢的艺术珍品,蕴藏着极高的美学价值。观察和探究琥珀中所存在的审美因素和创作表现价
可充电无线传感器网络(RWSN)已成为真实物理界和数字信息界的纽带,然而RWSN的长久工作中却一直存在着传感器节点能源供给的问题。为此,本文在分析RWSN模型基础上,引入无线能
人们每天都要做出大大小小的决策,所以关于决策的问题一直受到经济学家和心理学家的关注。长期以来,研究者们都是在实验室中给被试呈现关于决策选项的明确的概率和结果信息,
监察委员会制度是我国监察体制改革的顶层设计,其制度安排是为了整合过去分散的反腐败资源,从而构建起集中统一、权威高效的党和国家的监察体系,实现对所有行使公权力的公职
自尊是个体对自我的一种整体性情感评价和体验,内隐自尊是自尊的无意识成分,是指向自我的一种内隐态度。内隐自尊具有比外显自尊更为稳定的特性,内隐自尊一旦形成,其变化要比
傅逊是明代太仓人,本人在当时声名不显,但其著述在明代的《春秋》研究中占有较为重要的位置。傅逊的成果包括《春秋左传属事》《春秋左传注解辨误》《春秋左传属事古字奇字音
党的十九届四中全会提出:“坚持和完善中国特色社会主义制度、推进国家治理体系和治理能力现代化,是全党的一项重大战略任务”。在从体育大国向体育强国迈进的征程中,实现体
行政机关负责人出庭应诉制度是自2015年该制度写进法律并正式实施以来,在五年的司法实践中出现了很多问题。本文从法律层面分析问题产生的原因,如法律规定本身的待完善、司法
定中结构是自然语言中最普遍也是最复杂的结构之一,这种结构在词汇层面叫作复合词,在句法层面叫作定中短语。现代汉语名-名结构作为定中结构的一种,理论研究成果很多,而实证研究相对较少。前人的理论研究主要针对定语标记词“的”在名-名结构中的隐现条件及其相关的语义变化进行探讨。与此同时,名-名结构中,部分定语名词兼具形容词属性,即结构中的第一个名词项经历了由名词到形容词的词类转变并被赋予熟语语义,成为形容词
手风琴发明于十八世纪,经过近三百年的发展,目前仍属于不断发展的键盘类乐器。手风琴的演奏作品大多由来自俄罗斯、西欧、南美等国的作曲家创作。在中国,早期的手风琴演奏者