基于深度学习的音乐音频分类研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:peng6265066
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
音乐音频分类技术能够基于音乐内容为音乐添加类别标签,在音乐资源的高效组织、检索和推荐等相关方面的研究和应用具有重要意义。传统的音乐分类方法大量使用了人工设计的声学特征,特征的设计需要音乐领域的知识,不同分类任务的特征往往并不通用。深度学习的出现给更好地解决音乐分类问题提供了新的思路,现有的基于深度学习的音乐音频分类方法在音乐数据处理、模型设计等方面还存在着不足,本文对基于深度学习的音乐音频分类方法进行了深入研究,主要工作内容如下:将音乐的音频信号转换成声谱作为统一表示,避免了手工选取特征存在的问题。音乐的标注工作难度较大,有限的标注数据不利于深度学习模型的训练,对此本文结合音乐信号的特点采用了多种音乐数据增强方法对音乐数据进行增强。基于深度学习的音乐音频分类方法通常使用卷积进行声谱特征的提取,大多已有研究并没有很好地针对声谱的特点进行卷积结构的有效设计。对此本文根据声谱的特点,将一维卷积、门控机制、残差连接与注意力机制相结合,提出了一种基于卷积神经网络的音乐分类模型,该模型能够提取到与音乐类别更相关的声谱特征。模型在GTZAN音乐流派数据集上的准确率达到了91.8%,验证了方法的有效性。单纯基于卷积神经网络的音乐分类方法忽略了音频本身的时序特性。对此本文将提出的卷积结构与双向循环神经网络相结合,提出了一种基于卷积循环神经网络的音乐分类模型,并使用注意力机制为不同时刻循环神经网络的输出分配不同的注意力权重,从而得到更好的音乐整体特征表示。模型在GTZAN数据集上的分类准确率提升至92.2%,同时在多标签标注数据集Magna Tag ATune上的AUC达到了0.9122,超过了其他对比方法,并对不同音乐标签的标注情况进行了分析。本方法对音乐流派的大部分标签具有良好的标注能力,在乐器、唱法与情绪类别的部分标签上也有不错的表现。最后,本文根据上述提出的音乐分类方法设计与实现了一个基于音频的音乐标签标注系统,实现了对音乐流派、情感与场景类音乐标签的标注,为构建音乐领域知识图谱提供了数据支持。
其他文献
近年来,网球运动在我国发展较快,群众关注与参与程度显著提升。但是,伴随着李娜等优秀女子网球运动员的退役,我国网球运动员出现断层现象,新一代网球运动员水平较女子金花差
自1979年国家体委开展“武术对抗项目”试点以来,武术搏击相对应的赛事开始萌芽,经过近30年探索发展,武术搏击赛事开启了商业化、市场化运作之路。《中国武术发展五年规划(2016-2020年)》明确指出:以散打项目为突破口,开发武术项目商业化赛事,激发市场活力,打造散打、终极格斗、自由搏击、泰拳等商业性赛事活动,培育有竞争力和国际影响力的知名品牌商业赛事。这不仅为国内搏击赛事发展提供了广阔天地和有力
中风后遗症患者,多数经过住院治疗,度过了危险期,进入康复阶段。他们在出院后大多存在各种各样的症状,多数生活不能自理,需要进一步巩固治疗,来减轻家庭和社会的负担。笔者在门诊这
墨脱县位于西藏的东南部,面积3万多平方千米,属雅鲁藏布江下游山川河谷地带,平均海拔1000多米,是藏传佛教的圣地之一。墨脱四面环山,形似莲花,这里的地形可以用“山顶在云间,山脚在
描述了在通信公司基站上,采用RS-485总线通信的数字化温湿度检测系统的设计和实现。介绍了温湿度数字传感器和PIC12F629的功能特点,使用PIC软件时序控制温度传感器DS18B20和湿度传感器HS1101测量出结果,并应用外部中断判断地址实时发送数据,介绍了上下位机的基本功能。利用此系统可以实时准确地对温湿度进行监测。实现温度检测范围为-20~90℃,精度为±0.5℃;湿度检测范围为0~100
基于工业以太网技术及现场总线技术,设计并建立了一个典型的工业网络系统实验平台,阐述了系统总体设计思想、工程架构,以及具体的软硬件实现方案。详细描述了基于OPC技术的工业
  本文通过对云南高原特色农业发展现状进行分析研究,总结云南高原特色农业取得的成绩,分析存在的问题,在此基础上提出加快云南高原特色农业发展的对策建议。
《中华人民共和国邮政法》规定邮政企业承担邮政基础业务(邮政普遍服务)义务和经营竞争性业务(快递业务),邮政管理部门代表政府依照《邮政法》等法律法规对邮政企业的邮政普遍服务业务以及竞争性业务(快递业务)进行监管。一方面是邮政管理部门的监管和人民群众对邮政服务的期待,一方面是激烈的市场竞争,服务质量是服务行业的生命线,邮政企业如何在现行的邮政服务质量的管理中引入先进的服务质量管理理论,有效提高服务质量
【案情】被告人曾某与被害人秦某为同事,年收入约4万元。2012年12月曾某居中介绍王某向秦某借款10万元,月利息三分,王某按时归还了本金和利息。2013年1月至6月,曾某为了筹集赌资,谎称其朋友需要工程周转资金先后五次向秦某借款160万元,月利息三分,期间按时支付各项欠款的利息。曾某将借款赌输后,不再回应秦某的还款诉求并外逃,2014年8月在外省被抓获。  本案中,对于曾某的行为如何定性存在两种意
【背景材料】    2007年1月18日,在“迎奥运讲文明树新风”活动动员大会上,北京市将每月11日确定为“自觉排队日”,意为两人以上就应像“11”一样顺序排列2008年2月21日,由北京市交通委市运输局等单位联合发起的“22日让座日”活动正式启动今后,北京市每月22日都将作为“让座日”开展主题活动这也使得北京成为国内首个由政府部门推广开展“让座日”活动的城市    【知识链接】    1.良好的