音乐情感和风格识别技术研究和实现

来源 :北京大学 | 被引量 : 0次 | 上传用户:fever1879
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机技术和网络技术的迅猛发展,数字音乐信息的数量在急剧增加,海量的音乐数据已经成为现实。同时,网络音乐是互联网应用的基本模式之一,而音乐检索是网络音乐服务的最主要的内涵。由于缺乏有效的、区别于传统的音频检索技术,尽管计算机和互联网中存在大量的音频资源和成千上万的音乐的用户群体,但却很难充分的有效利用这些音频资源和有效的满足这些用户的需求。所以,如何在大规模音乐集上提供令用户满意的检索体验和手段,是音乐信息检索领域最具挑战的研究方向之一,同时也具有较强的现实意义。   传统的基于元数据的音乐检索,由于所用的元数据没有直接反映音乐的内容(如音色、旋律、节奏等)和语义(如风格、情感),从而不能按照内容或者语义来检索音乐所以检索能力有限;要支持对海量音乐进行基于内容或语义的检索,就必须能自动分析音乐内容并识别音乐的语义相关的特征,而音乐风格和情感是最重要的音乐语义相关的特征,所以本文的立意就在于:基于音乐内容对音乐情感和风格识别。   基于音频信号的音乐情感和风格的识别通过以下方面的研究展开:一、基于音频特征的情感识别研究。主要技术手段包括:情感的建模、情感特征提取和选择、情感分类和情感回归。利用PAD心理学模型对音乐建立可计算的情感模型,分析和音乐情感密切相关的特征以及建立相应的特征抽取方法,然后通过机器学习的方法对情感进行分类和回归。情感分类问题,本文创新在于:研究出不同的特征组合对于不同的情感维度的影响,然后在特征组合的基础上构建层次的分类框架。此外运用PCA和ReliefF特征选择的方法对特征进行筛选,降低运算复杂度并且提高分类精度,实验结果显示达到81.5%的分类准确度。对于情感的同归问题,本文在分类框架的基础上,结合特征选择的方法,分别对PAD模型的两个维度进行回归分析,实验结果R2对A值回归达到70.01%,对P值回归的结果达到57.38%。二、音乐风格是体现音乐的一个重要的语义维度,本文对于中国音乐的风格的分类做了一定的研究,提出了一种基于分段机制的隐马尔科夫模型(SDBHMM)来解决中国民乐的分类问题,分类平均准确度达到了92.49%,评测结果优于经典的隐马尔科夫模型(HMM)。最后,本文对于相似检索问题做了一定的尝试,通过对底层音频特征采用LSH技术进行索引,对应于不同的高层特征实现不同纬度上的相似,并且在原型系统中实现了基于片段的相似检索和基于整首音乐的相似检索。   基于如上方面的研究,设计和实现了原型系统-MusiCool(乐酷)音乐检索系统,在此系统中,集成了基于音频信号的情感识别和风格识别的方法,并且开展了相关的实验。本系统既可作为一个桌面系统,管理用户的本地音乐,也可以作为在线音乐系统的音乐处理的内核使用。
其他文献
Ad Hoc网络是由一组带有无线收发装置的移动终端组成的一个自治网络系统。该网络的路由发现和分组转发两大功能不是通过专用的路由设备而是通过普通节点的共同协作完成。但是
计算机安全领域的一个最大的挑战就是区分正常行为和可疑行为。半个多世纪以来,研究者们大多依靠一些规则来识别以及阻止特定的计算机事件。然而,随着越来越多的大型IT系统之
作战仿真已经成为人们认识战争和学习战争的重要手段和方法,在各层次的分析、训练以及测试与评估等方面发挥着越来越重要的作用,是快速提高部队战斗力、提升国防和军队建设水平
目前,由于信息技术的飞速发展,信息安全问题日趋复杂。在可信计算方面,可信计算技术就是为了解决安全问题而日益成为信息安全领域研究的一个新热点。可信计算平台是解决信息
随着国家教育事业的发展,近年来社会上的各种考试发展迅速,如计算机等级考试,四、六级考试,职业技能鉴定,高自考等。这些考试往往决定着一个人的事途发展,所以参加的人数也是
程序的安全问题,是信息安全的一个重要方面。一方面,软件的复杂度和功能性提高,软件缺陷和漏洞的概率也大大增加,攻击技术也不断发展。另一方面,程序安全方面的研究也取得了长足的
数据交互业务的迅猛发展,对传输数据海量化和数据交互软件间的互操作性提出了要求。VoIP单纯的语音业务已经不能满足人们的通信需要,而业务是通信网络发展的驱动力。通信网络
随着智能手机不断普及,交通模式识别已经成为情景计算的热门研究领域。作为理解用户移动性的核心组成部分,准确识别不同的交通模式,将对许多研究领域产生重要影响。首先,用户的交
在分布式系统应用领域,传统的分布式应用体系结构大都从自身需求出发,使用各种不同的技术构成相互独立的紧耦合的封闭式系统,它们相互之间缺乏兼容性、有效的互操作性以及重用性
由于XML具有自描述性和可扩展性等特点,能够满足WEB上对数据描述和存储的需求,因而使得XML正在成为Web上数据表示和交换的事实上的标准。随着XML格式数据的快速增长和广泛应