基于脑电信号的音乐情绪识别与可视化

来源 :上海师范大学 | 被引量 : 0次 | 上传用户:sihuajian
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
情绪是一种综合了人的感觉、思想和行为而产生的心理状态,它包括了人对外界或自身刺激的心理反应,以及伴随着这种心理反应的衍生出来的生理反应。在人们的日常工作、学习和生活中,情绪的体现无处不在,对情绪的分析和识别是神经科学、心理学、认知科学、计算机科学和人工智能等众多领域交叉下的一项重要的研究课题。脑电信号(EEG)作为脑神经细胞电生理活动在大脑皮层或头皮表面的总体反映,包含了大量的生理与疾病信息。但脑电信号是一种随即非平稳的微弱信号,通常只有0.2~1毫伏,具有随机性和非平稳性强、非线性、背景噪声复杂等特点,加之情绪的复杂多样性,多导联脑电信号产生的高维多元时间序列更是脑电信号分析处理的难点所在。近年来,随着脑电信号采集设备的应用和推广,信号处理和机器学习技术的快速发展,以及计算机数据处理能力的大幅提高,基于脑电的情绪识别研究已经成为神经工程和生物医学工程领域的热门课题。因此,本文主要针对多导联脑电检测仪检测到的基于音乐的高维动态多元时间序列信号来研究时间序列数据特征提取选择、参数寻优、降维可视化,从而实现经典的音乐情绪识别研究,具体内容如下:一,基于音乐的情绪诱发实验设计与信号预处理:为了采集到不同人在不同情绪下的脑电信号,结合实验室的脑电检测仪,设计基于音乐的情绪诱发实验,采集22位实验志愿者愉悦状态和不愉悦状态的脑电数据。针对实验采集的数据量大、有一定的噪声干扰、存在大量冗余的数据的问题,首先对原始脑电信号进行滤波处理,消除工频干扰、眼动干扰等噪声;其次对原始脑电记录进行分割,将长样本分割成3秒一段的小样本;并采用排查的方法剔除个别出现奇异点或位置偏移明显的异常样本。最终获得22个数据集,作为整篇音乐情绪识别与可视化的数据基础。二,基于音乐的脑电特征提取与选择:验证了脑电信号的群体不可分性,数据集的分析结果可彼此之间互相补充论证。根据脑电信号的生理特征,从经过了预处理和数字化处理的脑电信号中依次提取出能反应情绪变化的常用特征,包括时域统计特征、频域特征、时频域特征、Hjorth特征、HOC特性以及微分不对称特征。根据研究需求和各类特征的适用性进行特征组合,并对所有特征组合进行识别准确率对比分析,采用K-紧邻、朴素贝叶斯、决策树和随机森林四种常规分类方法。分类准确率的对比分析表明:首先,HOC+Hjorth+微分不对称的特征组合识别结果优于其他三种特征组合;其次,随机森林分类器的情绪识别效果最优;最后,HOC特征的最高阶数P取值存在显著的个体差异性,且直接影响到情绪识别结果。三,基于群智能理论的HOC特征参数优化选择:选用一种简单高效且更适用于非线性优化问题的群智能优化算法—萤火虫算法分别对22个数据集的P值进行参数优化,将随机森林有监督学习的分类结果作为优化过程中的评价函数,优化结果相互独立且互不影响,自动优化后的P值能使每个个体的情绪识别效果达到最佳。为了避免优化过程中的高分类准确率存在偶然性,对个体特征样本进行交叉验证,验证结果证明不存在偶然性。四,基于t分布随机邻域嵌入的脑电可视化:由于人体脑电情绪的多样性,为了观察和发现二维空间中复杂脑电信号的正、负类别,本文采用了一种非线性的降维可视化算法t-SNE对高维脑电数据进行可视化从而辅助情绪识别。此外发现算法困惑度Perplex的取值直接影响可视化效果,需要进行参数优化,因此使用上一章的萤火虫算法分别对22个数据集进行Perplex值优化,将HOC+Hjorth+非对称特征组合在高维和低维空间上的KL散度之和的倒数作为优化过程中的评价函数,自动优化后的Perplex值能使每个个体的可视化效果达到最佳。五,基于DEAP公开数据集的情绪识别研究:使用DEAP脑电公开数据集中14个个体的情绪采集数据对研究结论进行验证和优化。首先从经过了预处理的脑电信号中提取出时域统计特征、频域特征、时频域特征、Hjorth特征、HOC特征以及微分不对称性特征,验证了HOC+Hjorth+微分不对称特征是最具价值的特征组合。然后,使用萤火虫算法优化HOC特征的最高阶数P,将随机森林交叉验证后的学习结果作为寻优过程中的评价函数,14个个体的寻优结果相互独立且互不影响,验证了P值存在显著的个体差异性。最后使用t-SNE可视化算法对特征数据进行可视化寻优,即在可视化的过程中进行优化,最终获得一个最优的可视化结果,与此同时发现数据分类结果的好坏直接影响到可视化效果,部分个体数据集可视化效果不理想。
其他文献
近几年来,中等职业学校的发展遇到了前所未有的困难,面临着严峻的挑战,招生难导致学生数量锐减,学生整体素质下降特别是道德素质,这一现实状况使中职学校的德育工作面临严峻的挑战。跆拳道是一项注重技术磨炼和精神统一的武道运动,更是一项重视道德、培养礼仪行为的素质教育。跆拳道的道德规范为“礼仪廉耻、忍耐克己、百折不屈”。一般普遍认为练习跆拳道是一项内外兼修的运动,能够帮助学生强健体魄、防身自卫,同时能够培养
学位
目的 探讨抗甲状腺球蛋白抗体(anti-thyroglobulin antibodies,TgAb)与抗甲状腺过氧化物酶抗体(anti-thyroid peroxidase antibody,TpoAb)检验诊断甲状腺功能异常的价值。方法 选取280例2020年1月-2022年4月本院收治的甲状腺功能异常患者,设为观察组,选取100例同期甲状腺功能正常的健康体检者,设为对照组。采用化学发光免疫分析
期刊
随着金属纳米催化剂在催化生产和环境治理中扮演着重要角色,有着优异的催化活性和高原子利用率的金属催化剂在能源枯竭和环境问题突出的今天,已经成为研究的重点。单原子催化剂不仅仅有着最大的原子的利用率,而且其表面配位环境相较于纳米颗粒更为清晰,使其拥有比纳米颗粒和团簇催化剂更优异的催化活性和催化选择性;更为重要的是单原子催化剂的活性位点为单原子,拥有着高度一致的活性位点是理想的模型系统。单原子催化剂由于其
学位
从简单的有机化合物出发,脱羧偶联反应通过对惰性化学键的活化可以生成高附加值的有机化合物。但传统均相催化剂催化脱羧偶反应存在需要加入复杂昂贵的配体;反应后的贵金属难以回收;反应过程中添加对环境具有污染的卤代试剂等一系列问题。基于以上问题,本文提出通过合成功能化的介孔碳载钯催化剂,调变活性中心钯的配位环境,从而实现活化惰性键的目的。本文考查了钯催化剂在2,6-二甲氧基苯甲酸与苯乙烯的脱羧偶联反应中的作
学位
电离层延迟是影响卫星导航和定位精度的主要误差源之一,精确建立电离层模型对高精度导航定位具有重要意义.针对高纬度区域多全球卫星导航系统(GNSS)电离层建模的研究,首先给出了GNSS多系统的电离层建模方法,然后利用高纬度区域均匀分布的11个MGEX(Multi-GNSS Experiment)测站观测数据进行电离层建模,对比分析了电离层多项式模型和球谐函数模型下GPS单系统和GNSS多系统的电离层建
期刊
芳香硝基化合物催化加氢获得芳胺类化合物在工业上具有广阔的应用前景。纳米Au催化剂被认为是芳香硝基化合物选择加氢的第二代催化剂。传统催化芳硝基化合物加氢的纳米Au催化剂主要以活性氧化物如Ti O2,Fe2O3等为载体,碳载Au催化剂因其低活性和低选择性而被忽略。本文利用巯基与Au的强相互作用,调节巯基与Au的摩尔比合成了一系列不同粒子尺寸的碳载纳米Au催化剂(1.6-9.0 nm),考察了介孔碳载纳
学位
钯催化剂因其卓越的加氢能力一直被工业广泛应用。正因其强大加氢性能,金属稳定性弱、产物过加氢等问题一直困扰人们。通过改变钯的形貌、粒径、载体性质、添加其他金属形成合金非金属元素修饰等方法可以对钯催化剂的催化性能进行调控。本文将通过掺杂硼,合成一种绿色,可持续且高选择性的钯催化剂,研究硼钯之间电子转移与苯甲醚加氢脱氧选择性之间的关联,为设计高选择性和稳定性钯催化剂提供新方法。采用溶剂挥发诱导自组装方法
学位
莲(Nelumbo)在中国的栽培利用历史悠久,是集观赏、食用、药用及净化水体等多功能于一身的重要水生植物,经济和文化价值极高,但是目前未有明确的多倍体荷花资源。秋海棠(Begonia)株型优美、叶形奇特、叶色及叶斑丰富,是重要的观花和观叶植物;在自然界中存在多倍体植株,目前未发现人为诱导的多倍体秋海棠资源。本研究以荷花和秋海棠为试验对象,采用化学诱变的方式,诱导获得多倍体种质资源。使用秋水仙素/除
学位
随着微纳制造技术和集成电路的发展,微机电系统(Micro Electromechanical System,简称MEMS)成为了近几十年来流行起来的一个新型领域。微机电系统具有体积小、集成度高、功耗低等优势,因此被广泛应用于人们的日常生活和生产中。微光机电系统(Micro Optical Electromechanical System,简称MOEMS)是微机电系统的一个重要的分支,它主要由微光学
学位
目的 探讨甲状腺乳头状癌(PTC)合并桥本甲状腺炎(HT)患者的血清甲状腺过氧化物酶抗体(TPO-Ab)、甲状腺球蛋白抗体(TgAb)水平及临床意义。方法 选取100例PTC合并HT患者、100例HT患者、100例健康体检者,分别作为A组、B组、C组,比较3组研究对象的血清TPO-Ab、TgAb水平及甲状腺功能指标[游离三碘甲状腺原氨酸(FT3)、游离甲状腺素(FT4)、促甲状腺激素(TSH)]水
期刊