基于P300的字符拼写实验设计及算法的研究

来源 :河北大学 | 被引量 : 0次 | 上传用户:godbless97
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在人工智能领域,脑机接口技术(Brain-Computer Interface,BCI)逐渐成为备受关注的课题。BCI可以帮助患有运动神经元疾病的患者与外界交流。现有基于脑电的字符拼写主要有基于目标刺激发生后300ms的正电位(Positive,P300)的字符拼写与基于稳态视觉诱发电位的字符拼写,然而这些范式具有严重的眼动依赖,这种情况限制使得一些患有严重神经肌肉残疾的患者无法使用,现有的无眼动依赖的范式具有较低的拼写精度或信息传输速率。因此,想要提高P300的信息传输速率及在特殊人群中应用还有很多难点。本文主要解决两个问题,首先为解决无眼动依赖范式在较高字符拼写精度时具有较低的信息传输速率的问题,提出了基于行列编码的字符拼写范式,第二,现有的基于深度学习的字符拼写特征提取与分类算法大都缺乏表征被试心理状态及视觉认知过程的频域特征,且单个行列闪烁均给出是否为目标刺激的判定,导致单次拼写下有多个行列同时被判定为目标刺激,使得少次拼写下字符拼写识别精度不高的问题。针对上述问题本文提出了卷积神经网络与长短时记忆网络(Convolutional Neural Networks and Long Short Term Memory Network,CNN-LSTM)的复合模型以提取信号时空频多域特征及行列横向特征再提取,最后进行分类。主要工作如下:1)为了提升无眼动依赖字符拼写范式的拼写效率,本文提出了基于行列编码的字符拼写范式,并使用该范式对信号进行采集,在当前表现较好的多尺度卷积神经网络(multiscale convolutional neural network,Ms-CNN)字符拼写解码模型对其进行测试。在该实验范式中,刺激信号出现在屏幕的中央且尺寸较小,被试无需在屏幕范围内搜寻目标字符,即被试无需依赖眼动即可完成实验;其次,实验刺激对字符采用行列编码的方法,使得在快速序列视觉呈现范式中单次拼写只需呈现12个刺激编码即可映射到36个字符中,提升了刺激呈现效率。使用该实验范式在平均拼写准确率达到85以上时,信息传输速率达到10.60bit/min,在保证较高字符拼写精度的前提下本文提出的范式具有更高的信息传输速率。2)为了解决现有基于深度学习的算法中忽略了表征被试心理状态及视觉认知过程的频域信息导致少次重复拼写下准确率低的问题,本文提出了基于CNN-LSTM的字符拼写检测模型。首先构建了包含多节律信号的时域信号块,作为模型的输入送入三个卷积层分别提取信号的频域、空域、时域特征,最后经过全连接层完成特征学习。为了防止单次拼写中多个行列刺激同时被判定为目标刺激导致最终字符拼写准确率低的问题,长短时记忆网络模块对得到的频域、空域和时域特征进行再提取,使得每一次的字符拼写中仅有1个行和1个列刺激被判定为目标刺激。在基于行列编码的字符拼写范式及公共数据集中做了拼写预测并与现有结果作对比,其中在行列编码实验范式的字符拼写预测中,使用该算法可以在较少次重复实验下得到较高拼写精度,在BCI CompetitionⅢ的公共数据集中,被试A在重复实验14次时准确率达到94%,传输速率为8.52bit/min,被试B在重复实验8次时拼写准确率为96%,信息传输速率为14.68bit/min,在相同重复试验次数且拼写精度高于70%的部分拼写结果中,该算法比现有算法平均准确率高出5.34%,且具有更高的信息传输速率。
其他文献
孤独症(Autism Spectrum Disorder,ASD)是一种神经系统疾病,常发病于婴幼儿早期,症状包括行为方式刻板和认知方式局限等。目前,主要是医师参考量表对ASD进行诊断,方法主观性强且诊断效率低。因此寻找客观生物学标志物对ASD诊断具有重要意义。本文基于递归图(Recurrence Plot,RP)提取ASD儿童八通道脑电信号(Electroencephalogram,EEG)特征
学位
SDN解耦了数据平面和控制平面,具备网络可灵活配置的优势。SDN网络状态的全局可见性和流量转发规则的运行操作使得任何冲突都可以通过逻辑上集中的控制器远程解决,增强了网络的稳定性。但同时,控制器的集中化及其可见性使得网络更易受到攻击,为恶意攻击创造了更多的机会。DDoS攻击会对SDN网络造成毁灭性打击,这是一个非常严重的问题。论文对此问题,从检测、负载均衡以及攻击溯源三个方面进行研究。所做的工作主要
学位
近年来,脑血管疾病的患病人数急剧上升,特别是脑卒中患者在治疗后普遍存在的不同程度的运动功能障碍,给家庭和社会带来极重的负担。及时而有效的康复治疗能够最大程度地恢复患者运动能力。而对脑卒中患者运动神经系统功能状态进行准确评估是提高康复治疗效果的基础。皮质肌耦合(corticalmuscular coupling,CMC)能够揭示大脑皮层和运动肌肉组织两大系统之间的信息传递和功能联系,可以用于研究神经
学位
药物靶点关系是药物研发过程中不可缺少的信息。因此,药物靶点相互作用相关的研究已经成为药学研究的热点。传统的实验方法验证药物靶点相互作用关系效率很低,需要花费大量的时间和精力,并且费用也十分高昂。这大大制约了药物的研发速度,阻碍了医学技术的进步。随着科学技术的发展,越来越多的专家学者利用计算机技术辅助药物靶点关系的预测,极大地提升了实验效率,缩短了药物研发的周期。现有的药物靶点关系研究中主要存在两大
学位
疲劳表情作为人体的生理和心理机能的外在体现,能够真实反映人们的注意力、知觉、思维、判断、意志、决策和运动能力是否下降。因此,疲劳表情识别在医疗健康检测、疲劳驾驶等领域有着很大的应用潜力。在疲劳表情识别领域中,遮挡条件下的表情识别技术是目前广大研究者的重点研究对象。在遮挡情况下,疲劳表情识别任务时常因难以提取到有效的分类特征信息,导致疲劳状态判断不准确。因此,本文围绕如何提高遮挡条件下的疲劳表情识别
学位
胎儿心电图检测技术是一项检测围产期以及妊娠期胎儿健康情况的重要技术手段,能有效地发现胎儿在母体内正常发育生长中的不良情况,但现实中采集到的胎儿心电图往往受到复杂噪声和母体心电分量的干扰。通过对胎儿心电图进行分析,可以在早期及时诊断胎儿宫内缺血和先天性心脏病等,能有效地降低新生儿各类疾病的发病率和死亡率。从母体腹壁混合信号中稳健地提取胎儿心电信号是有效监测胎儿健康最大的挑战,这主要是由于胎儿心电相对
学位
睡眠呼吸暂停综合征作为一种常见的睡眠疾病,它严重影响人们的睡眠质量和身体健康。近些年来,越来越多的医生和学者逐渐关注到睡眠呼吸暂停综合征。多导睡眠监测仪作为睡眠呼吸暂停综合征的金标准,用它对患者进行整夜检测,根据呼吸信号进行判断疾病,但是这种检测方式会让患者产生严重的不适感且其检测成本昂贵,因此研究出一种简单方便并且易采集的生理信号对于检测睡眠呼吸暂停综合征来说尤为重要。心电图机和它的便携式设备在
学位
信息时代,互联网行业迅猛发展,大量信息交换给人们带来方便的同时也出现了信息过载现象,导致人们很难快速寻找出自己需要的事物。虽然推荐系统的广泛应用有效缓解了这一难题,但是数据稀疏性、冷启动和可解释性等问题始终限制着推荐系统的发展。本文围绕融合辅助信息缓解传统推荐算法存在的数据稀疏性问题展开研究。针对评论文本信息挖掘不充分、不准确,以及单一信息无法全面精准挖掘用户兴趣偏好等问题,提出相应的解决方案。本
学位
近年来,随着中风、帕金森等疾病以及意外事故的频发,我国肢体残疾人数逐渐增加。然而由于医疗资源有限,无法满足所有肢体残障患者在医院等专业康复机构进行康复训练的需求。居家康复具有省时、省力、降低康复成本的特点,因而受到社会的广泛关注。康复机器人与智能辅助系统的开发是实现居家康复的关键技术。因此,研究机器人智能辅助康复系统的相关技术具有重要社会意义。本文设计了基于Kinect和NAO机器人的上肢辅助康复
学位
目前工业生产中机器人主要采用示教编程的方式进行焊接,该方式中机器人会一直按照示教得到的焊接轨迹进行运动。焊接大型工件时,工件尺寸误差、定位夹具磨损、工件在焊接中受热变形等因素会对焊缝位置产生影响,导致机器人实际焊接轨迹偏离示教得到的焊接轨迹。为使机器人在焊接过程中可以根据实际焊缝位置自动调整焊接轨迹,解决大型工件焊接工作中误差较大和作业困难的问题,本文提出基于激光视觉的智能焊接工作站设计方法,在机
学位