基于领域自适应的甲状腺超声图像结节诊断方法研究

来源 :太原理工大学 | 被引量 : 0次 | 上传用户:hzq1989aa
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度神经网络已经广泛应用于包括医学图像分析在内的各种计算机视觉任务中。通常,大多数神经网络对来自相同分布的图像进行训练和评估,且假设数据集(训练集和测试集)共享相同的数据分布,但现有医学数据受固有的小数据集的影响,限制了大型深度学习模型的广泛临床采用。随着深度学习的深入,现实世界中研究的课题往往考虑收集具有不同场景分布的目标数据,但数据间的异质性严重受到领域转移的挑战。领域转移,即训练和测试数据特征之间的分布不匹配,导致测试误差成比例增加,在大规模图像数据集上训练的深度卷积神经网络亟待解决领域转移引起网络泛化性能下降的现实问题。甲状腺结节作为最常见的结节性医学病变之一,收集带有像素级标注的大规模甲状腺超声图像是困难的,需要昂贵的成本和大量的时间。针对甲状腺超声图像,如何有效的利用跨模态数据构建领域自适应框架进行结节的诊断工作尚未开展。本文提出了一个多任务级联系统框架,用于提高领域自适应学习模型对具有偏移分布的多源域数据的预测准确性。本研究受超声医师诊断超声图像的工作模式的启发,提出了一种结合文本信息和超声图像的生成对抗网络用于超声图像生成。这两种模态的数据在视觉层明显不同,在语义层趋于一致,普通的生成器-鉴别器模块更善于模拟捕捉源域的低级视觉层特征,忽略了语义对图像生成结果的指导性作用,结果与实验的预期相背离,为了发挥领域知识在定位超声图像重要区域方面的特长,同时增强跨域特征的可关联性,本文设计了语义一致生成对抗网络(SCGAN)。受甲状腺成像报告和图像系统(TI-RADS)中标准化术语的指导,将从超声诊断学报告中提取的病症关键词等文本信息作为领域知识,通过迁移领域知识中与图像相关的语义密集型特征表示,为生成网络的输入提供关键信息。同时,为防止扫描仪、患者个人标识等无关信息对输入图像的干扰,对图像感兴趣区域进行了归一化处理。在生成器模块中,增加了跨域对齐自注意力层(CASAM)同时在重要的图像特征和文本表示上产生注意力,以便为图像生成任务提供更显著和更有意义的嵌入。在CASAM中引入通用度量余弦相似度将图像特征映射到相应的细粒度文本表示中,利用语义关联来有效地指导对齐过程。在鉴别器模块,增加了用于映射数据分布的铰链损失、用于鼓励学习语义级内容的视觉差异性损失和用于增强网络泛化的跨域融合的零中心梯度惩罚函数为生成器提供更加明确的收敛目标,指导生成器生成更真实且和超声诊断学报告语义一致的图像。本文的目的是使用生成的超声图像来分类良性和恶性的甲状腺结节。为了评估SCGAN图像生成方法的有效性,同时也检验生成图像在甲状腺结节诊断任务上的泛化能力,引入了协作注意力机制改进预先训练的深度卷积神经网络SCG Res Net-50分类模型。该模型基于多组通道注意力和软性空间注意力来解耦局部和全局特征的线索。为有效控制参数数量,且不同程度地提高分类性能,在特征提取阶段将特征细化为多个分组。通道注意力模块传递的信息与图像识别相关,而空间注意力模块传递的信息与特征位置相关。两个子模块共同构成感知模型协作注意力机制。此外,在空间注意力中,采用带有权重约束惩罚项的软性特征聚合算子来微调特征图中的差异化位点信息,获取上下文内容,提高网络适应能力。本文在甲状腺超声图像数据集上评估了提出的方法,用于超声结节的图像合成和良恶性诊断。综合研究的实验结果表明,SCGAN方法对合成的甲状腺结节的初始分数达到了4.26±0.18,SCG Res Net-50模型的分类准确率达到了94.30%,AUC达到了97.02%,结果明显优于最先进的方法。
其他文献
为了实现对桥梁平转施工动态过程的实时监测,系统设计并完成了集成应力传感器、倾角传感器、拉线传感器的集成式球铰的桥梁转体防倾覆监控系统。依靠MATLAB与LabVIEW混合编程模式实现多倾角传感器的融合、应力差法计算桥梁的倾覆力矩,利用倾角和倾覆力矩双输入的模糊计算得到转体桥梁唯一的倾覆危险值,提高了转体桥梁的倾覆危险值的可靠性。系统通过三维模型的姿态跟踪及应力映射,实现人性化的直观显示,简化施工现
期刊
数字图像已经在日常生活中被广泛使用,但是也面临着信息泄漏和侵犯版权等问题,因此数字图像保护技术应运而生。作为两种重要的图像保护技术,数字图像加密技术和数字图像水印技术已经成为研究热点。近年来,数字图像加密技术的研究大部分都是基于简单、低维的混沌系统,安全性不足;而数字图像水印技术则大部分是在水印嵌入算法上作出改进,忽略了水印系统的安全性。本文针对数字图像保护技术中的问题进行了研究,提出了基于高维复
学位
植物叶片病害识别是农业和图像处理领域共同关注的重要课题。目前大多数病害识别的研究都基于神经网络,而成功的神经网络包含较多的参数,使用有监督的神经网络模型进行叶片病害识别需要充足的样本进行训练。而在现实生活中,由于标记样本的代价较高或病害发病率较低等因素,往往得不到充足的训练数据,这是目前植物病害识别研究的一个普遍挑战。因此,需要寻找一种能够生成病害图像的数据增强方法,解决训练样本不充足问题,以满足
学位
行人再识别技术作为计算机视觉领域的重要研究课题,它可以形象地理解为在不同的监控摄像头下检索相同的行人。随着互联网的高速发展,监控网络渐渐覆盖到生活的方方面面,大量的图片数据需要处理,由此行人再识别技术被人们广泛关注。尽管目前行人再识别性能有所提高,但现有的方法通常依赖于这样一个假设,即要查询的人和图库图像都拥有相同的服装。虽然这个假设确实适用于许多现有的Re-ID数据集,但如果数据经过很长时间的聚
学位
肺癌是当今世界死亡率最高的癌症,如果能够在肺癌发生的早期发现并及时治疗,可以明显降低肺癌死亡率。利用图像分割技术对患者肺部CT图像中发生病变的区域进行精准分割,可以提高肺癌早期诊断率。传统图像分割方法分割精度低且需要大量人工操作。近年来分割精度更高且特征表征能力更强的深度神经网络在图像分割领域得到了广泛应用。因此,本文以U-Net和3D U-Net网络这两种深度学习方法为基础展开研究。主要贡献如下
学位
注意缺陷多动障碍(Attention-Deficit Hyperactivity Disorder,ADHD)是最常见的神经发育障碍之一。尽管症状通常开始于儿童时期,但有大部分的患者在成年期也会受到影响,表现出持续存在的社会功能问题、较低的学术成就和较高的精神问题风险。ADHD作为一种神经发育性疾病很难对其症状进行界定,但通常伴随着脑网络的改变,通过研究ADHD脑网络可以探索其发病机制。结构脑网络
学位
利用磁共振影像数据对脑网络进行表征是目前研究脑精神疾病分析的一种先进技术。以往的脑网络研究主要集中在图上,研究者们将脑网络与人工智能领域中应用较广泛的传统的机器学习与深度学习等计算机技术结合起来,对脑网络进行特征提取与选择、分类等工作。然而近几年的研究表明,大脑认知机制涉及多个大脑区域间的相互作用,而不是成对间的相互作用,为有效表征大脑之间信息的高阶传递关系,超图被提出用来描述脑网络。在以脑区为节
学位
针对目前既是小曲线半径又是大坡度的桥梁转体施工研究不多现状,依托新建广州至湛江高速铁路工程广珠京广联络线特大桥(52+52)m转体梁施工项目,结合该桥为目前国内最小曲率半径(仅310 m)、坡度最大(纵坡达20‰)的T构转体桥,梁体上跨环镇东路、京广三线联4线、机走线等多条城市道路和铁路线路,转体过程中梁底与接触网立柱柱顶隔离开关距离仅有30 cm等不利条件,阐述了该转体桥的称重、配重、转体结构施
期刊
精神分裂症(schizophrenia,SZ)和双相情感障碍(bipolar disorder,BD)都是一种很常见的精神疾病,不仅影响患者的生活,也影响了别人的生活。但是两者的患病机制都不十分明确,并且在临床诊断上也没有严格的分界线。因此不断探索SZ和BD患者的患病机制以及两者之间的不同,为疾病的诊断和干预提供新的手段至关重要。越来越多的研究表明,神经疾病是大脑的连接障碍造成的,大脑区域之间复杂
学位
新药物的开发是一个耗时耗力的过程,且新开发的药物实际利用率较低,造成了资源的浪费,因此,研究者们提出了药物重定位的思路,探索已上市的药物对于其他疾病的治疗效果,从而实现“旧药新用”。药物-疾病关联预测是药物重定位中的一项重要研究,该研究将药物和疾病的高通量数据作为输入,结合计算方法预测药物-疾病的潜在关联,能够为药物的高效研发和疾病的低成本治疗提供辅助性建议。现有的药物-疾病关联预测方法大多将药物
学位