基于深度学习的全景分割研究

来源 :西南科技大学 | 被引量 : 1次 | 上传用户:yanwensen
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,深度学习技术的快速发展为图像处理带来了新的机遇,特别是在图像分割、图像识别、图像理解等方面。图像分割是将图像中边缘、区域等特征提取出来,支撑图像处理下游任务,在学术界和工业界受到广泛关注。全景分割融合了图像分割的语义分割与实例分割结果,在图像深入理解场景,如视频监控、自动驾驶、医学图像诊断等发挥了重要作用。全景分割完成对图中的所有物体的背景进行检测与分割,主要分为特征提取、语义与实例分割、子任务融合三部分。特征提取的完整性和任务融合的充分性直接决定了全景分割效果。虽然当前研究已取得了一些进展,但在上下文特征及小目标特征提取仍存在信息丢失问题,同时,由于语义及实例分割采用不同技术,在子任务融合过程中存在交互性差等问题。本文从特征提取的特征增强和任务融合的特征交互两方面进行改进,提升图像全景分割效果。主要研究内容及贡献如下:1.基于双路金字塔网络的视觉特征增强方法针对全景分割网络中特征提取部分信息丢失的问题,本文提出了双路金字塔网络模型,其中的双向的特征提取方法有效的提取了丢失的信息;同时引入了空洞空间池化金字塔提取上下文信息,注意力机制模块对小目标的特征提取进行了增强。提出的模型在Cityscapes数据集和COCO数据集上测试,得到了较好的结果。2.基于语义与实例的特征交互方法针对语义和实例分割部分特征交互性差的问题,本文提出了语义和实例一致性的交互方法,有效结合了实例与语义的特征,实现了两者特征信息的交互。子任务融合部分采用了多数票规则对分支结果进行融合。提出的模型结合了基于双路金字塔网络的视觉特征增强方法,在Cityscapes和COCO数据集中的测试结果得到了进一步有效地提升。
其他文献
第七次全国人口普查数据显示中国60岁及以上人口比重比2010年上升了5.44%,达到18.70%,老龄化问题成为全社会关注的焦点。“十四五”规划明确提出“要完善养老服务体系”,可以预见未来养老服务市场前景广阔。然而,目前养老服务体系中的老年公寓项目发展不尽如人意,巨大的市场发展空间并未掀起老年公寓项目的开发热潮。究其原因,老年公寓项目的投资建设营运是一个漫长、复杂、多变的动态过程,从价值评估的视角
学位
复杂网络可视化旨在将复杂网络转化为直观的图形,并加以相应的可视交互技术,以帮助用户理解、分析和探索复杂网络,在各个学科、领域都有着广泛的应用。其中,网络布局算法是可视化的基础,其布局结果直接影响着可视化的质量,也影响着用户对网络结构的理解。网络数据规模的增加给布局效率和布局质量都带来了挑战,在面对规模较大的网络时,现有算法的布局难以兼顾网络的整体结构和局部细节。为此,本文从复杂网络社团结构出发,基
学位
中国和吉国的合作近年来突飞猛进,随着网络技术的进步与发展,跨境电商逐步发展为中吉两国开展经贸合作的一种重要方式。文章以中吉两国贸易中跨境电商的发展研究为例,搜集中吉两国经贸合作相关数据,对中吉两国经贸合作、跨境电商合作现阶段的情况进行探讨,深入剖析当前中吉两国跨境电商合作的发展问题,并对两国跨境电商发展的前景进行预判分析。通过研究,文章总结了以下结论:第一、在双边经贸合作上,中吉两国的合作成效不断
学位
当前,夜间经济正在快速发展,我国国务院办公厅于2019年8月底发布了《关于加快发展流通促进商业消费的意见》[1],文件指出我国要加快夜间经济的建设和发展,以此发展活跃的夜间市场,这是对我国夜间经济既往发展情况以及当前国情现实的综合考量提出的重要意见,对于夜间经济在我国的发展以及推动经济整体发展具有重要的促进作用。四川省省政府于2020年4月初发布了《四川省商务厅关于做好激发消费潜力稳定经济增长工作
学位
近年来,随着多款商用级头戴式显示器的推出,沉浸式技术的应用研究有了快速的发展。在沉浸式环境下,可以提供与真实环境相似的交互体验,增加使用者的临场感与沉浸感。沉浸式技术拥有直观的立体显示效果和三维交互方式,与游戏、工业设计、考古、医学、电影等领域的三维虚拟场景高度契合,得到了广泛的应用。三维流场亦是沉浸式技术应用的一个重要领域。在流场可视化过程中,经常需要对三维参数进行配置,如流线布种,区域剪切等。
学位
人群计数旨在估计出视频或图像中的人数,在公共安全预防、产品投放等方面有着广泛应用。随着深度学习的发展,使用卷积神经网络对人群计数进行研究可以有效提升人群计数的准确度。然而在现实生活的复杂场景中,人群计数算法面临着许多挑战,如人群的尺度变化、复杂背景等。捕获多尺度特征并减弱背景干扰是降低人群计数误差的关键。因此,本文在详细分析基于深度学习的人群计数算法的基础上,对人群计数算法中的网络结构与损失函数部
学位
交通轨迹是交通工具在时间区间内的空间移动路径,反应交通工具的时空特征。探索交通轨迹数据是分析轨迹数据特征的重要步骤。交通轨迹数据是一种时空数据,具有数据量大、时间跨度长的特点,这使得现有的交通轨迹数据探索方法技术门槛高。交通的随机性使得交通轨迹充满不确定性,这将不利于交通轨迹数据的进一步利用。可视化通过直观的视觉通道传达交通轨迹信息,具有直观高效的特点。因此,通过可视化研究交通轨迹不确定性相关问题
学位
图像生成指计算机通过人工智能领域的相关算法,自主产生和真实图片相近的生成图片。其在计算机视觉领域有着重要的地位,主要用于计算机辅助设计、图像编辑、艺术设计、信息转换等领域。然而,目前多数生成图像的实际使用并不普遍,这主要是因为生成图像的质量较低,与真实图片比有较大的差距,特别是在复杂图片的生成任务中,这个缺陷会进一步放大,这使得生成图片难以投入实际的使用。为了进一步提升生成图片的质量,一套合理的质
学位
图像修复是指将图像缺失内容进行重建的一个过程,其主要手段是通过退化图像中还能够获取到的语义信息、纹理信息、结构信息等进行缺失区域的语义预测、纹理预测、结构预测。最后使填充的结果与图像未丢失部分保持相同的风格,连贯的内容。并且,修复结果需要人眼看起来真实,自然。传统的图像修复方法在解决一些简单的小面积缺失区域图像时,修复结果尚可,但是由于其本身的限制,在修复复杂图像、大面积缺失图像时,往往得不到令人
学位
随着基建技术的发展,越来越多的大型构筑物被投入使用,并且伴随着使用年限的增长及使用过程中的疲劳使用和自然灾害等一系列因素,造成构筑物表面或多或少的会出现一些损伤,传统检测手段往往是利用人工完成,对工人的人身安全有着极大的考验,并且还存在部分大型构筑物的巡检部位人工很难到达,因此现代化、智能化检测方式的需求变得日益迫切。本文以数字图象为基础,研究构筑物表面损伤检测技术,利用深度学习方法实现构筑物表面
学位