【摘 要】
:
图像超分辨旨在从退化的低分辨图像重建出更多高分辨细节。随着双目成像技术的发展,双目图像已广泛应用于深度估计、虚拟现实与自动驾驶等领域。相较于单图超分辨,双目图像在由视差引起的极线约束下高度对称,因此可以利用左右视图间的互补信息进一步提升超分辨效果。近年来,研究人员已将深度学习成功应用于双目图像超分辨,其中多数方法利用视差先验获取图像间匹配信息,取得了卓越的性能,但也存在部分问题:1)对两视图特征的
论文部分内容阅读
图像超分辨旨在从退化的低分辨图像重建出更多高分辨细节。随着双目成像技术的发展,双目图像已广泛应用于深度估计、虚拟现实与自动驾驶等领域。相较于单图超分辨,双目图像在由视差引起的极线约束下高度对称,因此可以利用左右视图间的互补信息进一步提升超分辨效果。近年来,研究人员已将深度学习成功应用于双目图像超分辨,其中多数方法利用视差先验获取图像间匹配信息,取得了卓越的性能,但也存在部分问题:1)对两视图特征的挖掘和融合仍不够充分,2)对双目图像间多变视差的建模能力仍然不足。针对此问题,本文开展了如下工作:(1)提出一个基于跨尺度跨视图非局部特征的双目图像超分辨网络(CSCISS-Rnet)。其中针对两视图特征融合不够有效的问题,提出残差特征融合模块(RFFB),使得网络着重于特征源之间的不同信息,提升融合后特征的表征能力。此外,针对两视图特征挖掘不充分的问题,充分利用视图内、跨视图间的局部和全局上下文信息,并提出跨尺度跨视图非局部注意力(CSCIN)机制,直接获取高分辨的跨图像相似性特征。将挖掘到的多种特征不断通过RFFB融合,增强对视图内及跨视图信息的利用收益。(2)基于双目图像超分辨和视差估计问题紧密交织和相互促进的特性,提出双目图像超分辨和视差估计反馈网络(SSRDE-FNet),利用高精度的视差引导左右图像建立更准确的关联并促进超分辨,实现了两任务在端到端的神经网络中的联合优化。SSRDE-FNet以从粗到细的方式估计高分辨视差,首先由低分辨视差引导双目超分辨重建,生成的高分辨双目特征用于构建和聚合匹配代价以实现高分辨视差估计。随后,提出高分辨视差信息反馈(HRDIF)机制,包含聚合后的高分辨特征反馈(AHFF)和低级特征表示增强(LRE)两种策略,将视差信息反馈给前序网络层并以网络递归的方式进一步提升两任务的性能。为验证所提方法的有效性,在公开数据集上进行了大量的实验。结果表明,相较于其他模型,所提方法在定量指标和视觉效果上均有优势。此外,消融实验验证了本文提出的各模块和策略的有效性。
其他文献
天地一体化信息网络是由天地之间多种网络融合而成的异构网络,将作为下一代通信的关键基础设施,为用户提供大带宽、低延迟以及高速率的数据传输服务。然而,天地一体化信息网络区别于传统通信网络,具备资源受限、拓扑动态、间歇联通、用户规模庞大以及信道高度暴露等特点,为网络中实体的身份鉴别带来了诸多挑战。单个用户接入认证时效率低下、大规模用户批量认证时并发冲突,以及链路动态切换时延迟较高等问题使得传统网络中的认
在初中阶段的英语学习中,英语写作是很重要的一个部分。但是一直以来,写作是初中学生的学习难点,学生对写作的学习兴趣不高,成绩也不理想。写作要求学生具有整合和运用知识的能力,学生如果没有好的学习方法是很难掌握写作的。思维导图是英国著名心理学家托尼·布赞在20世纪60年代提出的。思维导图作为一种将思维可视化的工具,可以把抽象的、零散的知识有效的整合起来。因此,作者在本次研究中把思维导图应用于初中英语写作
关系提取任务作为信息提取的重要子任务,其目标是从文本中识别出三元组,将无结构化数据转化为结构化数据。关系提取同样是构建知识图谱、问答系统等自然语言处理任务的基础工作,具有重要的研究价值。根据不同的识别文本,关系提取任务可以分为句子级别的关系提取任务和文档级别的关系提取任务。在句子级别的关系提取任务中,任务目标是识别自然语言文本中的实体,并将实体进行关系分类。在文档级别的关系提取任务中,由于所需识别
中国自1978年改革开放以来经历了快速的经济增长,极端贫困人口的数量大幅降低。随着脱贫攻坚取得了全面的胜利,以收入为单一指标的绝对贫困被消除后,中国开始面临着多维贫困的挑战。同时,对于我国居民来说,医疗需求的增加和疾病的经济风险不能仅仅依靠基本医疗保险来缓解。为了准确地衡量我国多维贫困状况,探寻补充医疗保险对我国多维贫困和多维返贫的影响效果,本文将由此深入展开,为完善我国补充医疗保险制度提供相关建
时间序列异常检测旨在从时间序列数据中识别异常模式。长期以来,时间序列异常检测一直是一个重要的研究领域。随着时序中模态数量的增长,时序的复杂程度以及异常检测的难度都会逐步增大。本文针对三种不同复杂程度的数据类型,即单个模态、两个模态、多个模态(大于等于三个模态),依次提出了三种不同的时序异常检测框架,用于有效利用不同类型数据中的信息。针对单个模态数据集上时序的概念漂移问题,本文提出基于概念漂移检测的
随着NAND闪存的持续性发展,得益于其高性能和大容量的表现,基于NAND闪存的固态硬盘(Solid State Drives,SSDs)已经成为了主流的存储介质。随着制造工艺的发展和削减成本的需求,高密度和低成本的闪存介质占据了主流市场,它们可以在单个闪存存储单元中存储多个比特信息。但是该类高密度的闪存颗粒,存在I/O性能较差、擦写寿命更短等问题。为了调和容量与性能的矛盾,混合式SSD被发明出来。
喀斯特石漠化是我国西南地区生态建设的重要屏障。由于人类不合理的开发利用,森林遭到破坏,植被恢复成为该区域的主要治理措施。研究喀斯特次生林物种多样性和地上生物量,能为喀斯特地区的植被恢复和保护提供一定的参考依据。本文以黔中普定县的植物群落为研究对象,利用2012、2015和2020年的样地监测数据,分析了8年间的群落结构组成、不同尺度下物种多样性和地上生物量的变化特征以及环境对两者的影响,研究结果如
近年来,随着人口老龄化和亚健康人群的增多,2020年新型冠状病毒全球爆发,国内医院和医疗机构对医疗器械的需求逐年增加。各大医疗器械研发和生产公司扩大了器械生产规模。笔者公司的传统医疗器械服务平台采用单体式架构搭建,出现功能耦合度高、性能下降、开发和测试周期长等问题。同时,当系统面临在线提货、器械安装和维修等高并发业务场景时,经常出现系统停机,严重影响用户体验和公司业务运作。本文作者设计实现的基于微
近年来包括香港资本市场在内的海外资本市场持续疲软,相较之下境内资本市场正在蓬勃发展阶段,因此随着分拆上市相关制度的不断完善,越来越多的在港公司倾向于通过分拆子公司上市的方式回归境内A股市场并享受发展红利。港股分拆回A股作为新兴的资本市场热点话题日益受到关注。本文以港股母公司微创医疗分拆旗下子公司心脉医疗至境内科创板上市为案例对分拆上市的绩效影响进行研究。在对案例公司所处行业以及母子公司基本情况进行
异构分布式系统中计算应用的调度长度最优化问题备受关注。囿于通信网络的带宽及传输速度等限制,通信开销对调度长度的影响不容忽视,通过减少通信开销优化调度长度是研究的焦点之一。为尽量减少通信开销,基于任务复制的各类调度算法应运而生,其可以通过额外的计算开销来减少通信开销,并取得了极好的效果。然而,任务复制的引入会使调度问题更加难以求解,如何在使用任务复制提供高质量调度方案的同时,减少求解时间是当前面临的