【摘 要】
:
在室外场景下拍摄的图像极易遭受降雨影响,导致其能见度呈现明显下降。一方面,附着在相机镜头上的雨滴会对拍摄场景造成大面积的局部遮挡,并导致遮挡区域发生不同程度的几何形变;另一方面,区别于雨滴,分布在镜头外的雨线则会对拍摄场景带来密集的小面积局部遮挡。由于清晰度降低,有雨图像不仅观看的主观体验较差,更对语义分割、目标检测等机器视觉任务带来了巨大挑战。因此,迫切需要探索高效可靠的图像去雨算法,提升并改善
论文部分内容阅读
在室外场景下拍摄的图像极易遭受降雨影响,导致其能见度呈现明显下降。一方面,附着在相机镜头上的雨滴会对拍摄场景造成大面积的局部遮挡,并导致遮挡区域发生不同程度的几何形变;另一方面,区别于雨滴,分布在镜头外的雨线则会对拍摄场景带来密集的小面积局部遮挡。由于清晰度降低,有雨图像不仅观看的主观体验较差,更对语义分割、目标检测等机器视觉任务带来了巨大挑战。因此,迫切需要探索高效可靠的图像去雨算法,提升并改善图像能见度。目前的单图像去雨算法在去除雨滴条纹和恢复图像细节上取得了显著的成果,但是却难以扩展到具有多种外观属性的雨滴或者雨线上,其局限性具体展现在以下两个方面:(1)现有的图像去雨算法所采用的形状固定的卷积滤波器难以捕获形状差异巨大的雨滴,无法对不同形状、尺寸和透明度的雨滴进行有效建模和去除,造成去雨图像中雨滴的残留;(2)参数固定的预训练滤波器无法捕捉分布密度和下落方向各异的雨线,造成去雨算法在不同类型雨线数据集上的泛化性能较差。本文根据恶劣天气条件下雨滴和雨线的不同外观属性,分别研究单幅图像上内容自适应的雨滴和雨线去除算法:(1)针对单幅图像雨滴去除研究,本文首先构建了一个大规模室外场景下的合成雨滴数据集,来有效模拟雨滴的形状、尺寸和透明度等物理特征,然后提出了一种基于多尺度形状自适应的雨滴去除算法,通过估计雨滴分布的位置信息来准确判别雨滴图像区域和无雨滴背景区域,设计密集增强可变形卷积模块来建模雨滴的物理形变,提高去雨滴网络对不同类型雨滴的几何感知能力,从而自适应地恢复雨滴图像区域的背景纹理,采用分图像区域融合的策略合成去雨滴图像,在修复雨滴图像区域背景纹理的同时,保留了无雨滴背景区域的清晰图像结构,极大地提升了雨滴图像的恢复质量。(2)针对单幅图像雨线去除研究,本文提出了一种基于多尺度纹理自适应的雨线去除算法,设计带有门控融合机制的跨尺度特征融合模块,在空间域和通道域对相邻不同尺度的雨线特征进行选择性的提取和传递,抑制了冗余特征的干扰,增强特征所包含的丰富语义信息和纹理细节,通过引入额外的高斯滤波器来进一步提取不同像素空间位置的自适应特征,从而能够在不同的局部图像块上自适应地捕获雨线特征的纹理变化,提升去雨模型对不同类型雨线的鲁棒性和泛化能力。
其他文献
过冷液体成核是材料科学领域极为重要的相变现象,过冷液体结构及其演化过程对于成核速率,材料的凝固组织乃至性能有十分重要的影响。本文研究了过冷液体的结构分析法,并利用分子动力学(MD)模拟了Lennard-Jones(LJ)流体的过冷液态结构及其在成核过程中的演化。对一些平衡晶体和亚稳液体的分子构型,分别使用局域结构序参量法,键对分析法和Voronoi分析法进行结构分析从而评估它们的识别能力。结果表明
雷达检测微弱目标时,为了增强回波信号的信噪比,雷达需要长时间照射目标。然而,长时间观测会带来目标的跨距离单元走动和跨多普勒单元徙动问题。尤其当目标速度很高且机动性很强的时候,如何实现对这类目标的长时间相参积累检测,已成为雷达目标检测方向的难点问题。针对上述问题,本文开展了雷达长时间相参积累算法研究,主要工作如下:1.分析了跨距离单元徙动和跨多普勒单元徙动对雷达目标检测的影响,简述了针对匀速运动目标
网络可靠性问题是衡量一个网络在一定时间内完成某种特定任务的能力。研究一个网络的可靠性可以从网络的拓扑结构以及功能应用两个层面来考虑,本文首先总结了网络可靠性近年来在各个层面的发展,其次针对网络拓扑结构的可靠性优化进行讨论。对网络拓扑结构的优化通常依赖于概率论方法,然而该方法在实际应用中存在一定的局限性。如客观条件限制与人为因素的影响常常使得整个系统的运行不能单单用随机变量来表述,因此需要引入模糊变
机器证明主要需要解决三个问题。首先是知识表示,即用何种语言描述问题和定理;其次是知识更新,即给定由旧知识到新知识的规则;最后是如何通过对规则进行控制来找到证明。本文以初等数学中表达式化简类人过程生成为背景,对这三个问题进行了研究。一、知识表示问题。本文将初等数学中的知识表示为实体和关系,并以此为基础构建了初等数学概念知识图谱。其中,概念知识图谱包含实体551个,关系561条,三元组204763个。
环境问题现已成为全中国乃至全世界的重点问题。2020年1月澳大利亚发生了巨大的森林火灾导致12亿动物死亡以及大面积的森林破坏,火灾带来的破坏无疑给人类又一次带来警醒,生态问题理应摆放第一要务。中国作为世界环保组织建设中贡献领先的国家,必定以身作则。本文以习近平生态文明思想为依据,梳理长江经济带绿色发展的基本要求,在整理相关研究成果和发展问题的基础上,着重从生态文明视角来论述长江经济带绿色发展:第一
无线物联网(The Internet of Things,IoT)包含大量的端节点,这些节点设备的电池容量有限,所以各个节点必须具备低功耗的特性。部署可靠的物联网对于城市物联网或工业控制领域尤其重要。为了确保这些物联网的服务质量要求,IoT需要提供较高的可靠性保证。但是,低功耗与可靠性之间存在内在的冲突:可靠性的提高通常会导致功耗的增加,就像传统的基于重传的可靠性一样。所以本文针对可靠性与低功耗的
人口老龄化是当今社会面临的主要问题之一。由老化引起的记忆力下降、执行功能降低、认知功能衰退等问题,严重影响了老年人的正常生活。基底节作为人类大脑最为重要的皮层下结构,在大脑信息传递中起着重要的调控作用,其功能活动会受到年龄的影响,但是其毕生变化的内在机制尚不清楚。当前已有大量的功能磁共振成像研究,发现诸如默认模式网络、初级运动网络等大脑功能网络随着年龄增加而降低。但是,这些研究大多基于静息态或任务
Racah系数在计算物理体系的能级,跃迁几率以及构造多粒子系统波函数等问题时扮演着十分重要的角色。从数学角度来讲,Racah系数本身不依赖表示基的选取。这些使得Racah系数成为相当有用的数学工具。本文主要研究李代数O(N)基础旋量表示的Racah系数。首先介绍了由李代数G的子代数H的Racah系数和G(?)H的约化因子来得到G的Racah系数的逐步计算方法。从已知的O(3)的Racah系数出发,
对于线性压缩IFS,A.Shief的工作阐明了开集条件、强开集条件和正有限Hausdor?测度之间的关系。这是分形几何中非常重要、非常基本的结论。这个工作被推广到共形IFS。何和刘的工作把这些研究推广到了单矩阵自仿IFS,为了克服仿射矩阵带来的困难,他们利用了由仿射矩阵决定的一个伪范数。在本论文中,我们沿用何和刘的技巧,把上述研究推广到单矩阵图递归系统。它由一个强连通的图G = (V,Γ)和边上的