【摘 要】
:
随着计算机视觉技术的发展,获取高质量深度图的需求越来越迫切。总的来说,深度图获取方法分为两大类:被动式获取和主动式获取。被动式获取方法通常基于立体匹配算法,逐像素点计算匹配代价导致这类算法复杂度较高。相比于立体匹配算法的固有缺陷,使用深度相机可以获取更加稳定的深度图,尤其是在低纹理区域。然而,主动式获取的深度图往往分辨率较低或有相当数量的空洞。因此,需要对这类深度图做进一步增强。因为低质量的深度图
论文部分内容阅读
随着计算机视觉技术的发展,获取高质量深度图的需求越来越迫切。总的来说,深度图获取方法分为两大类:被动式获取和主动式获取。被动式获取方法通常基于立体匹配算法,逐像素点计算匹配代价导致这类算法复杂度较高。相比于立体匹配算法的固有缺陷,使用深度相机可以获取更加稳定的深度图,尤其是在低纹理区域。然而,主动式获取的深度图往往分辨率较低或有相当数量的空洞。因此,需要对这类深度图做进一步增强。因为低质量的深度图可以和描述相同场景的高质量纹理图同时获取,并通过相机参数标定,它们可以变换到同一个坐标系下,所以可以利用高质量纹理图信息对低质量的深度图进行增强。这种类型的主动式方法称为引导性深度图增强。本文围绕被动式和主动式深度获取,以提高获取深度的效率和质量为目标,主要取得了以下创新研究成果。为缓解被动式深度获取复杂度高的问题,本文首先提出一种基于自适应匹配的局部最优深度估计算法,并将仿射不变特征引入匹配,旨在提升低纹理区域的匹配精度。充分的实验表明,对比于先进的局部最优算法,该算法的时间复杂度有所下降同时能获得更高质量的深度图。此外,由于深度估计是逐帧进行的,所以时域·致性无法保证。为此,本文提出一种基于自适应时域滤波的时域一致性增强算法。它同时考虑了深度值的置信度和区域的运动属性。实验表明该方法能获取更稳定的深度图序列并有效抑制虚拟视点图像绘制时产生的闪烁赝像。在主动式深度获取中,一类引导性深度图增强方法假设边界在纹理图和深度图上是同时出现的,并显式使用高质量纹理边界信息增强对应的深度边界而不使用外部数据。然而,这个假设并不总是成立,它会引入纹理拷贝赝像和模糊的深度图边界等问题。在此类方法中,主流算法往往基于马尔科夫随机场,它们通过调整能量函数中的先验正则项的系数来解决上述问题。事实上,由于这类方法缺乏显式的高质量纹理图边界和低质量深度图边界的一致性评估,所以它们不能自适应控制纹理边界的引导在深度图增强任务中的作用。此外,被广泛使用的先验正则项的系数计算方法基于相邻像素之间的深度值和纹理值差异,而忽略了深度图的潜在结构信息。为解决以前方法的缺陷,本文提出三种方法。第一种方法采用逐点边界硬判决的方式减轻边界不一致引起的赝像。第二种方法使用边界结构信息进行软判决边界不一致性定量评价,该方法比硬判决方法更准确。第三种方法综合使用了上述软判决边界不一致性评价和基于最小生成森林距离空间描述的图像结构信息,其增强的深度图效果更鲁棒。在Middlebury和ToF-Mark等数据集上的实验表明这些方法的渐进增益效果。除了基于预定义模型的深度图增强方法,基于数据本身的学习模型旨在隐式学习这种引导信息以获得更好的增强效果。本文提出一个端对端的深度卷积神经网络,它借鉴了已有网络的概念,例如:批归一化和残差学习等等。该网络渐进上采样低分辨率的有噪深度图并利用残差网重建深度图的多尺度高频信号。实验表明对比于先进的深度图增强算法,该算法具有主观和客观效果的提升。
其他文献
在过去的半个世纪里,图论的研究随着科学技术的飞速发展而呈现出异常活跃的趋势.对图的控制数、匹配数和横贯数的研究是图论研究的一个重要方向,在计算机科学,生物系统,网络通讯,人工智能以及管理科学等学科领域中得到了广泛地应用.超图是最一般又最复杂的离散结构,可以看做是一般图(无向图)的一类自然推广.一般图上的关于控制数、匹配数和横贯数的问题已经得到了广泛而深入的探讨,但是超图上的相关问题是近些年来才被提
论文主要从平方本征函数对称约束角度考察了半离散Kadomtsev-Petviashvili(D2△KP)方程族,半离散修正Kadomtsev-Petviashvili(D2△mKP)方程族与其他经典半离散(1+1)维可积系统的约化,包括Ragnisco-Tu(RT),Volterra和相对论Toda(RTL)方程族。我们首先考察了RT谱问题,RT谱问题是Ablowitz-Kaup-Newell-S
分数阶微积分已经成为科学与工程中一个新的研究领域。研究发现,分数阶微积分理论可以更充分地描述很多物理现象。与经典微积分相比,分数阶微积分具有“记忆”、“长距离相互作用”、和“遗传”的特性,这是分数阶微积分的主要优点。分数阶动力学是分数阶微积分的重要研究课题。研究人员和科学家对用分数阶导数描述分数阶动力行为的两个方面的内容感兴趣:一方面是理论分析,解的存在性和唯一性,解的周期性,以及分数阶动力学的性
本论文的研究内容属于赋值理论与Orlicz-Brunn-Minkowski理论.赋值理论是凸几何的核心问题之一.Orlicz-Brunn-Minkowski理论起源于Lutwak,Yang,和Zhang在2010年的工作.本文主要致力于该理论中Blaschke-Minkowski同态的Orlicz-Brunn-Minkowski不等式及相关极值问题的研究.本论文的研究工作可以分为四个方面:在第二章
物理上分数阶拉普拉斯算子被称为分数阶扩散通量,用于刻画列维飞行下粒子长距跳跃的反常扩散过程,它已经成为近十年来分数阶偏微分方程的研究热点.目前关于这类算子的数值方法有两个重要挑战:处理超奇异核和求解无界区域下的积分.因此本文主要研究如下几个方面的课题:1.对分数阶拉普拉斯算子采用Caffarelli-Silvestre延拓技巧,将非局部问题局部化,构造有限元格式并考虑相应的稳定性和误差估计;2.针
自上世纪七十年代量子色动力学(QCD)被提出以来,其在描述强相互作用方面取得了巨大的成功。QCD有三个基本性质,即夸克禁闭、渐近自由和手征对称性自发破缺。在高能区域,用微扰理论可以对强相互作用进行精确求解,然而在中低能区域时,非微扰作用明显,微扰理论失效。为了解决这个问题,必须采用非微扰的方法求解。处理非微扰效应的方法有很多,譬如格点QCD理论、QCD求和规则和唯象夸克模型。格点QCD是在分立的格
量子色动力学(QCD)是研究强相互作用的基本理论,原则上该理论应该可以描述强子结构以及处理强子的动力学问题,然而目前QCD理论与强子之间的联系还不是很清楚,人们只能通过研究强子质量、产生和衰变的各种唯象模型来理解强子共振态。其中具有QCD精神的组分夸克模型在研究强子谱和衰变的过程中,取得了很大的成功,也非常具有吸引力。本文在组分夸克模型的框架下,研究重子结构和动力学性质。重子的强衰变是研究重子结构
得益于长程无序、短程有序的无定形结构,非晶合金表现出超高强度、优异的耐腐蚀性、优良的导电性、玻璃转变温度附近超塑性的特点,因而成为制作微型超精密器件及其磨具的前景材料。非晶合金表面损伤行为直接制约着这些工件的使用效果及寿命。目前非晶合金表面损伤行为的研究比较分散,本研究针对这一现象采用多样化的实验手段(车削、纳米划痕、微观压缩)系统深入的研究非晶合金在表面损伤过程中的行为特点。研究了超精密切削时,
高的临界电流密度和小的磁弛豫仍然是高温超导实际应用的主要挑战,目前,通过超导的结构非均匀性来提高涡旋钉扎进而改善临界电流密度(Jc)的方法有:化学掺杂、高能离子辐照或注入、非超导二次相的引入等。通过化学掺杂可增加磁通钉扎中心密度进而实现Jc的提高或者诱导超导性能的产生,高能离子辐照同样是引入点状或柱状缺陷等来增加钉扎中心密度。但是,过量的掺杂或者高剂量的辐照也在破坏样品的超导电性,降低超导临界转变
光正交频分复用(O-OFDM)技术具有高频率效率、极强的色度色散(CD)和偏振模色散(PMD)容忍性、卓越的高阶调制扩展能力等优势。基于O-OFDM技术的正交频分复用无源光网络(OFDM-PON)由于良好的继承了 O-OFDM技术的优点,同时可以灵活地为用户提供各种的业务且实现成本较低,已成为了下一代光接入网高速率(40或100Gb/s)研究阶段NG-PON2的重要备选方案。本文主要分析和研究了