基于生成对抗网络的3D目标重建研究

来源 :北京交通大学 | 被引量 : 0次 | 上传用户:victim1031
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
计算机技术的迅猛发展,使得机器认知与人类感知之间的界限愈发模糊,众多领域日趋呈现出全自动、自适应的智能化模式。在此背景下,单一的二维数据模式已经无法满足人们对三维世界的探索,如何将广泛存在的二维信息快速、精确地恢复到三维空间已然成为计算机视觉领域乃至工业领域的重点研究课题。三维重建系统,作为完成二维信息到三维空间映射的有效手段,可以充分利用二维图像特征与投影轮廓等信息自动进行三维模型构建,旨在解决低维信息不满足问题,以期能够更好地对物体或空间进行全面感知与交互。三维重建,尤其是三维目标体素重建,是计算机视觉领域全新的课题方向,是指利用多视图甚至单视图进行目标对象或场景的三维形状恢复工作。但它不同于一般的视觉问题,其任务是要感知三维环境,而非简单的识别、检测等。目前常用的基于深度学习的解决思路是利用复杂的先验概率问题来表达空间的维度提升转换。然而,此类基于深度学习的三维重建算法多采用单体素独立的启发式准则,过分依赖先验数据的同时过度约束了物体轮廓。3D生成对抗网络的兴起为三维重建提供新思路,其使用对抗性准则代替传统的启发式准则,隐式地捕获对象结构,并为无监督重建工作奠定了基础。因此,本文以三维目标重建为研究对象,重点探索了基于生成对抗网络的单视角三维体素重建和无监督三维体素重建两类问题,主要工作和贡献总结如下:首先,解决和完善了形状数据集(3D Shape Net Core)二维与三维数据不对称问题,选取其中五类实体对象CAD模型进行三维体素化处理,并对每个三维目标对象渲染和生成了二维图像和二维投影集,以供三维体素重建相关实验的使用。其次,为了提升三维体素重建精度和网络训练稳定性,在基于生成对抗网络的三维体素重建算法基础上采用了基于倒角距离(Chamfer Distance)的重建损失函数和基于推土机距离(Wasserstein Distance)的鉴别器梯度惩罚方法,以此来完成各个网络模块的参数优化。通过对比实验验证了该组损失函数设置能够有效地提升固定分辨率下的三维体素重建精度,并优于其他相关方法。最后,针对三维体素重建算法多依赖先验数据,但三维数据又难以收集和处理的问题,提出了基于生成对抗网络的无监督三维体素重建算法。其充分利用了透视投影变换原理将体素模型从三维坐标系转换到投影坐标下,再借助多视角投影集完成对抗性准则,从而完成三维体素重建工作。实验证明了所提方法的可用性,并在精确度上优于同类无监督方法。
其他文献
天然气水合物广泛赋存于深海和永久冻土地带,以其储量大、燃烧热值高、污染小等优点备受各国青睐,被誉为21世纪潜在的新能源之一。现目前对于天然气水合物微观机理的研究尚不
随着中国经济的高速发展,海洋运输在中国社会经济的发展中的作用愈发重要。合理高效的调度指挥对于港口行业而言至关重要,在多媒体与计算机网络技术的飞速发展的背景之下,港口调度指挥过程中产生了大量数字图像信息。根据相关法律法规要求,港口应配备相应的图像加密技术,以确保数据在传输过程中不被非法窃取,对保障港口行业的良性运转具有积极的意义。港口调度指挥过程中的数字图像信息泄密,一方面导致直接的经济损失,另一方
莱姆病(Lyme disease)是由伯氏疏螺旋体感染引起的一种人畜共患自然疫源性蜱媒传染病。该病的主要传播媒介为蜱虫,蜱虫主要生长在距地面20-30cm的草木顶端,人们经过生长有蜱的草丛中而无防护措施可能会导致蜱虫叮咬引发莱姆病。该病主要在中国的东北、西北和南方的林区以及草原地带较常见[1-4],人体感染莱姆病症状主要分为早期,中期,晚期,早期主要表现为典型的慢性游走性红斑(EM),其他早期症状
目的:本研究通过观察葛连降糖丸对2型糖尿病胃热炽盛证的相关实验室指标及中医症状临床积分的影响,以了解临床疗效及安全性,证明葛连降糖丸是治疗此类型糖尿病的有效药物,为“纯中药治疗2型糖尿病”提供一定参考依据。方法:选取符合条件的2型糖尿病患者66例,随机分为两组。纳入患者在基础治疗的前提下,治疗组予以葛连降糖丸9g(3次/天),对照组予二甲双胍500mg/次(3次/天),共治疗3个月。对两组患者治疗
近年来,CO2驱在低渗透油藏逐步应用,由于低渗透油藏微裂缝发育、非均质性强,且CO2流度较大,影响CO2驱驱油效果。CO2泡沫体系以其良好的流度控制能力已成为一种油田常用的防窜
辽东湾地区位于渤海海域东北部,经过近半个世纪的勘探,已发现17个大中型油气田和43个含油气构造,是渤海湾盆地重要的油气富集区。但是,不同构造部位油气的分布特征及富集程度
WTO争端解决机制对国际贸易的和平有序起到了非常大的作用。从1995年至今,WTO受理了595起争端并作出了350多份裁决。然而WTO其并没有成文的证据规则,相关规则都建立在于专家组和上诉机构的实践之上。“初步证据规则(prima facie case)”是在很多案件中都会频繁提及的术语。这一术语首次出现在U.S.-Wool Shirts and Blouses案中,随后通过越来越多的案件实践,初
中国黄土分布广、厚度大、沉积连续,敏感地记录了环境及气候变化信息,是研究气候、环境变化及青藏高原隆升效应的良好载体。然而,黄土物质来源一直无法得到统一的认识。近几
“民以食为天,食以安为先”。随着全面建成小康社会的推进,人们的食品安全问题也越来越受到国家的重视,全面提高食品安全水平成为我国一项事关全局的战略任务。金黄色葡萄球菌是生活中常见的一种食源性致病菌,它能够分泌多种毒性蛋白,其中肠毒素可引起人胃肠炎症等多种疾病。目前,对于食品中金黄色葡萄球菌的检验主要采用现行国标:《食品安全国家标准食品微生物学检验金黄色葡萄球菌检验》(GB 4789.10-2016)
新生代以来全球的构造和气候发生了很多重要改变,全球变冷,亚州内陆干旱化,亚洲季风起源和青藏高原隆升等,其中青藏高原隆升和全球变冷是亚州气候环境演化的重要影响因素,通