基于EPI的光场深度估计研究

来源 :武汉科技大学 | 被引量 : 0次 | 上传用户:cs444444
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
光场图像深度估计是光场三维重建、目标检测、跟踪等应用中十分关键的技术。虽然光场图像的重聚焦特性为深度估计提供了非常有用的信息,但是在处理遮挡区域、边缘区域、噪声干扰等情况时,光场图像深度估计仍然存在很大的挑战。而光场极平面图(Epipolar plane image,EPI)中存在的图像特征和像素关系能够有效的处理光场深度估计中的深度提取问题,将像素点的深度问题转换为寻找正确的EPI斜率问题,从而处理遮挡和边缘等难以进行深度估计的图像区域,提高深度估计的精度。本文分别从传统和深度学习两个方向分别对提高基于EPI的光场深度估计算法准确性进行了研究,主要研究内容包括:1)提出了一种基于极平面图斜线像素一致性和极平面图区域差异性的EPI光场深度估计算法用于解决遮挡和噪声问题。EPI斜线像素的一致性采用旋转线性算子(Spinning linear operator,SLO)的颜色熵度量,能够提高深度图边缘的准确性以及抗噪能力;EPI区域的差异性采用旋转平行四边形算子(Spinning parallelogram operator,SPO)的卡方χ~2度量,能够提高深度图深度渐变区域的准确性,并使用置信度加权的方法将两种度量进行融合,可以减少遮挡区域和噪声的干扰。另外,充分利用像素邻域的颜色相似性,使用引导保边滤波器和马尔科夫随机场(Markov random field,MRF)全局优化策略进行后处理,进一步减少深度图的边缘错误,得到遮挡边缘准确的深度图。并在HCI光场数据集上进行了实验,与经典光场深度估计算法进行了对比,在主观质量和客观指标两方面都有明显提升。2)提出了一种基于定向关系模型和注意力机制的EPI光场深度估计算法用于处理EPI斜线不清晰问题。该方法不同于一般的子孔径光场图像深度估计算法,以EPI图像作为输入,从EPI的多方向性和像素一致性出发,利用EPI定向关系模型进行特征提取,同时对两路EPI进行定向特征提取,并使用多视点注意力机制,结合通道注意力和空间注意力为EPI斜线信息提供更大权重。同时,使用多个残差模块消除干扰EPI斜线信息的冗余特征,并使用小步长卷积操作,避免丢失关键EPI斜线信息。最终得到的模型在HCI光场数据集上进行了实验,本文的方法在精确性上较其他算法有所提升。综上所述,本文的研究对提高光场EPI的深度估计的准确性有一定的理论贡献,在视点合成、三维重建相关领域存在潜在的应用前景。
其他文献
交通运输、工业生产以及火力发电等一系列与人息息相关的活动正在持续排放大量的空气污染物,这已经成为一个阻碍当今社会持续发展和影响人民健康生活最主要的环境问题。随着一系列严格的环保法规的颁布与实施,空气过滤设备和材料的应用领域在近10年来有了巨大的发展并继续在技术性能和经济效益上获得加速发展。过滤材料作为过滤装备的核心,其研究和开发也得到了空前的重视,其中纤维状空气过滤器已成为主要的过滤材料,而非织造
学位
自2015年我国设立第一批跨境电商综合试验区以来,截止2021年底全国已经建立了5批共105个试点城市,我国各地区的跨境电商从此就有更多发展模式和思路可提供参考借鉴。设立跨境电商综试区是我们党和国家为发展国内跨境电商市场而制定的重大战略决策,跨境电商综试区以试点城市的跨境电商发展经验逐步向全国范围内推广,为促进我国跨境电商产业高质量、高水平发展起到了重要作用。随着我国跨境电商进出口交易规模的逐渐扩
学位
当今时代,美育教育被摆在了突出的位置,美育理念日渐深入人心,以美育人,以文化人对时代新人培养尤为重要。引领少年儿童向美而行,优质的青少年读本发挥着重要作用,相关作品的翻译也受到了越来越多的关注和研究。本文从青少年艺术类读本《无所畏惧:启发世界的50位女艺术家》的具体翻译实践为切入点,结合信息类文本翻译的特点,选取纽马克交际翻译理论为指导,探讨此类传记类青少年读本中的重点和难点问题,并通过具体实例分
学位
近年来,越来越多的在线视频平台引入了视频弹幕功能,使观众在观看视频的同时获得了更为实时的交互体验。然而,与视频流量类似,弹幕流量携带的统计特征经在过分析后,也可以得到视频频道的关键身份信息,进而带来潜在的隐私泄露风险。由于大部分视频平台都使用传输层安全协议(TLS)对视频内容进行加密,而该协议会使得第三方监听者无法获取视频内容明文,因此以往的视频频道监听策略通常基于视频流量的统计特征制作指纹并进行
学位
孙子曰:“知己知彼,百战不殆”。但是,纵观历史,窥探现实,我们发现,“知彼”依然任重道远。一方面,军事斗争对象日趋复杂。军事部门面临的斗争对象呈多样化趋势,分析研判难度不断攀升;一方面,情报部门自身的分析能力一直饱受诟病,其内部建设依然存在不少问题。另一方面,战争的对抗程度更加激烈。欺骗与反欺骗交织在一起,导致分析研判难度不断增加,分析人员需要付出更大的努力“去伪存真”。“红队研判”作为一种策略与
学位
随着高等教育迈入新的发展时期,高校必须增强风险防控意识加强内部控制和内部监督。通过建立科学完善的廉政风险防控体系,规范高校领导干部的权利及教育教学管理的方式方法。通过廉政风险的防范和评估,有针对性地进行思想道德教育,强化教育教学管理强化人民群众的监督,构筑坚固的思想防线,为师生营造一个和谐优良的校园环境。因此,本文浅要分析高校廉政风险防控体系的建设,结合现阶段高校廉政风险防控体系的建设困境,提出相
期刊
2018年以来,国家自然科学基金委员会党组在全面深化科学基金系统性改革中深入推进廉政风险防控体系建设,形成了以规范权力运行为根本、以健全规章制度为核心、以坚持高压震慑为手段、以践行廉洁操守为追求、以加强组织建设为保障的“全周期管理”科学基金廉政风险防控体系。其主要成效在于,初步构建了委内外多方力量全面参与的“大监督”格局,党风廉政建设持续向好,科学基金项目评审公正性不断提升。其基本经验在于,必须深
期刊
随着我们经济社会的全面发展,我国的司法体制、司法权力的运行机制也在不断完善。人民法庭审判制度逐渐成为我国社会主义司法制度的重要组成部分。人民法庭制度为了解决社会的基层矛盾、推进社会治理做出了重要贡献。因法院审判管理量大、面广、线长、点多等特性,传统审判的模式在案件的审判管理过程中会存在许多盲点和漏洞,审判风险管理系统的出现改变了这一现状。然而,现有审判风险管理系统存在风险点定义单一、风险排查手段简
学位
国家间产业竞争的核心是技术创新,目前,我国正值产业结构的改革优化阶段,技术创新在这一阶段起到了至关重要的作用。习近平总书记在十九大报告中指出,创新是引领发展的第一动力,是构建经济现代化体系的战略支撑。李克强总理在工作报告也强调,要在发展创业投资和股权投资的同时,深入推进大众创业万众创新。然而企业创新活动的资金缺乏,人才不足,短期行为导向都成为当前制约企业创新活动的主要因素,私募股权投资作为一种新型
学位
本研究借助实验语音学方法考察湖南常宁兰江乡的声调系统。以语音分析数据为基础,结合已有的相关文献材料,对常宁兰江乡方言的单字调特点进行声学描写和音位定义。研究收集了湖南省常宁市兰江乡宜合村和景星村10名不同年龄段的发音人的声学材料,用Praat和Voice Sauce切分、提取基频和时长数据,并用Lz-score进行归一化个人、人际语音变体,完成声调系统声学图,并在区分发声态的“分域四度制”理论框架
学位