基于光流的手机图像配准数据集构建及算法研究

来源 :浙江大学 | 被引量 : 0次 | 上传用户:yzgsmallfish
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智能手机的发展,图像多帧融合技术日益广泛地应用在高动态范围成像、多帧降噪、图像超分辨等智能手机图像处理中。手机图像配准是手机图像多帧融合算法的必备模块,图像配准的准确程度也直接影响到多帧融合算法的效果。因此,开展对手机图像配准数据集构建及算法的针对性研究具有重要意义。手机拍摄图像多为自然场景,在图像配准算法设计中必须要考虑可能出现的前景运动、多平面场景等因素,同时对配准算法的实时性要求较高。因此,针对手机图像配准技术的研究必须结合智能手机常用拍摄场景,在提升配准准确率的同时合理控制运行时间、内存空间等开销。传统的图像全局配准算法在原理上受到限制,不能准确地配准多平面的场景或运动物体;基于稠密光流的局部配准方法不受单一变换矩阵的限制,可以获得较好的配准结果,但计算开销大,难以实现实时估计。近年来出现的基于深度学习的稠密光流算法在公开测试集上取得了超过传统光流算法的效果,并且实时性好。本文在此基础上,提出了一种基于深度学习的光流算法来预测稠密光流并用于配准,同时又提出了一种用于网络监督学习的自建光流数据集以提升算法性能。论文首先介绍了图像配准的背景与意义、配准相关的国内外研究现状,总结了传统基于区域信息和特征信息的图像配准算法、基于光流的图像配准算法和基于深度学习的光流算法等,通过实验比较了块匹配和基于特征的图像配准算法等几种最常用的传统图像配准算法的优缺点。论文采用稠密光流进行图像配准。传统的图像配准算法有配准时间太长或由于是全局变换而无法处理有运动物体等缺点,本文提出基于光流的配准算法来解决这些问题。论文首先介绍了光流计算方法,包括算法原理和光流可视化等;然后提出了利用光流进行配准的算法,包括利用光流进行图像映射、去除光流映射过程中的留白和鬼影等;最后将光流配准算法与传统算法进行了实验比较,实验结果显示所提算法能有效提升配准效果。论文提出了基于深度学习改进的光流配准算法及数据集构建方法。首先选择合适的网络结构,采取适当的优化方法,然后构造一个包含手机图像中常见的各种场景以及模拟像质退化过程的的光流数据集进行训练;最后本文进行了大量实验,实验结果表明所提方法能有效提高图像配准的准确性。本文提出并构建的数据集FlyingThings2D对光流网络预测的光流精度和鲁棒性有明显的提升,使得基于深度学习预测光流的配准算法相较于传统基于梯度的光流配准算法时间开销更小且精度更高。
其他文献
如今随着我国经济实力的不断提升,企业之间的竞争也越发激烈,Y公司作为一家中型企业,为了能够在激烈的竞争中获得生存的优势,并且实现可持续性地发展,进行公司的内部控制就显
计划经济时代,征地审批依附于具体的经济建设计划,实质上属于各级政府的供地审批程序。1998年《土地管理法》以土地用途管制为基础,建构起集权化的农用地转用与土地征收审批程序。为了实现政府对土地一级市场的垄断,土地领域形成“转用——征收——供给”的一体化流程。征地审批制度以用地指标作为审查的标准。冗长的征地审批程序背离了宪法设定的公益征收的要求。新《土地管理法》首次规定了公共利益的实体内容并增加了报批
随着移动通信技术革命性的变革,目前的移动终端设备呈现出高度集成化的趋势。这就要求其芯片上搭载的滤波、接收和发射信号的器件朝着更加小型化的趋势发展。目前,LTCC(低温
A题组新编1.设△ABC的内角A,B,C的对边长分别为a,b,c,已知cos(A—C)+cosB=t(t是已知的正数),根据下列条件分别求出角B的大小:
屠岸贾这个人物形象含有丰富而深刻的悲剧意蕴。他的行为看似随心所欲,完全按照自己的意图办事,实际上却在客观上成为了别人的工具,陷入了其行为所造成的恶果中,从而走向毁灭
孔隙、裂隙、管道、溶洞等空隙结构构成了地下含水系统,地下水在含水介质中的运动具有多样性,岩溶发育的不均一性与高度的离散化程度使得地下水渗流更为复杂,地下水渗流主要
俄裔美籍作家纳博科夫是俄罗斯"十月革命"后的一只"流亡的蝴蝶",在他的众多文学作品中,流亡生活和艺术追求是最重要的命题。本文将试图阐释纳博科夫小说中的流亡观和艺术观,