【摘 要】
:
同时定位与建图(Simultaneous Localization and Mapping,SLAM)在机器人导航、增强现实等应用中具有重要意义,并获得广泛关注与研究。由于视觉传感器具有场景语义信息丰富、成本低廉等优势,视觉SLAM算法在理论研究和实际应用中都得到了快速的发展。现有视觉SLAM算法框架一般可分为视觉前端追踪和后端优化两部分。视觉前端追踪通常采用关键帧思想,对帧与帧之间的相对运动进行
论文部分内容阅读
同时定位与建图(Simultaneous Localization and Mapping,SLAM)在机器人导航、增强现实等应用中具有重要意义,并获得广泛关注与研究。由于视觉传感器具有场景语义信息丰富、成本低廉等优势,视觉SLAM算法在理论研究和实际应用中都得到了快速的发展。现有视觉SLAM算法框架一般可分为视觉前端追踪和后端优化两部分。视觉前端追踪通常采用关键帧思想,对帧与帧之间的相对运动进行追踪计算,为后端优化提供相机位姿和地图点的初值。后端优化主要采用非线性优化方法,对前端提供的相机位姿和地图点进行联合优化并更新至前端,并在需要的时候完成闭环检测与优化。目前,视觉前端追踪存在容易丢失、鲁棒性弱的缺点,并成为制约SLAM算法广泛应用的一个重要瓶颈。针对单目视觉SLAM前端追踪鲁棒性弱的问题,本论文从不同底层特征点的性能和提取方法的比较研究入手,提出了最佳的特征提取策略;结合深度神经网络进行光流估计,提出了基于深度特征光流的前端追踪算法;并在前二者的基础上,构建了一个新的单目视觉SLAM系统。本论文的主要工作和贡献如下:1.提出了一种新的单目视觉特征提取策略。本文对多种特征提取算法进行实验分析,从特征提取速度、特征点数量、特征点有效分布等方面进行对比,选取综合性能最佳的特征;进一步提出特征稀疏化策略,对提取的特征点进行筛选,去除冗余的特征点,保证了特征点充分利用图像信息的同时具有良好的几何分布。2.提出了基于深度学习特征光流的前端追踪算法。基于几何特征的SLAM算法在相机运动或外界环境变化较大时,通常会使得特征提取或匹配失败,从而导致SLAM追踪丢失。本文将光流法和特征匹配相结合,利用深度学习特征光流对于纹理稀疏、光照变化、运动模糊具有更强鲁棒性并且可以完成实时计算的特点。通过深度神经网络PWC-Net计算出两帧之间的光流信息,再使用光流信息完成帧间追踪并估计出相机运动的初值,进一步利用局部地图的进行联合优化来减小估计误差,达到了鲁棒、稳定的追踪效果。3.构建了新的单目视觉SLAM系统。基于本文提出的视觉特征提取策略和深度学习前端追踪算法,采用多线程技术搭建了新的单目视觉SLAM系统,主要包含了深度学习光流追踪、前端追踪、局部建图、闭环检测与优化四个部分。我们采用主流数据集进行了实验验证,表明了该SLAM系统的有效性。
其他文献
深度神经网络因其强大的特征表征能力而被广泛应用于人脸识别、目标检测、车牌识别等领域,极大地方便了人们的生活。然而,研究表明神经网络在面对含对抗噪声的对抗样本时展现出的脆弱性严重影响了它们的性能,更有甚者会造成很大的安全隐患。为了解决这个问题,大量传统对抗防御算法被提出,其中最有效也是应用最广泛的方法是对抗训练,即将对抗样本作为数据集,对模型进行训练,使得模型学习到含对抗噪声样本的数据特征。大量研究
DNA甲基化是一种特别重要的表观遗传机制在许多细胞功能中起重要作用,如遗传性能,染色质结构和抑制重复性序列。N4-甲基胞嘧啶(4m C)是在原核和真核生物基因组中检测到的三种常见的DNA甲基化之一。DNA N4-甲基胞嘧啶位点(4m C)不仅与哺乳动物的发育有关,而且与一些人类疾病的产生有着密切的联系。揭示DNA N4-甲基胞嘧啶位点(4m C)的生物学意义可以帮助我们更好的理解DNA甲基化并为疾
复杂网络中一些具有高度连接特性的节点更倾向于共享相同的属性,所以在复杂网络中,往往隐含着很多功能模块,这些功能模块称为社团,社团发现方法可以有效分析并探索社团结构,可以帮助人们更好地理解复杂系统的交互原理并预测他们的未来发展趋势。近年来,许多社团发现方法被不断提出,其中基于统计模型的方法由于其坚实的理论基础和优越的性能而得到了广泛的应用。随机块模型(Stochastic Block Model,S
眼动交互作为一种新兴的人机交互方式,具有广泛的应用前景,尤其是在虚拟现实领域,更是近年来的研究热点。眼动交互的前提是精准快速地注视点估计,本文对头戴式设备中的注视点估计方法进行了研究,搭建了一套头戴式眼动跟踪系统,并对文中的算法进行实际场景测试。注视点估计方法可以分为基于几何模型的注视点估计方法和基于外观的注视点估计方法。本文首先研究了基于几何模型的注视点估计方法,该方法在眼动特征与注视点之间建立
在卷积神经网络中,密集型的计算会使软件运行速度过慢,很难达到复杂应用的实时响应,因此针对卷积神经网络的硬件加速方案逐渐成为了主流。现有的卷积神经网络已被证明超过90%以上的计算是在卷积层完成的,而且传统卷积层的输入特征图与卷积核乘累加的计算会因加法树的存在而限制并行性,本身的浮点计算量也非常的巨大,严重影响了整个网络的计算时间。因此,针对卷积层的算法改进及硬件加速对整个卷积神经网络的运行效率和性能
视频超分辨率是计算机视觉领域的核心问题之一,主要目的是通过超分辨率方法将低分辨率帧(参考帧)和多个连续帧(相邻帧)恢复成高分辨率视频帧。它是计算机视觉和图像处理中的一个经典且具有挑战性的课题,该方法对于提升早期胶片视频整体的清晰度和像素质量有着重要的意义,其成果在多个领域,例如遥感视频,视频监控,图像医疗和数码摄像等方面有着重要的实用价值。与单图像超分辨率不同的是,视频超分辨率存在帧间的时序信息。
近些年来,随着无线通信技术快速发展,移动互联网向无线端迅速延伸。一方面,通信方式不断增加,覆盖范围持续扩展,业务多样性明显提升,给人们生活带来了显著变化。另一方面,随着社交网络、人工智能、大数据等信息产业的发展,数据信息量的大幅攀升,呈指数增长的人和机器需要实时构建信息网络,对无线网络的需求加速更新。新兴业务对通信服务质量和用户体验等要求的提升,使得传统通信技术难以满足信息量的现实需求。其中的核心
篇章关系识别(Discourse Relation Recognition)旨在理解两个相邻的篇章单元(称为论元)之间的语义连接关系,包括偶然关系、比较关系、扩展关系和时序关系等,其广泛应用于文本摘要、智能问答、机器翻译等自然语言处理领域中。与显式篇章关系不同,隐式篇章关系识别任务由于不能通过连接词直接识别篇章关系,需要结合特定的上下文特征对篇章进行理解,逐渐成为一项极具挑战性的研究任务。目前,隐
近年来,语音合成技术逐渐受到了国内外研究者的广泛关注。在情感语音合成中,如何利用有限的数据进行语音合成模型的训练,以及如何对模型进行改进以适应带有情感风格的非语言韵律特征等问题,依然是目前亟待解决的。对于情感语音合成任务而言,去获取每个说话人的大规模情感语音数据是具有难度和高成本的。所以本研究提出了一种利用情感语音分类任务的中间结果进行迁移学习的方法,该方法能够有效利用低数据资源下的情感语音数据,
深度学习的快速进步促使深度学习算法在计算机视觉、自然语言处理等领域的不断发展,出现了诸如自动驾驶、机器翻译等实际应用系统,不断便利着我们的生活。深度学习依赖于大量标注数据,我们不得不耗费昂贵成本保证其有效工作。但是仍然存在对于少训练样本类别性能下降和无训练样本类别性能近乎为零的问题。为了解决这一问题,使得深度学习系统能够同时识别已见类别和未见类别,学术界提出零样本学习。零样本学习利用已见类别和未见