基于几何模型的多信息融合单目3D目标检测算法

来源 :重庆大学 | 被引量 : 0次 | 上传用户:wj841118
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
对汽车周围一定距离下的环境感知是自动驾驶汽车实现路径规划的基础。自动驾驶汽车大部分依赖于激光雷达、摄像头和毫米波雷达融合的得到的结果,以实现高传感器冗余,高可靠性的,高安全性的目标。鉴于相机的低成本,感知信息丰富,基于单个图像实现准确的目标三维信息估计变得越来越重要,而现在3D目标检测在被遮挡或者截断场景难以准确的估计目标的三维信息。本文基于自动驾驶场景下的单目3D目标检测算法进行了深入研究,做出了以下贡献:(1)针对目前基于Anchor-Free的单目3D目标检测算法对目标检出困难以及目标三维信息估计不准的问题,1)改进了多特征层融合的方法:由于目标中心点在不同特征层难以对齐,通过局部特征对齐,解决了多特征层融合问题;2)使用2D检测结果为目标进行掩膜,使得模型能够专注于目标及其附近场景,同时将创新性地将2D-3D投影约束作为损失函数,使得模型估计目标三维信息时能够参考2D检测结果,降低目标三维空间信息的估计误差;3)使用了一种基于残差的估计方法,通过目标的2D检测框和目标的三维几何信息求解目标距离,并通过模型估计求解的距离和真值之间偏置,提升模型估计目标距离的准确率。(2)针对现实场景下目标被严重遮挡或者截断导致目标检测框估计不准或者目标三维信息估计不准的情况,本文提出了一种多信息的卡尔曼融合算法。使用模型评估车辆三维信息的置信度和多信息的卡尔曼融合算法,融合多种信息计算的测距结果,并通过模型拟合该算法中的权重矩阵,获得融合后的距离值。设计了一种基于任务Loss评估任务的方法,并通过不同的权重实现了一种分层训练模型,该模块使得模型可以优先训练2D目标检测和目标三维信息,当这两部分性能满足需求后,加强模型对于目标距离的训练。本文在KITTI数据集上进行了实验,实验证明了上述提出的方法的有效性,使得模型对于被遮挡或者被截断的目标的3D检测结果精度大大提升,满足现有自动驾驶汽车所需的单目3D目标检测需求。
其他文献
全国公路交通安全管理局的一项研究结果表明,疲劳驾驶是交通事故发生的主要诱因之一。因此,对驾驶员的驾驶状态进行实时性的检测具有重大的意义。本文结合重庆市某汽车厂商一体化智能座舱项需求,研究在英伟达TX2嵌入式平台实现对驾驶员是否疲劳驾驶监测技术与方法。本文研究了基于深度学习的头部姿态估计驾驶员的疲劳驾驶检测相关方法,针对在TX2平台上实现大规模的数据特征提取及模式识别与处理出现视频卡顿、精度下降的问
学位
功能性排便障碍(FDD)是一种常见的慢性肛肠疾病,其患病原因往往难以确认,而随着现代生活方式的转变、社会老龄化发展,FDD患病率日益增长,给人们生活带来极大痛苦,也为国家带来较大医疗负担。但目前并没有十分有效的针对性诊断和治疗手段,且主流的肛肠检测设备只能检测单一数据,要想采集全面数据,患者需进行多次侵入式检测,实验数据误差较大。本文作者所在项目组在此背景下研发了Fecobioncis系统,可以一
学位
隧道入口区域是一类常见的道路交通瓶颈,因行车环境特殊,交通负效应问题突出。研究表明,在传统交通流下通过对隧道入口区域上游路段进行分段限速能有效抑制该区域的负效应。随着智能汽车的发展,未来交通流将出现网联自动车与传统人驾车混行的新型交通流,由于两种类型车辆之间的控制决策存在较大差异,导致该区域交通问题更加复杂。因此,如何针对该区域混合交通下的负效应,研究设计相应的控制策略,是智能交通系统研究中亟待解
学位
磁耦合无线电能传输(Magnetic Coupled Wireless Power Transfer,MC-WPT)技术以高频磁场作为电能传输载体,是无线电能传输(Wireless Power Transfer,WPT)技术中的一大研究热点,在近年来取得了丰硕的研究成果,也具备了较高的技术成熟度,其便捷、灵活、安全等优点解决了传统有线供电模式下的诸多问题。在水下应用场景中,水下巡检机器人往往需要恒
学位
随着半导体照明技术的飞速发展,以LED为代表的半导体照明产品已广泛应用于各个领域,为节能减排战略做出了重要贡献。在LED封装生产过程中,其表面可能会产生各种缺陷,直接影响LED封装的寿命和效率。LED封装正趋于微型化、精密化方向发展,传统人工目视检测方法已难以满足高效率、高精度的检测需求。因此,本文旨在设计与实现基于机器视觉的LED封装表面缺陷检测软硬件系统,研究面向多种类、变尺寸的LED封装表面
学位
随着电动汽车的普及,其充电时间长、续航里程短等问题日益凸显。电动汽车动态无线电能传输(Electric Vehicle Dynamic Wireless Power Transfer,EV-DWPT)技术突破了限制电动汽车发展的技术瓶颈,为电动汽车充电难问题提供了有效的解决途径,对于电动汽车的发展具有重要的意义。EV-DWPT系统通常采用分布式短导轨供电模式,然而这种供电模式在导轨切换区域存在较大
学位
随着旋转设备的不断发展,大量特殊领域如雷达供电、风力发电、航空航天、石油钻探等,对旋转设备提出了更高的要求。旋转设备由静止和旋转两部分组成,工作过程中供电端与用电端存在相对转动,需要旋转机构衔接静止和旋转部分。因此,旋转机构成为旋转设备的重要研究方向。传统旋转设备采用接触式滑环进行电能传输,由于静止部分和旋转部分之间物理连接,存在易磨损、易打火、事故率高、更换成本高等缺点,阻碍了旋转设备的发展。无
学位
为满足快速增长的电力需求,微电网这一灵活、高效、清洁的小型供电系统受到了人们的广泛关注。但新能源发电出力的间歇性、波动性以及负载需求的随机性也给微电网的稳定运行带来了新的挑战,针对以上问题本文提出一种双层控制结构的微电网有功功率动态调度与控制策略,上层动态经济调度算法实现发电单元最优参考值的计算,下层控制策略实现发电单元的输出功率跟踪最优参考值。针对微电网动态经济调度问题,结合预测校正内点法和拉格
学位
电机在工业化进程中有着举足轻重的地位,而电机轴承作为一个故障多发的零部件,损坏时很容易带来经济损失和人员伤亡等问题,传统的电机轴承故障诊断方法对从业人员的专业知识和经验要求较高,对复杂设备进行故障诊断的难度较大。近年来,基于深度学习的电机轴承故障诊断方法得到了学术界和工业界的广泛关注,但由于现实工况多变、电机轴承参数不同、故障样本较少等原因,基于深度学习的故障诊断模型面临着应用过程中识别准确率下降
学位
随着计算机硬件与算法的发展不断取得新的突破,自动驾驶汽车的落地也离我们越来越近,未来自动驾驶与人工驾驶不可避免的混合将会给我们现有的道路基础设施带来新的问题与挑战。路段阻抗函数能很好地反映路段出行成本与流量的变化关系,同时也是交通分配的基础,但是在自动驾驶车辆与传统人工驾驶车辆组成的混合交通中,以往的路段阻抗函数未能考虑混合交通流中的自动驾驶车辆渗透率与专用车道等因素对道路通行能力的影响,难以准确
学位