面向飞行机械臂的动态目标位姿估计与主动三维重建研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:passionzy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
多旋翼无人机是一种对算法鲁棒性具有高标准的系统化机器人平台,这类飞行机器人的基本能力主要包含稳定飞行、环境感知与主动作业。在实际的应用中,无人机在目标追踪、极端环境的勘探等场景具有天然的优势。然而现有的大量研究中,飞行机器人的观测对象是静止的,缺乏对动态目标的主动追踪与重建能力。并且现有的众多飞行机器人结构中,无人机与感知传感器是捷连的。这种结构导致了感知模块与飞行平台的运动耦合,约束了飞行机器人的观测能力。针对实际的应用需求,本文着眼于提高飞行机器人对动态目标的主动追踪与感知能力。本文设计了一套新颖的双视觉飞行机械臂系统。该系统主要由旋翼无人机与轻质六自由度机械臂构成,并在机体和机械臂末端分别放置视觉传感器,称作机体相机与颈眼相机。机械臂可以独立于飞行平台运动,使颈眼相机能实现对目标物的灵活追踪与观测。机体相机则保障了系统对静态环境感知的信息量,从而同时保障系统对机体自身位姿与动态目标位姿估计的精确性与鲁棒性。本文构建了飞行机械臂的软、硬件系统,同时基于ROS和Gazebo搭建了与实物1:1的面向飞行机械臂主动作业的物理引擎仿真平台,该仿真平台采用模块化软件设计,提高了算法验证的便利性。本课题以松耦合的方式估计机体的世界位姿与动态目标相对于颈眼相机的位姿,并通过机械臂正运动学建立双视觉系统位姿估计的联系,得到目标物的世界位姿。针对动态目标的位姿估计,前端使用YOLOV3-tiny检测目标,提取ORB特征点并基于2D主成分分析分离前景与远景特征,通过优化重投影误差得到帧间位姿。提出基于3D DBSCAN算法的局部地图构建方式,并利用局部地图跟踪减小累计误差。为了提高系统对动态目标的重建效率,转换并提取得到目标坐标系下相对静止的动态目标点云,更新八叉树信息场,输出使目标物不确定度下降最快的最佳探测视角。考虑到动态目标的运动随机性与深度检测网络的准确性,本文以目标物在视野中的成像大小为约束,通过Slerp插值与图像视觉伺服协调规划机体与机械臂的运动轨迹,实现对目标物的主动追踪,减小目标丢失的概率。最后基于优化的位姿,提取目标点云并融合多帧测量,利用TSDF实现目标物的稠密表面重建。为了验证飞行机械臂系统的有效性,本文通过实验分析了所提出的算法对动态目标主动追踪与重建的有效性。本文提出了一种新颖的面向飞行机械臂的双视觉感知系统,提高了飞行机器人同时定位、建图及动态目标追踪的鲁棒性。对动态目标的快速追踪与主动重建并得到其准确的三维结构,可以为飞行机械臂实现进一步的作业提供准确的先验信息,在飞行机器人领域具有潜在的应用价值。
其他文献
地面移动机器人因其便捷灵活的运动学特性以及相对较高的载荷与运算平台的性能,被广泛应用在城市运输、安全巡防、灾后救援等场景中。其中,一个重要的任务是令机器人自主地完成对特定建筑物的扫描与重建。该任务的顺利完成是对建筑物完整性评估的前提,在灾后救援与安全巡防场景中有重要的应用。针对上述实际问题,本文提出了一种针对户外场景下的移动机器人面向建筑物的主动重建的方案,通过对户外场景下的建筑物的边境栅格进行建
学位
无人飞行器能在三维空间运动,将机器人系统应用范围扩展到广阔的空域,可代替人类进行远距离的感知探索或在危险环境中进行作业任务。飞行机械臂结合了无人飞行器的定点悬停、机动飞行和机械臂灵活操作的特性,能与环境进行有效实质的物理交互。实现精确稳定的空中抓取操作是使飞行机械臂得到更多复杂应用的基础。目前亟需将人工智能、边缘计算和特定场景的视觉伺服策略等前沿技术应用到飞行机械臂系统。因此本文将开展基于NPU的
学位
当前,随着各大电商公司的大力投入,人们的消费方式发生了巨大的改变,网购在人们的生活中起着越来越重要的作用,同时也给物流仓储行业带来了巨大的挑战。因为智能仓储系统有着准确性高、实时性强、鲁棒性强的特点,所以是各物流公司的重点发展领域。在智能仓储系统中,一个性能优秀的多机器人路径规划算法能够提高仓储系统的吞吐量。本文以智能仓储系统为背景,主要研究智能仓储系统中的多机器人路径规划问题。本文针对传统集中式
学位
本文提出了一种基于计算机视觉的大型工程结构有感振动位移识别方法。该方法主要用于识别监控、手机等低分辨率设备应急拍摄的大型工程结构有感振动视频。针对识别位移分辨率低的问题,提出识别分辨率优化算法。由于识别的位移具有高空间分辨率特性,进一步发展了基于振动视频位移估计的高空间分辨率振型识别方法。通过将所提计算机视觉位移识别方法应用于模型试验中,验证方法的有效性与识别精度。基于发生有感振动的超高层建筑结构
学位
目的:研究慢性牙周炎患者植体周龈沟液(peri-implant crevicular fluid,PICF)p H值和临床指标随负载时间的变化,为植体周状态的早期诊断提供更加简单快捷的临床指标,以期从临床检测水平判断植体周炎症的发生,及时采取干预措施,为植体周病的一级预防提供临床参考。方法:收集2014年10月—2021年10月于安徽医科大学附属口腔医院牙周黏膜科接受种植修复的患者77例为试验组研
学位
移动机器人技术的快速发展为高效的无人物流运输提供了可能性,特别是近年来针对多个移动机器人协作的多智能体系统技术,为大规模仓库物流应用指明了方向。多智能体路径规划是完成无人运输设想的关键技术,其有三项原则:(1)首先原则是避免碰撞,(2)其次是较短的路径规划时间,(3)以及路径规划的光滑性等指标。但是,随着多智能体数量增加,多智能体碰撞概率和规划时间都会急剧增加,同时规划的路径也失去光滑性。为此,专
学位
随着机器人技术的快速发展,在地震、火灾等自然灾害或人为灾害的救灾场景中,机器人的部署为灾难应急反应提供了更大的灵活性和可靠性。本文来源于国家重点研发计划智能机器人重点专项项目“自主搜救机器人在线检伤原理与技术”,项目中要求机器人能够对集伤点内的所有伤者进行初步的检伤分类,这需要从患者的皮肤表面进行穿刺采集少量的血液进行检测。由于灾难现场的环境恶劣,在穿刺前对皮肤进行局部的接触式擦拭消毒是必不可少的
学位
背景和目的NLRP3炎症小体是天然免疫系统的主要成分之一,其非正常活化与诸多炎症或代谢性疾病病变进程紧密相连,如败血症、二型糖尿病、阿尔茨海默症、炎症性肠道疾病、痛风等。因此,为了防止过度炎症,就需要非常严格地把控炎症小体激活,寻找内源性调控NLRP3炎症小体的分子也成为治疗炎症与代谢相关疾病的关键。犬尿喹啉酸(Kynurenic acid,KA)是犬尿氨酸途径中的一种色氨酸代谢物,可在各种类型的
学位
邻苯二甲酸二(2-乙基)己酯(DEHP)是一种普遍应用于多种塑料制品的内分泌干扰物。流行病学调查研究表明,DEHP的长期暴露可能会使机体肾功能出现障碍。当机体处于慢性肾损伤状态时,DEHP的暴露可能会导致肾脏疾病程度加重。IgA肾病是目前世界范围内最常见的原发性肾小球肾炎。然而,DEHP对IgA肾病的影响未见报道。本研究中,我们使用牛血清白蛋白(BSA)联合四氯化碳(CCl4)和脂多糖(LPS)建
学位
多航天器编队飞行可以完成深空探测、深空成像、地面测量和航天器在轨维护等任务,而多航天器飞行协同控制作为编队飞行的核心技术之一,已经引起了各国学者的广泛研究,成为了航天领域的热点问题。为了更好地完成多航天器飞行任务,本文针对多航天器姿态跟踪与轨道协同问题展开了以下几个方面的研究。考虑存在外界干扰的多航天器姿态跟踪控制问题,针对修正罗德里格参数所描述的多航天器姿态模型进行了有限时间姿态跟踪控制器的设计
学位