基于增强现实的消防处置机器人自然交互技术研究

来源 :山东大学 | 被引量 : 0次 | 上传用户:zjm2190
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着经济稳步快速增长,我国各类工业得到快速发展,而由此引发的火灾事故也一直呈现上升趋势。其中因石化企业其原料的易燃易爆的特性,一旦发生火灾,面对高温、黑暗、有毒和浓烟的火灾现场,消防人员无法进入完成消防作业任务,消防处置机器人替代消防人员执行任务成为必然趋势。在此期间,操作人员与机器人完全分离,遥操作成为消防处置机器人的主要交互模式,因此,交互自然、具有临场感的交互技术对消防处置机器人作业效率的提升有着决定性的影响。基于以上背景,开展基于增强现实的消防处置机器人自然交互技术研究,针对石化现场中的关阀作业场景,对交互技术的有效性进行验证,实验结果表明该交互技术具有良好的效率。主要工作内容如下:(1)消防处置机器人基础交互平台的构建。首先对机器人软硬件、通讯接口进行设计,建立消防处置机器人运动学模型。然后提出一种增量比例映射方法,并使用该方法搭建消防处置机器人的主从控制模块,通过异构式手控器实现机器人的基础主从控制。上述内容为后续研究提供平台支持。(2)手势交互方法设计。将数据手套作为手势信息采集装置,通过主从控制模块实现单一手势对消防处置机器人的主从控制。为了实现操作人员与机器人其余功能的交互,利用手势识别技术对手势交互范围进行拓展。与传统的机械式交互方法相比,该手势交互方法更加符合人类的日常行为习惯,是一种自然人机交互方式,有助于改善交互效率。(3)基于增强现实技术的立体视觉反馈。基于Vuforia注册方法实现增强现实环境中虚拟模型的三维注册,在Unity3D中搭建虚拟机器人,并实现其运动控制。利用目标跟踪算法与深度相机对目标物进行实时跟踪与深度信息提取,以此对从端图像进行深度信息增强,并输入至增强现实环境。该方法可以间接拉近操作人员与机器人间的距离,增强交互的视觉临场感。与此同时,增强现实技术将虚拟模型与真实环境有机融合,实现操作场景的虚实共存,使交互过程高效且安全。(4)基于关阀作业的遥操作系统搭建与实验验证。基于以上研究内容搭建消防处置机器人遥操作系统。以石化场景下的关阀作业为背景,设计遥操作实验,验证交互技术的有效性。在实验中,操作人员以手势作为交互方式,以增强现实作为视觉反馈,在主从完全分离的条件下控制消防处置机器人关闭阀门。最后实验结果表明遥操作系统不仅具有很高的灵活性,而且具有良好的交互效率。
其他文献
圆锯片在石材加工中有着加工效率高、加工品质好等优势,是石材加工业的主要工具。但圆锯片基体的生产模式相较于其它制造行业来说仍较为传统,为了快速满足越来越个性化、多样化的客户需求,缩短新型圆锯片基体的研发周期,提高厂商的竞争优势,应用新一代信息技术改善圆锯片基体生产方式,促进传统圆锯片企业智能化转型是大势所趋。本文基于智能物联制造系统的体系架构分析,结合信息管理技术建立了圆锯片基体参数化设计系统和工艺
学位
扭转振动广泛存在于机器人、车辆、机床以及舰船等设备中,对设备的工作精度与运动平稳性有较大危害。隔振是减轻有害振动的常用方法,传统线性隔振器存在高承载能力与低起始隔振频率的矛盾,而一般的非线性隔振器虽具有较高的承载能力,又能对低频振动有效隔离,但其设计负载是一固定值,当实际负载偏离设计负载时,隔振性能下降严重,无法满足使用要求。与以往研究不同,本文设计了一种正、负刚度同步可调的新型准零刚度扭转隔振器
学位
报纸
相比传统数控机床而言,具有灵活性高、工作空间范围大以及可加工对象广泛等优点的工业机器人越来越多被应用到机械加工领域。但机器人铣削目前只集中应用在轻负载、精度适中的场合,制约机器人铣削广泛应用的主要原因为机器人绝对定位精度较低以及机器人本身的刚性较弱,在铣削加工过程中容易受到外力而发生较大的变形,导致加工精度难以达到要求。本文通过机器人标定技术以及位姿优化方法来提高机器人铣削加工的精度,改善加工质量
学位
主轴回转误差对机床加工精度有着重要影响,回转误差间接补偿以及对回转误差直接控制是提高加工精度的两种有效途径。间接补偿往往需要复杂的补偿执行机构,且不能减小回转误差本身。本文对嵌入控制油腔的静压主轴进行轴心运动主动控制,以减小主轴自身的回转误差为目标,研究不同工作参数以及静压主轴系统参数对主轴轴心运动可控性的影响,为这类回转误差主动控制主轴系统的设计提供理论参考。首先,基于雷诺方程以及流量守恒方程建
学位
随着我国的工业的转型升级,机械设备的精密度,运行速度和对安全性、稳定性的要求也越来越高,工业设备趋向于复杂化和精细化。滚动轴承作为一种通用零部件,在机械设备中应用广泛,因而被誉为“工业的关节”。当滚动轴承的退化过程达到临界水平时,将会形成故障并逐步恶化,从而导致不可预测的意外后果,因此滚动轴承的运行质量与设备整体的工作水平密切相关。对轴承的早期退化点进行检测能够为后续的故障识别、寿命预测等提供可靠
学位
随着当前社会现代化工业水平的提高,以固定基座独立工作的机器人已经无法满足日益变化的制造业需求。在腿足式移动平台上安装机械臂形成的机器人可以同时结合腿足式运动的灵活性和机械臂的可操作性等特点,故具有广阔的应用前景。本文以四足机器人搭载的双移动机械臂为研究对象,针对双臂建模与运动学分析、实时控制系统设计、双臂作业运动规划、柔顺运动控制展开研究,开展的研究工作内容如下:(1)针对机器人双臂的布局方式与运
学位
运动目标检测、定位、跟踪是计算机领域的核心研究课题,在视频监控、军事对抗、智能交通等领域具有重要的研究价值。目前关于运动目标检测、定位、跟踪的相关算法种类繁多,不过随着新问题的不断涌现,还有很多理论与应用的难点可以进一步研究与解决。本文以三维空间中的运动目标为研究对象,以单目相机为研究工具,以光流为研究起点,综合图像处理、深度学习、聚类、非线性滤波等方法,设计了集运动目标检测、空间定位、立体跟踪为
学位
当前,我国经济正处于转型升级、提质增效的关键期,同时生态文明建设也发生了历史性、转折性、全局性的变化。面对当前能源资源利用效率不高、生态环境治理成效尚不稳固、实现碳达峰碳中和任务艰巨等突出问题,建立健全绿色低碳循环发展的经济体系是大势所趋和机遇所在。在实现清洁化和高效化的过程中,必然会淘汰大量的设备。如何处理这些设备将成为难点和热点。拆解是从废弃产品上分离出可回收的零部件,从而提高对资源的回收利用
学位
母线排在电力系统中应用非常广泛。当前,母线排加工一般采取冲剪与折弯加工相独立的设计方式。操作人员依靠通用CAD软件分别设计冲剪和折弯加工图纸,并将其导入到加工系统中生成加工程序以驱动机床完成加工。首先,通用CAD软件难以适用于母线排设计,操作人员需要对母线排三维模型进行手工平面展开计算,将其绘制为应用于冲剪和折弯加工的二维图纸;其次,CAM系统的缺失导致系统无法实现母排加工的自动编程、下料优化和模
学位