工业机器人安全作业系统的视觉检测方法研究

来源 :长春工业大学 | 被引量 : 2次 | 上传用户:winston_he
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着我国智能制造业的改造升级,工业机器人需求剧增。人机协作是机器人发展的重要特征,车间中各种类型机器人与人协同工作,处于弱势地位的工人安全隐患相对较大。据美国劳工局统计,从1984年至今,与机器人相关的安全事故中,总共有4585名工作人员丧生。为保证人机协作环境中操作人员的安全,本文针对工业机器人安全作业系统中的视觉检测技术进行了研究。以人与固定式工业机器人协同作业过程中的人体信息检测为研究对象,构建了基于三个Kinect 2.0深度相机的三维人体图像视觉检测系统,其硬件部分主要由3部Kinect 2.0相机与一台计算机组成,软件环境主要基于Windows10系统下使用Visual Studio 2017编译器并配置安装PCL1.8.1开发环境作为开发平台。主要工作如下:首先,对Kinect 2.0相机的二维图像平面误差及深度图像的深度误差进行了校正。对二维成像平面误差采用棋盘格标定的方法进行校正。对于深度图像的深度误差,提出了一种利用建立复合函数小波神经网络序贯极限学习机(CFWNN-OSELM)空间配准模型的方法,对非线性的深度偏移和由于Kinect 2.0相机测量原理导致的深度高估误差进行统一校正。本文所提算法既能够实现在线增量式快速学习,又具有更强泛化能力,实验结果表明,该算法能更好地复原真实场景中的深度数据。为后续的Kinect2.0相机获取的视场内的高质量目标点云数据打下基础。然后,在单个kinect 2.0校正结果的基础上,针对人体目标点云数据的自动分割方法进行了研究。采用一种基于Kinect 2.0骨骼数据计算人体在三维空间的中心坐标作为直通滤波器阈值方法,从原始点云数据中自动分割人体目标点云数据。针对原始点云数据量的简化进行了研究。首先,利用基于kinect 2.0骨骼数据计算的人体三维空间中心坐标来自动确定对原始点云数据降采样过程中体素栅格法的体素大小。然后,基于kinect 2.0骨骼数据计算人体在三维空间的中心坐标作为直通滤波器阈值从降采样处理后的点云数据中自动分割出人体目标点云数据。最后,利用Statistical outlier removal法对自动定位成功分割出的目标人体点云数据进行一系列的离散点移除。实验结果表明,该方法可以将人体目标模型在复杂的场景中标记区分出来,以达到快速准确获取平整的目标人体点云数据的目的。再次,针对现有的复杂背景下人体动作识别中存在识别准确率不高和实时性不强等问题,提出了一种利用Kinect 2.0测量计算关节关联角度的人体姿势极限学习机(ELM)配准模型识别算法。通过Kinect 2.0获取人体关节点的空间坐标,采用三点法计算出人体关节的关联角度的大小,再通过人体姿势极限学习机(ELM)配准模型进行动作识别。实验结果表明,本文采用的方法可以通过定义更多目标姿态的关节关联的角度用以建立人体姿势ELM配准模型来识别更多的姿势。最后,针对构建的基于三个Kinect 2.0的三维人体图像视觉检测系统中涉及的点云数据配准拼接问题,提出了粗配准和精配准两步走的方法,对各个相机获得的点云数据进行两两配准。由于常用的3DSC、PFH、FPFH和NDT等的配准算法,对两幅图像相差不大的情况粗匹配效果较好,但对于本文而言,由于需要配准的两幅目标点云数据图像公共部分较少,点云数据图像之间有一定差异,效果并不理想。为了更好的满足本文的需求,先使用篮球作为靶标,将三个相机的局部坐标系统一到一个坐标系下,对三个相机进行外参数标定,也就是粗配准;在此基础上,通过ICP算法对三个相机获得的点云数据进行精配准,达到了准确配准出完整平滑的人体三维点云数据模型的目的。
其他文献
伴随着工业技术的飞速发展,集成电路的规模与日俱增。规模巨大的集成电路设计给验证工作带来了巨大的挑战,芯片验证工作已经占据设计工作大约三分之二的时间,俨然成为了芯片
在石材产业中,石雕是雕刻艺术在石材制品上的完美应用,记录了从古至今世界文明的发展进程,是人类文化及艺术传承的主要载体,具有很高的艺术价值和文化价值。立体石雕更是以其
随着微电子技术的不断发展,集成电路规模日益增大,在处理器芯片的面积逐渐缩小的情况下,对大量数据的处理更为频繁,因此对数字处理器的结构以及运算效率也有了更高的要求。在
传统视频监控系统存在以下两点不足:第一,数据量十分巨大。海量数据的处理、分析、查看需要消耗大量人力物力财力;第二,视频数据存储与传递困难。海量视频数据往往需要存储并
多基色无荧光粉LED以其高品质、高可靠性的优点成为下一代半导体照明的必然趋势。对于多基色LED封装模块,光提取效率和空间颜色均匀性是评价其性能的关键指标之一。传统的封
本文以丹尼爾·裡希特(Daniel Richter, 1962-)從1999年到2012年之間的具象作品為研究物件,筆者從畫面的風格角度,構圖,藝術語言這三個方面進行分析,藉以探討這位藝術家的獨
背景神经元增殖和分化障碍影响创伤性中枢神经系统损伤后的修复和再生,进一步会产生各种各样的神经系统疾病。前期实验结果证明PTEN沉默会促进PC12的增殖和分化,提示PTEN可能
电力系统运行时用户侧负荷不平衡现象时有发生,如何解决由此导致的系统参数不平衡、供电电压质量变差、功率因数降低等问题是当代学者研究的课题,随着工业发展,大负荷投入带
USB通用串行总线作为一种标准高速串行总线接口,其极高的数据传输速度,能满足许多高速数据传输的应用环境需求,而且因其兼有供电简单、连接方式灵活、兼容性好、支持热插拔等
海上或空中进行分布式雷达组网通常只能依靠无线通信。由于战场复杂电磁环境的影响,无线通信的符号错误概率通常会高达10-2。为了实现信息的可靠传输,通常采用信道编码和重传