复杂背景下基于视觉注意模型的手势分割和识别方法研究

来源 :东北大学 | 被引量 : 0次 | 上传用户:asaaaas
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机技术的发展,人机交互在人们的日常生活中显得非常重要。人们开始追求一种更自然、更智能、更符合人类交流习惯的交互方式。基于手势的信息交流自然、方便,并能实现非接触式的交互,能够满足人机交互的新需求。因此,手势识别技术一直是人机交互领域的研究热点。目前,手势识别技术已经取得较大发展,但在实际应用中仍然存在一些问题。主要难点包括以下两方面:(1)如何消除复杂背景对手势分割的影响。在实际应用中,背景往往包含很多形状复杂、颜色多样的非手势区域以及人脸和其他身体肤色部分的干扰,同时光照的颜色和亮度也会发生各种变化。在这种环境下,基于运动信息的方法虽然可以有效排除类肤色区域的干扰,但很难提取到完整的手势;基于肤色模型的方法很难适应人种肤色差异、光照变化且无法排除类肤色区域。(2)如何提取有效的手势特征。人做手势时有多个自由度且人手本身存在肤色、尺寸的差异,几何结构也比较简单,可提取的信息较少,所以提取有效的手势特征比较困难。针对手势分割和识别方法存在的问题,本文的主要贡献和创新点包括以下几点:(1)在手势分割方面,针对背景中非手势区域、类肤色区域的干扰,将区域对比度模型用于手势分割中,并针对该模型存在的不足,提出肤色-区域对比度模型。该模型通过建立基于HSV和YCbCr颜色空间的高斯肤色模型,得到肤色显著图,与区域对比度显著图融合得到最终的手势显著图。最后通过固定阈值分割方法提取手势区域并通过实验验证了该方法较基于区域对比度模型的手势分割方法有更好的手势分割效果。(2)在手势分割方面,针对人脸和身体其他部分肤色的干扰,本文首次采用了一种基于多特征的贝叶斯推理模型用于手势分割,该模型通过HMAX模型提取形状和纹理特征,排除类肤色区域干扰;并对HSV和YCbCr颜色空间进行量化后提取颜色特征,排除其他非肤色区域干扰。最后将得到的特征作为贝叶斯网络的输入得到手势空间概率分布图即手势显著图。实验结果表明,该方法有效降低了复杂背景的干扰,提高了手势分割的精确率和召回率。(3)在手势识别的特征提取中,本文提出Hu矩特征和HOG特征的融合方法,并采用PCA降维,通过支持向量机实现手势识别。最后通过实验验证了该方法较单一特征识别率有显著提高。
其他文献
目的探讨原发性高血压患者血压节律变化与早期肾功能损害的相关关系。方法选取2015年11月-2016年1月心内科门诊及住院的原发性高血压患者58例。其中男性34例,女性24例,平均年
近年来,随着互联网的蓬勃发展,人们更依赖通过网络进行交流、购物等行为。这使得数据量呈现指数增长,于是大数据应运而生。大数据具有开放性、交互性和全球性的特点,并且有巨
线虫每年对农作物造成相当大的损失,由于传统的防治线虫措施与喷洒化学农药的局限性迫切需要一种对环境友好且高效的线虫生防制剂。捕食线虫真菌(Nematode-trapping fungi)生活方式灵活且是杀线虫生防制剂研究最多的,其原本能在土壤中营腐生生活,当处于低氮源环境且有活线虫或线虫提取物存在的条件下其营养菌丝会特化形成捕食器官(捕器),捕器的生成标志着生活史的改变,捕器可分为三维菌网、粘球、粘
开发高灵敏生化分子精准检测器件对人类疾病的精准检测和治疗至关重要。近年来,科学家们将柔性传感技术和电化学酶传感技术相结合,开发了更为便携的柔性电化学酶传感器件。此
随着科学技术的进步和人们对智能生活的需求的增大,能够实现人机交互的智能仿生和仿人机器人也得到了空前的发展。触觉传感器能够在一定程度上模仿人体触觉感知能力,并提取接
随着工业机器人技术的发展,工业机器人已经大量地应用于生产实际中的装配任务中,但是由于装配过程复杂、现场环境噪声大、机器人自身定位精度和视觉技术限制等因素,机器人高
本文以聚碳酸酯滤膜(PC膜)为模板制备金三维纳米柱阵列电极(3DGNEs),通过循环伏安法电聚合对氨基苯甲酸(4-ABA)修饰常规金电极和3DGNEs,并以此为基底组装冈田酸(OA)电化学免疫传感器,
NAD能够通过降低氧化应激水平保护同步辐射造成的大鼠性腺组织损伤、阿霉素造成肝脏损伤或者保护H2O2造成的细胞损伤。因此,研究NAD和NAD相关的酶在氧化应激和抗氧化中的作用
雷电是一种复杂的自然现象,其发生的过程通常伴随着强大的声、光、电等信号辐射,从而对人类社会活动、人身安全等构成威胁。雷电灾害是最严重的自然灾害之一,而通过对雷电的
帕金森综合症(PD)是常见于中老年人的一种神经变性疾病。由于α-突触核蛋白(α-syn)会产生基因突变,因此科学家们常将其与PD的发病机制联系起来。研究表明,其可溶性寡聚物会