行为特征融合的视觉注意力检测技术研究

来源 :重庆邮电大学 | 被引量 : 0次 | 上传用户:wwt74105
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于视觉的注意力简称为视觉注意力(Visual Focus of Attention,VFOA),特指视觉关注方向和焦点,主要融合头部姿态以及视线方向信息来对其进行判断,通常将视线的视点位置判定为视觉注意力焦点位置。随着人工智能领域的飞速发展,构建全方位感知的智能时代是近年来人工智能的一个发展趋势,而视觉注意力检测技术则将视觉、推理以及情感等因素融入其中。因此,本文针对VFOA检测技术的研究不仅具有很深的理论价值,也具有广阔的应用前景。首先,本文设计了视觉注意力检测系统的总体方案。并针对低质量图像中人眼定位不精准的问题,提出基于先验多任务级联卷积神经网络(Multi-task Cascaded Convolutional Networks,MTCNN)人脸检测的人眼关键点定位方法。选取对头部姿态偏转、光照变化以及遮挡等因素具有较好鲁棒性的MTCNN-mxnet进行人脸检测和5个人脸关键点(左右瞳孔、鼻尖和左右嘴角)回归。根据得到的瞳孔关键点先验知识分割出人眼候选区域,对该区域进行灰度值和梯度积分投影,并将投影曲线极值点坐标组合与MTCNN左右瞳孔位置距离最近的两个点作为粗定位瞳孔坐标,再分别得出与其对应的MTCNN瞳孔坐标的平均位置来作为本文瞳孔精定位位置。最后,结合该瞳孔坐标,利用边缘和角点检测算法在眼部区域精确定位左外眼眦、右外眼眦、左内眼眦和右内眼眦,为下一步视线估计模型的建立奠定基础。实验结果表明,本文提出的改进的人眼定位方法较MTCNN相比,有效提升了低质量图像中人眼定位的准确率且实时性好。其次,建立行为特征融合的动态贝叶斯网络视觉注意力检测模型。分析比较了常用分类/回归方法的优缺点,选取本文采用的混合贝叶斯网络回归模型对VFOA进行估计。分别建立头部姿态和视线检测贝叶斯子模型,针对极端姿态和动态场景下导致的数据缺失问题,增加预测子模型,将各个子模型进行加权融合。实验结果表明,该方法提高了检测准确率、降低了误差值。为进一步提升本文VFOA检测算法对动态姿态变化的适应性,利用增量学习的方法对模型的相关参数以及权重因子进行动态增量更新。实验结果表明,该方法能有效估计人眼的视觉注意力,检测准确率和稳定性均有所提升,对头部自由偏转以及距离变化的鲁棒性更强。最后,在智能服务机器人平台上完成了视觉注意力检测的集成实现。构建了基于视觉注意力检测的服务机器人控制系统,设计了系统的软硬件部分,并将视觉注意力检测结果转化为对应的控制指令,实现对服务机器人的交互。实验结果表明,本文提出的视觉注意力检测方法能够有效控制服务机器人运动且实时性强,具有一定的实用价值。
其他文献
课程的评价与建设是提高大学课程品质与办学质量的核心环节。当前评价学生学业成绩的模式有百分制、标准分数制、等级制、论文制、绩点制。分析各评价模式的优劣,得出实施绩
20世纪80年代中期以来,我国社会进入了剧烈的转型期,这一背景下的学校体育话语呈现出了多元多变的特征,体现为:充塞着强烈的“改革”意识、挥之难去的“政治化”话语惯习、“生活
地球物理勘探技术的合理应用,既能够为石油的勘探和开发工作的顺利开展提供数据支持,也能够有效地降低石油勘探与开发的成本。因此,本文对石油勘探开发领域中的地球物理勘探
魏晋时期是论体文创作的繁盛期,其主题的发展和变化与魏晋清谈的演变密切相关,它们之间互相促进,共同发展,并出现繁荣的局面。魏晋的清谈先后经历了人物品评、才性之辩和名教自然
目的:探讨子宫手术瘢痕形成后2年内再次妊娠的结局,评估其可以继续妊娠的安全时间和可行性。方法:收集我院2009年1月-2013年12月50例子宫手术后(剖宫产术或子宫肌瘤剔除术)再次妊
针对轨道交通调度显示系统中监控视频控制器的实际需求,介绍了双3次插值图像放缩算法和抗混叠滤波器的原理,提出了作为视频控制器核心的图像缩放技术的功能划分,分析了基于现场
本文在对原移动闹钟与智能闹钟APP进行对比的基础上,指出智能闹钟APP在开发模式上的优势。以蜗牛睡眠APP为案例,介绍智能闹钟APP的设计思想和实现技术方案,对实现中存在的问
从港口自身发展及港口城市发展的角度出发,重新定义了港口可持续发展能力的外延和内涵,在遵循建立可持续发展指标体系原则的基础上,形成了衡量港口可持续发展能力的评价体系
阐述了影响混凝土构造物外观质量的因素,分析了混凝土常见的外观质量问题的产生原因,最后就加强混凝土外观质量控制提出了具体的控制措施,对指导现场施工具有一定的参考价值
行为主义创立者华生的经典儿童恐惧获得实验在心理学史上具有里程碑的意义,但因研究的伦理、设计缺陷等问题一直备受争议。在过去的几十年里,心理学界一直在寻找实验被试小阿