基于感兴趣区域的图像语义获取方法研究

来源 :西北农林科技大学 西北农林科技大学 | 被引量 : 0次 | 上传用户:pc167
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前,图像和视频正成为多媒体的主要表现形式,如何有效地从大规模图像库中快速检索出用户真正需要的图像,已成为实际生活中急需解决的问题。传统的CBIR技术多通过分析图像视觉特征的相似性来检索图像,如图像的颜色、形状、纹理特征及对象之间的空间关系等。然而,人们判断图像的相似性并非仅仅建立在图像视觉特征的相似性上,更重要的是图像所包含的语义相似性。为更好地使计算机满足人们对图像信息的理解,缩短计算机视觉与用户之间的“语义鸿沟”,本文在图像感兴趣区域提取的基础上,重点研究了图像语义的获取方法,并将其研究成果应用于图像的语义检索中,开发了一个语义检索原型系统ISR ( Image Semantic Retrieval )。本文的主要研究内容如下:(1)针对传统方法对一般目标图像感兴趣区域提取的困难性,结合生物视觉注意机制,提出了一种新的感兴趣区域提取方法。首先利用Itti等人的自底向上、显著图方式的注意模型提取注意焦点后,提出依据显著图的整体效应原则和中心偏好原则对其进行筛选,最后根据目标物具有的空间邻近性和属性相似性特征,在特征显著图的基础上通过区域生长自动获取图像中的感兴趣目标物。实验表明,该方法能有效地提取出不同复杂背景下不同类型的感兴趣目标物,且对噪声具有很好的鲁棒性。(2)在感兴趣目标物提取的基础上,提出了一种结合视觉注意与大脑目标认知的图像自动分类计算模型框架。首先利用感兴趣区域提取算法从图像中提取出感兴趣的目标物体,并针对生物视觉系统相对目前计算机视觉的优越性,模拟大脑视觉皮质对事物的认知过程,通过层次模型在感兴趣目标物上获取能有效描述目标物,且对尺度和方向具有不变性的C2特征,最后采用标准分类器(支持向量机和k-最邻近算法)对其进行分类,从而获取图像语义。实验表明,该框架能有效对图像进行分类,用支持向量机进行分类的平均正确率高达96.65%;与直接从图像中提取C2特征相比,ROI-C2特征具有更好的分类性能,且只需少量样本即可。(3)针对图像的复杂度,利用多示例多标记学习获取图像多语义的信息,并提出了两种新的多示例多标记学习算法EMDD-SVM和EMDD-KNN。该算法首先将图像多示例多标记问题转化成多示例问题,采用EMDD算法求取其各个分类标记的示例原型用以代表该类图像,然后利用最小的带权Hausdorff距离计算样本与原型之间的距离,将其转换到包的特征空间,进而将问题转换成多标记学习问题,最后分别采用MLSVM和MLKNN对其进行分类。实验结果表明,该学习框架能有效对图像进行多语义分类,EMDD-SVM算法分类效果好于MIMLBoost算法和MIMLSVM算法。(4)为进一步验证本文语义获取研究方法的有效性和实用性,将图像语义获取的研究成果应用于图像检索中,在分析系统结构及关键技术实现的基础上,开发了图像语义检索原型系统ISR。实验结果表明,该原型系统能有效地实现图像单语义和多语义查询,具有较高的实用价值。
其他文献
随着JAVA的普及和流行,J2EE平台也在WEB开发中发挥着越来越大的作用。伴随其的各种新技术如雨后春笋般大量的涌出。为了更好的研究J2EE体系架构,本文采用了业界流行的Struts、H
虚拟视觉坐标测量机是坐标测量中一个新的研究领域,有着重要的理论意义和广阔的应用前景。本文主要对视觉坐标测量的仿真环境进行研究,包括对视觉坐标测量机的仿真模型及其仿
图像检索的主要技术包括:图像特征的提取,图像特征的索引及检索。基于颜色直方图的图像检索可以快速地提取出图像索引,但颜色直方图仅仅表示图像中各种颜色的统计分布,而没有
网络的发展加大了安全类软件的需求,而与之相悖的是安全类软件的高难度、高风险,周期长的特点。为解决这一问题,对安全中间件软件的研究逐渐发展了起来。在此背景下,本文根据
P2P流媒体直播系统通常采用单一码率的方式传输数据,由于网络环境、终端设备的差异以及P2P本身拓扑结构的动态变化,往往导致无法缓冲到足够的数据,另一方面,也可能无法给高带
人们对计算机网络的依赖程度越来越大,而且越来越多的系统采用了分布式体系结构,这给传统的网络安全技术带来巨大的压力。网络系统的可生存性正是在这个阶段提出来的。可生存
语义网作为一种可以建立在理解的基础上进行人与机器智能交互的网络,能够实现从“内容匹配”到“机器理解”的跨越,已成为人们未来设想和期望的网络。本体作为一种描述语义和
由于NandFlash具有体积小、大容量、省电、非挥发性和耐震性等特性,使得他才刚刚问世几年便成为了嵌入式计算机系统中存储器的主流之一。 但是NandFlash具有以下几个方面的
随着科学技术快速发展,人们对社会生产发展信息化、物联网化提出了新要求。目前还有许多传统大棚种植还停留在人工管理,或者使用上世纪西方国家的淘汰设备。现在嵌入式设备已