基于生成式模型的零样本图像分类

来源 :中国矿业大学 | 被引量 : 0次 | 上传用户:amwygah021121
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
零样本学习(零样本图像分类)主要研究利用属性或词向量等额外信息充当语义空间,在训练类别与测试类别没有交集的情况下,如何对测试类样本进行正确分类的问题,以及如何减小由于训练样本和测试样本之间的分布差异导致的领域偏移问题。本文主要围绕基于生成式模型的零样本图像分类展开研究,主要研究内容如下:1.针对零样本学习中图像特征到语义属性映射会发生领域偏移问题,提出了一种自动编码器和类特征原型相结合的生成式零样本学习模型。首先构建图像特征的类特征原型,并作为每个类别的标记,利用核函数构建属性向量核矩阵;其次利用自动编码器对训练类别的类特征原型和属性核矩阵进行模型构建,自动编码器对图像特征进行重构,先编码后解码,两次映射可以减少图像特征与语义属性之间的信息丢失;然后将测试类的属性核矩阵应用到自动编码器模型以生成测试类的类特征原型,再利用测试类的类特征原型附近的K个近邻样本对生成的测试类特征原型进行修正;最后在图像特征空间对修正后类特征原型利用最近邻分类器进行零样本分类。2.针对大多数基于生成式模型的零样本图像分类中没有考虑到生成测试类样本中存在噪声,以及与真实测试类特征分布不一致的问题。提出一种基于条件变分编码器与领域适应的零样本学习模型。首先融合训练类的图像特征和语义属性作为模型的输入,利用变分自动编码器网络来挖掘语义属性与图像特征之间的关系,对输入向量进行重构训练;然后模型训练结束后,把测试类的图像特征初始化为高斯分布,利用变分自动编码器生成测试类的样本;为使训练类和测试类的具有相同特征分布,同时减小生成图像特征噪声,引入了领域自适应方法筛选出与测试类相似的图像特征,进而去除噪声样本;最后利用生成的测试类样本来训练SVM分类器来进行零样本分类。本文分别在AWA1、AWA2、CUB数据集上进行了仿真实验,并对实验结果进行了理论分析和探究思考,证实了本文所提2个模型相比于其它模型具有良好的分类性能。该论文含有图36幅,表8个,参考文献100篇。
其他文献
在包装、医药和食品等领域,需要重复执行大量的抓取和搬运动作,并联机器人具备较好的动态性能,体积小、精度高,控制简单,被广泛的应用于上述行业当中。为了实现并联机器人平
随着互联网的日益发展,人们对信息安全的重视程度变得越来越高。生物特征识别技术是通过分析人类自身的生理或动作特征来起到保护个人信息的作用。近年来,在公共安全领域,以
在移动通信技术飞速发展的今天,短波网络通信有着其不可替代的作用,而信道接入子层中物理链接的建立是短波IP网络通信正常运行的前提,本文的主要工作和创新如下:文章主要介绍
纳米生物技术是一门新兴学科的,致力于制备纳米尺度的材料并提高其在各种科学领域的实用性。金属掺杂的杂化材料已被证明是针对许多致病微生物和各种类型癌症的药物。在不同
本文以熔石英为例,主要研究飞秒激光在透明介电材料表面制备微纳米周期结构的物理过程。调节激光参数,飞秒激光在熔石英表面诱导出各种微纳米周期结构。首先,通过实验研究了
三元复合驱油技术作为一种重要的三次采油技术,能够大幅度提高原油采收率。但是三元复合驱给注采系统带来了严重的结垢问题,导致产油效率大幅度下降。并且结垢现象伴随着原油
曲线拟合技术已被广泛地应用于图像处理、工程实验等领域,是计算机图形学和计算机辅助几何设计中的一个重要研究课题。本文对于现有的无序点云B样条曲线拟合算法进行了研究与
无人机集群攻击一直是要地防御的难题。高功率微波(HPM)武器的发展,为无人机防御难题找到了可能的解决方案。研究表明,高功率电磁波可以干扰或破坏无人机的导航控制系统,如美军
作为现代过程工业使用最为普遍的一种可拆卸连接方式,螺栓法兰连接广泛应用于食品、机械、航空航天等行业。这些行业大多都会涉及高温、高压,受外界恶劣环境等因素的影响较为
磨削是加工机械零件的一种重要技术,而表面粗糙度是评价工件表面质量的重要指标,直接影响工件的使用性能、寿命等,因此磨削表面粗糙度的研究与测量具有重要意义。与传统磨削