【摘 要】
:
深度学习相关技术发展势头迅猛,在交通标志识别领域得到了广泛应用。一方面,传统的交通标志识别模型结构复杂,从头训练花费大量时间。另一方面,虽然迁移学习节约训练时间,但是源模型(教师模型)和其衍生模型(学生模型)具有相似的结构和参数,教师模型的对抗性样本容易被其学生模型分类错误。目前可以利用“指纹”识别法准确找到与学生模型对应的教师模型,如果敌手成功攻击对应的教师模型,投入应用的学生模型的安全会受到严
论文部分内容阅读
深度学习相关技术发展势头迅猛,在交通标志识别领域得到了广泛应用。一方面,传统的交通标志识别模型结构复杂,从头训练花费大量时间。另一方面,虽然迁移学习节约训练时间,但是源模型(教师模型)和其衍生模型(学生模型)具有相似的结构和参数,教师模型的对抗性样本容易被其学生模型分类错误。目前可以利用“指纹”识别法准确找到与学生模型对应的教师模型,如果敌手成功攻击对应的教师模型,投入应用的学生模型的安全会受到严重威胁。为了解决上述问题,本文首先提出一种利用知识蒸馏原理训练交通标志识别模型的新方案。作为一种迁移学习方式,知识蒸馏不仅可以在训练过程中压缩模型结构,而且提高了小架构模型的鲁棒性和训练效率。本文蒸馏训练的Distillation-VGGNet不仅可以高精度地识别交通标志,而且结构精简、方便大规模部署。其次,本文提出一种轻量级的防御方法,对Distillation-VGGNet学生模型进行改进,降低学生模型与其教师模型的参数相似性,提高其鲁棒性。论文主要工作如下:(1)针对交通标志分类模型的训练过程需要大量标签数据、模型结构复杂、不方便大规模部署的问题,首先对自行采集的交通标志数据进行预处理,然后设计交通标志识别模型Distillation-VGGNet的架构,并采用知识蒸馏的迁移学习方式对其训练。最后仿真测试Distillation-VGGNet学生模型在CN-TSD上的识别准确率达到98.8%,与当下主流模型相比,具有更高的识别准确率。(2)针对蒸馏学生模型容易受到其教师模型的敌手攻击的问题,提出增加权重差异防御方法。本文在不明显降低学生模型对干净样本识别准确率的基础上,提升学生模型对教师模型对抗性样本的分类能力。本文首先利用PGD(Stochastic Gradient Descent)算法和CW2(Carlini-Wagner)算法分别生成教师模型的对抗性样本,然后将两个对抗性样本集分别加载到改进前后的蒸馏学生模型,以评估学生模型的鲁棒性。实验测得改进后的蒸馏学生模型对CW2攻击以及PGD攻击产生的对抗性样本的准确率分别提高了20%和16.7%,表明本文提出的改进方法使学生模型的鲁棒性更好。
其他文献
在现代社会,对更高数据速率通信系统的需求不断增加。在多输入多输出(Multiple Input Multiple Output,MIMO)领域,索引调制(Index Modulation,IM)技术作为一种创新性的传递信息的方式,由于在频谱、能量效率及硬件简单性方面的独特优势,IM近年来成为新的研究热点,是未来无线网络很有竞争力的候选技术之一。空间调制(Spatial Modulation)作为I
非合作通信是在通信参数未知的前提下,利用信号处理技术对接收的电磁波信号进行参数估计和解调,在军事和民用领域都有着广泛的用途。本文针对MIMO-OFDM的非合作接收问题,研究了发射天线数目、空时编码模式以及子载波数估计方法,主要研究成果如下:(1)针对MIMO系统发射天线数目估计难的问题,提出一种基于CNN的发射天线数目识别方法。该方法采用单天线接收MIMO信号,将采集的不同天线I&Q数据经过功率归
高阻隔硫化橡胶由于其固有的优异性能,被认为是一种至关重要的化学防护材料,但仅仅是避免危险化学品和人体直接接触并非解决穿戴者人身健康问题的最优解。因此,对于进一步增强其溶剂阻隔性能和溶剂敏感特性仍是值得讨论的议题。本工作利用环保、无毒的多巴胺(DA)还原氧化石墨烯(GO),即聚多巴胺改性氧化石墨烯(PDA-r GO)作为补强填料,分别以氟橡胶(FKM)和溴化丁基橡胶(BIIR)为基体,通过溶液共混法
金属表面瑕疵的自动化检测是工业质量控制领域的研究热点,工业制造商对金属表面质量的高标准对计算机视觉检测系统及其算法的性能提出了更高的要求。由于金属表面瑕疵类别的复杂性和多样性,以及纹理区域、噪声灰尘等干扰的存在,检测划痕、裂纹和凹痕等缺陷对传统的计算机视觉方法来说是一项挑战。传统图像处理需要排除外界干扰对瑕疵进行统计分析,以定性或定量的方式表示特定瑕疵,在应用以及性能上具有一定的局限性。而深度学习
基于波达方向(DOA,direction of arrival)估计目标定位技术是阵列信号处理研究的重要内容之一,在雷达领域有着广泛的应用。传统的相控阵雷达波束指向在所有距离内都固定在一个角度,存在固有距离模糊性缺点,无法直接从其波束形成输出中估计目标的距离信息。频控阵(FDA,frequency diverse array)雷达与传统相控阵雷达不同,其波束方向图是角度-距离相关的,因此在雷达目标
目前无线体域网(WBAN)应用主要集中在医疗监测、老人监护和军事等方面,而无线体域网研究的基础是人体的电磁特征。故此,本文针对5.8GHz这一ISM频段的胳膊电磁特征展开研究,研究其传输电磁波时的通道特征,具体研究如下:1.真实胳膊电磁模型研究。首先利用3D成像扫描仪对特定个人的胳膊进行扫描,建立起具有真实外形的胳膊模型;然后,根据中国人群的医学生理特点和人体器官各相关的电磁参量,建立具有层状结构
下视线阵三维合成孔径雷达(Synthetic Aperture Radar,SAR)利用阵列天线与目标的相对运动合成二维虚拟面阵,结合脉冲压缩技术,获得空间目标的三维分辨能力。然而,这种基于宽带发射信号的SAR系统硬件设计复杂且接收信号不易分离。通过将频率分集阵列(Frequency Diverse Array,FDA)应用到三维SAR模型中,各阵元只需发射单频信号便可获得宽带观测性能,大大降低系
近些年,中国的对外承包业务展现出蓬勃发展的态势,使建筑业日益成为支撑经济发展的重要产业,既得益于“一带一路”战略的深入实施又得益于新型经济的快速发展。在“十四五”规划中提出以拓展基础设施建设为目标,加快完善公共交通基础设施建设,桥梁作为交通运输工程基础设施的重要组成部分,在规模和数量均呈现上升的趋势,且建造时受诸多不确定性风险因素影响较严重,如建设周期长、规模大、跨度大、受力复杂、所需资金多、施工
随着科技不断进步,在许多科学和工业领域产生了大量的数据。这些数据由多种特征表示,形成了多视图数据。因此处理这类数据的多视图学习逐渐成为深度学习、人工智能、神经网络、大数据等领域的研究热点。多视图聚类是多视图学习领域的研究方向之一,经过多年的研究和发展,虽然已经取得许多成就并且应用到实际生活中,但是也存在一些问题。例如,多视图聚类算法需要通过多视图数据预先构造出一个关系图,多视图数据结构复杂,存在不
低照度环境导致图像成像质量下降,图像噪声较多、对比度较低,用于图像分类、目标识别、图像理解分析、超分辨率重建等图像处理时效果不理想。因此需要对该类图像进行照度增强,即提高图像整体和局部的对比度、去噪,适当调整图像背景和边缘。本文利用变分自编码器作为关键技术针对低照度图像增强进行研究,从不同角度分析低照度图像特点,采用多种技术和手段完善低照度图像的图像结构,提高低照度图像的对比度、丰富细节并降低噪声