【摘 要】
:
近年来,随着人工智能技术逐步渗透到国防、教育、金融等各种各样场景,人工智能技术在为人们提供便利的同时也暴露出大量的隐私安全问题。特别是针对深度学习的反转攻击变得越来越频繁。反转攻击是攻击者利用受害者模型能够“记住”训练数据特征的特性,通过使用非法手段,获取受害者模型训练数据信息的攻击手段。如基于自动编码器的反转攻击模型。在模型训练过程中,它假定攻击者能够访问数据本身,并利用均方误差方式窃取训练数据
论文部分内容阅读
近年来,随着人工智能技术逐步渗透到国防、教育、金融等各种各样场景,人工智能技术在为人们提供便利的同时也暴露出大量的隐私安全问题。特别是针对深度学习的反转攻击变得越来越频繁。反转攻击是攻击者利用受害者模型能够“记住”训练数据特征的特性,通过使用非法手段,获取受害者模型训练数据信息的攻击手段。如基于自动编码器的反转攻击模型。在模型训练过程中,它假定攻击者能够访问数据本身,并利用均方误差方式窃取训练数据。但,能够接触到训练数据的场景及其有限,更多的情况是,只能访问一个黑盒神经网络模型,也就是只能对它进行输入,并得到输出。针对上述问题,提出了一种神经网络循环反转攻击方法,意在寻找深度学习模型的新威胁。主要工作如下:(1).针对无法获取训练集输入的情况,首先把噪声输入到受害者模型中,再把受害者模型的输出,输入到生成网络,然后再把生成网络重建的图像,输入到受害者中,这就构成了循环反转攻击的基础模型。(2).针对只能获取黑盒模型的情况,需要利用知识蒸馏,从黑盒模型中萃取出黑盒内部的信息,重建受害者模型,再用循环反转攻击模型进行反转攻击。实验评估过程中,循环反转攻击在反转图像过程中产生的损失值比反转攻击模型(Model Inversion Attacks,MIA)的损失值下降得更快,循环反转攻击生成的图像比MIA生成的图像,更容易被受害者模型判定为指定标签。针对上述深度学习攻击手段,还提出了一种防御模型反转攻击的隐私保护方法,主要工作如下:(1).对于目前的差分隐私方式,造成模型可用性变差的情况,提出一种混合扰动的方式,把模型参数拆分为噪声权重和网络权重。这样的切分保证了模型可用性。(2).上述保护方法,只需要使深度学习网络最后一层全连接层满足即可。网络最后一层满足差分隐私,能在数据集和真实标签间嵌入一个满足差分隐私过程的噪声,则可防御上述反转攻击。并用贝叶斯神经网络实现最后一层的全连接层。贝叶斯神经网络带有任意不确定性,能够有效对抗反转攻击。(3).把贝叶斯神经网络全连接层分为噪声权重和网络权重后,可以依据雷尼差分隐私的推导过程,重新推导差分隐私全连接层的前向传播隐私开销。实验评估过程中,在相同的反向传播的隐私开销下,混合扰动的残差网络准确率比梯度扰动的残差网络准确率和目标扰动的残差网络准确率分别高出49%到89%和0%到49%。前向传播的隐私开销也随着噪声标准差的增加而降低。针对混合扰动差分隐私保护的受害者模型,反转攻击效果会随着噪声标准差的增加而变差。
其他文献
在绿色、低碳、节能的时代背景下,“绿色建筑”热潮正席卷全球,绿色建筑评价体系作为规范和引导绿色建筑的重要举措,近年来发展迅速。当前,我国在《绿色建筑评价标准》的基础上逐步探索了不同类型的建筑评价标准,如绿色工业建筑、绿色学校建筑、绿色医院建筑评价标准。当前,我国已步入老龄化社会,随着人口老龄化程度不断加深,我国已初步形成居家为基础、社区为依托、机构为补充的养老服务体系。机构养老建筑作为养老事业的重
随着深度学习技术的快速发展,情感识别受到广泛关注,在人机交互、在线教育、医疗健康、安全驾驶和智慧交通等领域得到广泛应用。其中表情作为情感最基本的外在表现,在人类与外界进行交流时,表情传达了约55%的情感信息。然而表情容易受主观意识影响,而被遮盖或隐藏。相比之下,生理信号受神经系统等控制,不为意识所影响,能够真实客观反映情感状态。然而生理信号采集过程中需要佩戴设备,在一定程度上会对诱发的情感产生干扰
随着科技的进步和技术不断的更新迭代,互联网中也充斥着种类繁多、数目巨大的数据,如何分析处理网络中杂乱无章的数据并获取相关有价值的信息是当今的重要研究内容。近年来,异常检测已经成为许多学者重点关注的一个研究问题,在异常检测领域中,针对不平衡数据的识别检测是当中的一个研究热点。不平衡数据指的是在异常检测中,数据集之间的样本比例相差大,正类样本数量远超负类样本的数量。如果面对不平衡数据集不采取相关处理措
抗生素的滥用给环境和生命体带来的危害已深受人们关注,当环境中残存的抗生素进入水消毒系统与含氯消毒剂相遇会发生一系列化学反应,生成有害或有潜在毒性的消毒副产物(disinfection by-products,DBPs),DBPs又通过水循环系统进入到生态系统中,对环境和生命造成危害。细胞色素P450酶作为一种氧化酶,在生物体内外源性化学物质的代谢中起着关键的作用。本文以红霉素和土霉素为目标抗生素,
在工业工厂中,近年来人工智能技术逐渐被应用在自动化设备的研发中,具有自主识别能力的智能化焊接加工设备也愈来愈多,同时也出现了多种辅助焊机进行跟踪定位的方法。其中,运用以机器视觉为基础,激光结构光辅助对焊接工件位置信息进行识别的方法,由于其适用性广,光波抗干扰能力强和成本较低等优势,被广泛运用在智能焊接加工设备的研发当中。但在实际加工任务中,通过简单的检测方法或图像处理办法,焊枪在跟踪定位的过程中很
在无线传感器网络中,覆盖控制的研究可以提高资源利用率,延长网络周期,提高感知服务质量,增强直接、有效、真实地访问数据信息的能力。无线传感器网络应用于多种场景下的监控和收集数据,这些过程不可避免地会涉及到路由、位置和覆盖等问题。由于传感器节点的部署不会长时间随机变动位置,则通过异常检测技术对传感器节点进行监测,以此来判断地下水管道的安全状况,及时对地下水管道进行维修和节省劳动成本。本文通过在地下水管
如何快速、准确地获取土壤成分信息的技术,是开展测土配方、精准施肥以及研究植物生长周期的基础,对有效统计土地资源、精细化林业生产都具有重要的作用。高光谱分析是一种通过解析物质光谱特征数据、挖掘数据深层信息,进而对物品分类或对物质的化学组成成分定量分析的技术,高光谱的优点主要体现为成本低廉、快速测量、远距离无接触预测等。在快速获取土壤成分信息的过程中使用高光谱分析技术可以降低信息获取成本,对测土配方精
<正>慢性炎性脱髓鞘性多发性神经根神经病(chronic inflammatory demyelinating polyradiculoneuropathy,CIDP)是一类常见的获得性免疫介导的周围神经病,其临床表现多样,治疗反应不一[1]。血清抗神经束蛋白155免疫球蛋白(neurofasicin 155,NF155 IgG4)抗体即是其中之一,NF155抗体相关的CIDP约占7%,抗体以Ig
随着5G通讯技术和物联网技术的飞跃式进步,定位导航技术在导航、医疗等领域中都有着至关重要的作用,在生活中通过手机等智能便携设备来获取人们的位置信息,已然成为了当代人生活的日常,室内定位也逐渐成为了人们的硬性需求。而机器学习所具备的高纬度建模能力,能够解决很多传统模型在复杂的室内场景下难以处理的问题。因此本文基于机器学习所具备的优势,重点研究了K近邻(K nearest neighborhood,K
随着电力电子技术发展水平的快速提高,电机调速系统在军工业、农业乃至日常生活中都得到了广泛的应用,永磁同步电机(Permanent Magnet Synchronous Motor,PMSM)是一种交流电源设备,因其特殊的内部构造有体积小、质量轻、使用寿命长等特点,并且PMSM调速系统具有响应速度快、准确、调速范围宽等优点,这让PMSM在精密数控机床、智能机器人、航天航空等领域展现出其调速系统的优势