基于几何约束和语义融合的换脸算法研究

来源 :厦门大学 | 被引量 : 0次 | 上传用户:chen0507
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
换脸指生成既带有源图身份特征又包含模板图属性特征图片的任务,换脸在隐私保护、影视娱乐、游戏渲染和其他泛娱乐产品中有很大的应用价值。在过去,换脸依赖于手动操作,需要耗费大量的时间和人力。随着卷积神经网络的发展,出现了基于三维重建的换脸方法和基于生成对抗的换脸方法,换脸基本实现了自动化。但目前的换脸方法依然还有两个问题还没有被解决:(1)如何让换脸结果能准确地保持源图的脸型。(2)如何提升换脸结果的真实感。本文提出了一个基于几何约束和语义融合的换脸算法,针对换脸结果的脸型和真实感进行了优化。本文开展的主要工作如下:(1)提出对脸型敏感的身份特征抽取模块,利用三维人脸重建模型优化换脸结果的脸型变化。该模块将三维人脸重建技术与人脸识别技术结合,一方面可以获得包含丰富脸型信息的身份特征,另一方面还能通过构造换脸后的三维人脸模型来获得几何上的约束,使得脸型变化更加准确。(2)提出面部语义融合模块,利用面部语义分割的弱监督来提升换脸结果的真实感。在特征层面,该模块能优化编码器与解码器的特征融合,在提升换脸结果清晰度的同时不会降低身份相似度;在图像层面,该模块能自适应地学习出人脸蒙版,使得换脸结果即使在脸型变化的情况下还能很好地保持背景和遮挡的真实感。本文与其他最先进的换脸方法做了定性与定量对比,结果表明本文方法在脸型维持与真实感上都做得更好。
其他文献
近年来预付式消费在各行各业都十分盛行,但损害消费者权益的事件却时有发生,这引发了人们的探讨和质疑。从近几年的案件来看,预付款的资金安全成为预付式消费纠纷的核心问题。尽管目前我国制定了一些法规规章,但还没有从根本上解决这一难题。借鉴我国台湾地区的预付款信托模式,将信托引入到预付式消费领域,构建预付式消费的信托保障机制,从法律规范、制度设计、不同业务模式等方面建立预付款信托制度,实现保障消费者权益和刺
期刊
神经架构搜索是针对任务需求自动搜索最佳的神经网络架构的过程。设计神经网络需要专家花费大量的精力和时间,神经架构搜索的自动化流程可以有效解决此问题。尽管目前神经架构搜索取得了出色的性能,但其搜索过程仍然非常耗时。本文的贡献为提出了三种高效的神经架构搜索方法。第一,本文提出了一种基于分布估计的高效神经架构搜索方法,用于解决架构搜索耗时的问题,简称为EDNAS。分布估计算法是基于统计学习和种群进化策略的
学位
玄武岩纤维凭借其耐腐蚀、高韧性等优点,被广泛应用于提升混凝土材料性能中,利用玄武岩纤维增强再生混凝土性能也成为了一个备受关注的研究热点。然而纤维的改善效果受再生粗骨料品质、生产工艺的影响较大,因此,结合粗骨料强化和生产工艺提升来研究玄武岩纤维对再生混凝土力学性能和耐久性能的影响具有重要的理论指导价值和现实意义。本文的主要内容和结论如下:首先,采用自主研发的研磨机对简单破碎的再生粗骨料进行包裹砂浆去
学位
主要分析无损检测技术在道路桥梁试验检测中的应用效果,探究无损检测技术的内涵与重要性,重点介绍射线探伤无损检测技术、GPR无损检测技术等技术的应用要点,并以此指出在道路桥梁试验检测中的应用。
期刊
渡槽作为一种常用输水建筑物被广泛应用于跨区域输引水工程,由于“头重脚轻”的工程构造,极易发生地震损伤甚至倒塌破坏,危及周边区域的人民生命与财产安全,而且双槽渡槽结构在强震作用下的非线性响应往往极其复杂。鉴于此,本文以双洎河渡槽工程为例,从非线性和随机性两个基本点出发开展大型钢筋混凝土双槽渡槽非线性动力响应分析及整体抗震可靠性研究,为大型双槽渡槽结构基于性能的抗震设计提供理论分析依据。具体研究内容如
学位
高中生处于身心发展的关键期,外貌评论影响其自我意识的提升。当高中生接收到基于外貌的反馈后,会不断将其内在化,从而影响体像满意度的提高和自恋人格的形成。同时高水平自恋者更倾向于通过自拍在社交网站中进行积极自我呈现。基于前人研究,采用外貌评论、自拍行为、自恋人格与体像满意度量表对河南省某地1824名高中生进行施测,运用SPSS26.0和Process程序对收集的数据进行处理,探究外貌评论对高中生自拍行
学位
胰腺在葡萄糖代谢和消化中发挥重要作用。然而,胰腺十分容易受到糖尿病、胰腺炎以及胰腺癌的侵害。尤其是胰腺癌,作为一种常见的恶性肿瘤,其发病率在世界范围内逐年上升。胰腺癌的早期确诊率十分低,这是胰腺癌死亡率高的主要原因。胰腺自动分割作为近年来出现的胰腺癌诊断和预后技术,对于辅助医生的诊断、治疗和手术具有重要意义。腹部图像的器官自动分割是医学图像处理中的一个重要研究课题,它包括从计算机断层扫描(Comp
学位
医学影像在现代临床医学中具有不可替代的重要地位。CT成像作为医学影像技术之一,在临床疾病诊断中广泛使用。由于放射科医生工作繁重且CT图像表现复杂,导致医生在阅片过程中人工分析主观性偏高且可能出现漏诊误诊问题。因此研究算法实现从CT图像中自动检测和分割病变区域有重要的临床意义和科研价值。近年来,随着深度学习的高速发展,深度学习与医学影像的结合日益紧密。目前已有许多研究提出基于深度学习的医学影像检测和
学位
采用了一种根据并网点电压跌落深度使逆变器发出一定无功功率,将基于二阶广义积分器(SOGI)的锁频环(FLL)和锁相环(PLL)相结合锁定相位,最终实现低电压穿越的方法,该方法利用SOGI-FLL提取频率信息实现锁频功能,为坐标变换提供相角信息,SOGI的陷波器特性滤除二次谐波,控制正负序电流内环的电流大小,进而控制输出有功和无功的大小,实现低电压穿越。仿真结果表明,该控制策略可以很好地滤除二次谐波
期刊
多觉联动音乐教学法是一种可以调动多种感官参与,发挥学生的视觉、听觉、唱觉、触觉、动觉等之联动效应,运用听、唱、动、说、奏、编、演、舞、创等相互交融的方式去感受和体验审美对象,并加以创造表现的教学方法,在初中音乐课进行实践具有非常重要的价值。本文以义务教育《音乐课程标准》(2011年版)为依据,以初中音乐教学为切入点,以郑州市M中学七年级、八年级学生为研究对象,结合初中音乐课程及研究学校特点,进行多
学位