基于深度神经网络的人脸引导填充研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:yocar
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,深度学习技术的飞速发展与广泛利用使得其在计算机视觉领域取得了极大的成功。基于卷积神经网络的图像填充复原技术是当前图像视觉领域的一个热点话题并取得了许多优异成果。作为研究热点之一,图像填充复原具有广泛的应用场景,例如修复缺失的照片、去除头戴设备如眼镜以及去除风景照片中的杂物等。现有的人脸图像填充算法由于人脸纹理复杂等原因,在人脸清晰度和真实性上仍有欠缺。针对上述问题,以恢复出更为真实、清晰的人脸五官为目标,本文提出了一种基于引导图的人脸填充算法。为更有效的利用引导图,本文首先提出大面积遮挡的人脸关键点检测算法。此关键点检测算法使用多层卷积神经网络,分别提取引导图和遮挡人脸图像的特征信息,并使用空间形变网络,将引导图的特征作类仿射变换。实验结果表明,引导图的利用能为遮挡人脸关键点检测提供有力的引导信息,算法能够准确定位具有大面积遮挡的人脸图像的68个关键点位置。以遮挡人脸的关键点为目标坐标,以清晰引导图的关键点为源坐标,利用移动最小二乘平移算法将引导图形变至与遮挡人脸具有相同姿态的形变引导图。实验结果显示,形变后的引导图由于与遮挡图在人脸部位具有相似的姿态,能为网络提供更具有参考意义的引导信息,使得填充的人物更真实,该人物的五官特征得以保持。除此之外,本文在生成对抗网络的基础上,提出了全新的基于全局和多个局部细节的判别网络。多个局部判别网络的提出使得算法更加关注人脸五官的细节信息。我们在CASIA-Web Face数据集上的验证结果表明,多个判别网络的使用能填充复原出更为清晰、自然的效果。同时与之前的研究对比表明,我们的提出的模型在正面的人脸填充上具有很可观的清晰度与人物相似度,在人物侧脸这种比较大的难度下,也能取得有意义的填充效果。
其他文献
随着爆破技术在工程建设领域的不断推广和应用,爆破震动对周围桥梁结构产生的不利影响日益受到重视。上承式拱桥具有跨越能力强、经济效益好,适应性强的优点,是一种在我国桥
温室效应导致全球气候变暖持续加剧。二氧化碳(CO2)作为温室气体的主要成分,减少CO2排放已然成为缓解气候变暖的必要手段。咸水层CO2地质封存(CO2Sequestration in Saline Aquif
大多数自由曲面形状复杂、曲率变化大,有些曲面零件需要长期在复杂恶劣的环境中工作,所以对其加工质量有很高的要求。砂带磨抛作为自由曲面加工方式之一,可以提高加工质量,如
华硕近日宣布,其基于英特尔H87和B85芯片组主板的UEFI BIOS,最新版本为第4代英特尔酷睿处理器,开启了前所未有的超频功能。而在此次更新之前,仅基于Intel Z87芯片组的主板才具有对全新Haswell K系列处理器超频的功能。但是现在PC发烧友在刷新最新版BIOS后,就可以使用华硕H87M-PRO和B85-PRO等华硕8系列主板,尽享Haswell K系列处理器的强大超频能力。此次BI
含氧杂环化合物广泛存在于许多复杂天然产物分子和药物分子中,具有良好的生物活性和药理活性,在医药,材料以及探针等领域有着广泛的应用。因此发展绿色、高效、精准合成含氧
外伤性截瘫是由于外力造成脊髓横断性损伤而引起损伤平面以下的感觉,运动功能障碍,是一种导致终身残废的疾病。其本身病死率不高.唯多死于并发症。周此,做好截瘫病人的护理.防止和
本文从医院信息系统的核心数据库出发,阐述了基于基于企业缓存协议(ECP)的分布技术在集团化医院数据中心的应用。