基于生成对抗网络的人脸图像修复的研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:fuqiang1986
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像修复是一种常见的图像编辑操作,其目的是用新生成的内容填充图像中的缺失或遮蔽的区域。新生成的内容既可以与原图像一样精确,也可以简单地适配在周围的像素中,使得修复后的图像从视觉上看起来真实。其中人脸图像修复是一项非常具有挑战性的任务,特别是修复大面积损坏或者缺失人脸的重要部分的图像,比如眼睛、鼻子、嘴巴等。近几年,基于生成对抗网络的图像修复算法表现卓越,它能够生成出全新的、之前从未出现的像素,而且生成的图像清晰逼真。除此之外,对于修复损坏严重的图像或者任意形状破损区域的图像,都有很好的表现。对此,本文设计了一种新的基于生成对抗网络的人脸图像修复算法,旨在解决修复大面积破损区域的人脸图像或者丢失人脸重要部分的图像。本文基于深度卷积生成对抗网络框架,通过改进其损失函数和网络结构,来提升修复图像的效果。本文通过引入Wasserstein距离和Lipschitz连续性限制手法——梯度惩罚,来改进损失函数,这样不仅提升了模型训练的稳定性,也解决了网络框架训练时出现的模式崩溃问题。同时去掉了判别器最后的Softmax层,降低Softmax的归一化带来的梯度伤害。除此之外,在判别器中,采用层标准化(Layer Normalization)来代替批标准化(Batch Normalization),避免在训练时引入同个批量(batch)中不同样本的相互依赖关系。为了能够获取更加精确的高级表征,生成出轮廓更加清晰的内容,本文也在全局判别器的基础上,增加了一个局部判别器。生成图像后,将新生成的图像和破损的图像融合,为了使融合的边界看起来不突兀,整体图像看起来更加真实,本文也引用了另外一种效果更好的PIE泊松融合算法。本文使用CelebA人脸数据集作为训练集,对网络框架进行训练,LFW人脸数据集作为测试集,经过掩码处理后成为损坏的图像,输入到训练好的模型中进行图像修复。在进行对比实验时,分别从四个不同破损区域进行定性和定量地分析。多组实验结果表明无论是定性还是定量的结果,本文改进后的图像修复算法能够有效的提升修复图像的质量。改进的模型在中间破损区域、左边破损区域、左眼破损区域、嘴巴破损区域的PSNR值分别达到了24.3 dB、23.3dB、28.7 dB、25.6 dB;SSIM值分别达到了0.781、0.761、0.952、0.828。
其他文献
目的研究晚期早产儿纠正胎龄12~30个月时社交情绪特点,发现发育异常,对异常病例进一步监测和干预。方法选择105例晚期早产儿作为观察组,选择105例足月儿健康儿童作为对照组。采用
高中数学教学任务重,学习任务大,往往给学生和教师造成了一定的压力和负担.随着新课标改革的不断实施和推进,高中数学生成性课堂的构建也被不断地提出,本文就针对高中数学生
基于层次分析法的大遗址价值分析通过历史价值、科学价值、艺术价值、衍生价值四个方面建立了我国大遗址价值评价体系,然后运用层次分析法(AHP),构造了影响因子判断矩阵,对准
目的观察针刺治疗胃、结肠癌术后顽固性呃逆的疗效。方法针刺取穴足三里、膻中、内关穴。结果总有效率100%。提示针刺足三里、膻中、内关穴,可使兴奋的膈神经受到抑制,膈肌痉
结合几个实例详细介绍了利用JavaScript语言实现网页的特效处理.使设计的网页更有特色。更具交互功能。
最近,我们通过审理一起煤矿工伤事故赔偿案件,发现煤炭企业在与招用的农民合同制工人签订劳动合同后,又与第三人签订合同,将工伤事故处理权转移给第三人包干负责的新情况。
的热的间空点物苯分腔之化二子、一学甲高笼。性双度同配质酰的时合和腙对,物生、多称双是物酰性水指化和腙杨具学稳配醛有功定体缩多能的及间金等化其苯属。学金本二中结属论甲心构配文双的而合将酰笼成物二腙状为由者、配三近于结位水二其合化杨十奇在合醛年特一物缩来的起,三由配结,合嗪于位构成三其化而了酰内学具腙部研有二拥究许丙和有的多酮二良主特酸丙缩酮好要殊6酸缩间苯二酚二甲双酰腙等4种多酰腙,除双水杨醛缩间苯
10月15日,安徽省定远县完成了该县'十三五'综合防灾减灾规划中期评估工作,并形成评估报告。2018年是实施规划承上启下的一年,根据省、市的部署要求,安徽省定远县高度
以ArcGIS为数据处理平台,结合土地变更调查中的数据处理工作,分析ArcToolBox中工具存在的不足,以Merge和Split工具为例。探讨面向任务时基于VBA的ArcObjects二次开发的基本原理
新时代下,少数民族预科计算机基础课程必须采用新的教学方法和手段。通过精讲多练、案例教学与课程思政融合、比较教学、教学微视频、微信推送等方法激发学生的学习积极性,在