基于深度学习的自然场景文本擦除

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:liuxing20090113
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
自然场景文本中包含各种隐私信息,例如家庭住址、电话号码等。隐藏自然场景图像中的重要文本信息,将可以有效地防止我们处于隐私泄露的高风险之中。因此,场景文本擦除成为了一个迫在眉睫的研究课题。场景文本擦除的目标是擦除图像中的文本区域,并基于文本周围的背景进行合理填充,同时保留非文本区域,使之看起来尽可能接近一张真实的非文本图像。其主要挑战包括:1)准确地感知文本笔画级别的位置;2)采用视觉上合理的非文本图像块替换文本区域。已有的场景文本擦除算法还不能很好地解决笔画级别的文本检测问题,同时对生成图像的品质研究较少。针对上述的挑战以及已有算法存在的不足,本文提出了一种新的场景文本擦除算法。具体来说,本文的主要工作内容和贡献如下:1.针对目前还不存在公开的场景文本擦除数据集的问题,本文提出并构建了一个合成场景文本擦除数据集,以及一个基于场景文本检测数据集标注的真实场景文本擦除数据集,用于文本擦除的研究。2.与现有基于图像块的文本擦除算法不同,本文首次提出了一种基于整图端到端的场景文本擦除算法。本文提出的算法,在不需要任何先验知识的情况下,能够很好的擦除各种场景文本,并生成接近真实的非文本图像。该方法基于条件生成对抗网络,由三个精心设计的模块组成:1)侧向连接模块;2)重组损失函数模块;3)局部敏感判别器模块。其中,侧向连接模块帮助生成器网络捕捉更多的细节纹理信息;重组损失函数模块指导生成器网络生成一张尽可能真实的非文本图像;局部敏感的判别器网络用来保证文本擦除区域的局部一致性。3.基于所构建的合成场景文本擦除数据集以及ICDAR 2013测试集,本文进行了严格的定性和定量消融实验。实验结果表明,本文方法的各个模块都能帮助算法获取更好的性能。在所测试的指标中,本文方法均可以显著超过现有场景文本擦除方法。此外,基于SMBnet数据集进行的定性实验进一步表明,本文的方法还可以很好地泛化到通用目标擦除任务中(例如行人擦除)。
其他文献
跳频通信因为良好的抗干扰性和低拦截概率,在保密通信领域,特别是军事通信领域得到了广泛的应用。在通信电子对抗环境中,将跳频技术运用到短波通信中不仅可以有效地克服多径干扰,还对邻近干扰和人为对抗式干扰有着良好的抑制作用,因此已经成为提高通信抗干扰性的最有效措施。对于通信对抗双方而言,如何快速有效地获取对方的跳频信息关系着战争局势的走向,对于最终取得战争的胜利有着至关重要的作用。跳频通信中的跳频信号是一
随着云计算技术的飞速发展与普及,云环境中的应用越来越复杂多样。如何减轻虚拟化环境中应用之间的资源竞争成为研究热点。Docker的出现推动了容器技术的发展,相比于虚拟机,容器这种操作系统级虚拟化技术具有更低的性能开销,然而共享内核却导致容器具有更差的隔离性。具体地,传统的中心化文件系统存在着大量资源(如保护全局数据结构的锁)竞争,这使得容器中的文件系统操作在并发访问这些数据结构时会相互影响。同时,容
生物质能是一种储量丰富的可再生能源,纤维素是生物质的重要组分,其热解机理的研究有利于提高生物油的质量。在纤维素热解的研究中,常需要对初生态产物进行分析,然而传统的热解设备在热解过程中难以避免二次反应,难以得到初生态产物。金属网反应器是目前二次反应最小的反应器,经过多年的发展和改进后,在减小二次反应的性能上有了多次的提升。本文使用ANSYS CFX建立了金属网反应器中焦油收集管内的流动模型,对三种常
蛋白质是构成机体组织、器官的重要组成部分,在真核细胞的各个区室内承载着多种功能。蛋白质的功能取决于它所在的隔室或细胞器,因为它为其功能提供了生理环境。亚细胞定位是
近年来,随着工业自动化的发展,传统现场总线由于其带宽及吞吐量等限制,已经无法满足现代工业的要求。实时以太网以其成熟的特性已成为自动化领域中不可或缺的技术。EtherCAT(
近年来,人们对于多目标优化问题的研究不断深入,其原因在于多目标优化问题广泛存在于如潜艇推进系统优化,航空发动机健康管理,汽车发动机校准,水流分配等工程、科学领域。随
市场格局的变化在促进金融业发展的同时,也为期货市场进一步发挥其功能创造了有利的条件。当今美国期货市场的发展己经趋于完善,因此对国外期货交易经验的学习就显得尤为重要
目的:分别与常规多参数监护仪及有创采血指标同步监测对比分析探讨无创血流动力学监测仪(Bioz.com)用于经尿道前列腺切除术(TURP)围术期监测的意义及无创方法预防电切综合征(TURS)的应用价值。方法:选择我院择期行TURP的患者30例,美国麻醉医师协会(ASA)分级ⅠⅢ级,入室后连接常规监护仪及Bioz.com,行腰硬联合阻滞,选择入室后(T_0),麻醉后平卧位时(T_1),灌洗液量达到30
近年来,随着人们物质生活水平的提高,人们对于自身健康管理的需求越来越大。心血管疾病,呼吸系统疾病,恶性肿瘤,糖尿病等慢性疾病已经成为导致我国居民死亡的主要原因。其中,
在电力系统中,合理地配置无功补偿装置,对电力系统的安全稳定和经济运行至关重要。为防止架空线路遭受破坏等引起事故以及满足城市建设的需求,进一步美化城市环境、优化城市