面向卫星视频压缩的多模态参考帧构建方法

来源 :武汉大学 | 被引量 : 0次 | 上传用户:xxyxwxx
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为提供高速度、高可靠性、高覆盖度的实时卫星数据服务,针对卫星视频特点,研究高效的卫星视频压缩方法势在必行。卫星周期性拍摄的同区域视频中大部分是地理背景,且背景基本不变,导致了大量背景冗余,通过提取该区域背景共性信息,构建背景模型可有效去除背景冗余,提升编码效率。然由于受到卫星拍摄器件等物理因素以及光照变化等环境因素影响,背景表观差异较大。因此,为提升背景模型对不同时刻拍摄视频的适用性且进一步提升预测效率,本文将背景表观差异定义为模态差异,研究同区域下模态转换方法,生成多模态参考帧。不同于自然视频,同区域下的卫星视频具有以下特点:由于地貌变换缓慢,视频中背景结构一致;由于视频的拍摄时间跨度大、拍摄环境复杂且变化剧烈,视频间模态差异大。现有图像转换模型在针对卫星视频的模态转换时存在以下问题:缺乏结构一致性约束,转换图片与原图片的结构不一致,导致参考效率低;无法稳定分离图像的结构和模态,转换图片与目标图片的模态差异较大,难以作为背景参考帧用于压缩。针对以上问题,本文的主要贡献如下:1.提出了基于结构一致性约束的模态转换模型,针对同区域下结构一致性,借用多风格图像转换模型分离内容和风格的思想,构建内容结构编码器和模态编码器分别提取原图的结构特征和目标图像的模态特征,采用AdaIN规范化层和仿射变换在解码器中融合结构特征和模态特征,生成目标模态下的转换图像,在设计总体优化函数时添加转换图片和原图片的结构一致性约束函数。在自建的模态数据集上进行测试,大部分转换图片与原图片结构一致且具备目标图片的模态,但是一些复杂模态的转换图片存在轮廓细节模糊和局部颜色差异。经卫星实验验证,在同等视频质量下与HEVC相比,平均压缩码率降低了8.1825%。2.提出了基于本征图像分解的模态转换模型,针对模态和结构分离不稳定的问题,借助本征图像分解理论中对同场景图像表观差异的理解,探究发现本征图像分解后的反射率本征图和光照本征图可更清楚的表达模态。因此,在基于结构一致性约束的模态转换模型上,采用高分解精度、高泛化性的本征图像分解模型[80],获取目标图像和转换图像的反射率本征图和光照本征图,在总体优化函数中添加目标图像与转换图像的反射率本征图和光照本征图的一致性约束函数。经实验验证,在复杂模态下的转换图的模态与目标图一致。在卫星压缩实验中与HEVC相比,同等视频质量下平均压缩码率降低了10.39%。
其他文献
广西投资集团有限公司是广西壮族自治区人民政府直属的国有独资企业,是广西壮族自治区政府所属最大的国有投融资主体和国有资产经营实体,参与自治区重点项目建设。广西投资集团金融控股有限公司是广西投资集团有限公司全资子公司,是广投集团产业和融资相结合的重要平台,肩负着管理集团金融资产的重要使命。作为一家类金融企业,其下属的租赁公司、担保公司业务不断扩张,日常经营周转资金需求和未来项目投资资金需求量越来越大。
正定四合院是北方传统民居的建筑形式,四合院的规制布局有着严格的礼秩规范,通过对正定四合院纹案装饰的研究,探究其图案布局、内容顺序、尺度空间等方面的特征。以《礼记》
预制混凝土剪力墙结构体系是装配式建筑最主要的结构型式之一,在高层住宅、旅馆等建筑中应用广泛。设计中,为满足混凝土剪力墙结构延性或者结构受力要求,会在较长的剪力墙上
锚固支护具有成本低、效率高、性能好等诸多优点,在工程中得到了广泛应用。良好的锚杆支护效果是工程安全的保障,但是随着锚杆在工程中发挥作用,难免会出现各种各样的缺陷。
番茄是我国最重要的蔬菜品种之一,近年来,国内外学者就土壤水分状况对番茄植株的影响研究逐渐增多。灌溉水是温室蔬菜所需水分的主要来源,制定合理的灌水方案与精确的技术参
高校机房排课是实践教学中十分重要的一个环节,它涉及面广、约束条件多。科学合理地编排课程表,对保障稳定的实训教学秩序以及提高实践教学质量具有十分重要的意义。以湖南高
经济大转型背景下,创业活动林立,新企业创新行为成为研究热点。创新产品决定了企业的生存和发展,成为企业关注的焦点。面对成熟企业强大的实力、丰富的经验及稳定的路径,新企
背景特发性炎症性肌病(Idiopathic inflammatory myopathy,IIM)是一组异质性的系统性自身免疫性风湿病,其特征为慢性肌无力、肌肉疲劳以及骨骼肌单个核细胞的浸润。这种炎症
近几年来,有机-无机杂化钙钛矿材料作为一个备受关注的光电材料,已经在许多领域展现出了其优异的性能。比如钙钛矿单节太阳能电池效率已经超过24%,接近最好的单晶硅太阳能电
微震监测技术指的是当岩体发生破裂时,利用其产生的微震信号来研究岩体破裂的情况,评价岩体工程安全稳定性的一种实时监测技术。该技术在各类岩土工程中得到了广泛应用。其中