【摘 要】
:
三维视频因其能够提供更加真实和自然的视觉体验,一直是视频处理和通信领域追求的目标。自由视点视频(Free Viewpoint Video,FVV)是三维视频的最终形态,其最大的特点在于能够根据观看者的视点、视角改变显示对应的视频图像。面对数据量庞大、不可靠网络环境下深度图像失真严重、编码后视点合成质量不高等问题,传统的视频图像压缩技术已经无法满足系统的需求。压缩感知理论的出现为系统处理提供了新的思
论文部分内容阅读
三维视频因其能够提供更加真实和自然的视觉体验,一直是视频处理和通信领域追求的目标。自由视点视频(Free Viewpoint Video,FVV)是三维视频的最终形态,其最大的特点在于能够根据观看者的视点、视角改变显示对应的视频图像。面对数据量庞大、不可靠网络环境下深度图像失真严重、编码后视点合成质量不高等问题,传统的视频图像压缩技术已经无法满足系统的需求。压缩感知理论的出现为系统处理提供了新的思路,本文在深入分析图像/视频压缩感知、分布式视频编码、自由视点编码以及虚拟视点绘制等理论的基础上,探索了一种全新的基于压缩感知融合深度图像处理系统,并对三维编码系统中的若干优化问题展开了研究,主要成果及创新点包括以下几个方面:1、面向深度图像自适应多级分块压缩采样及重建算法研究针对目前面向深度图像压缩感知算法中计算复杂高、采样率固定、先验信息不清晰等问题,本文提出了一种面向深度图像自适应多级分块压缩采样及重建算法。算法分为采样和重建两个部分。采样方面,利用小波域的多尺度特性、深度图像在各尺度下对绘制图像的影响及测量域局部稀疏性,提出了一种自适应多级分块压缩采样模型,该模型可根据深度系数块的稀疏性自适应的加权观测,以提高采样效率。重构方面,在多尺度采样模型的基础上提出了一种基于深度图像熵的自适应重建算法,将双边滤波作为平滑滤波器融入算法迭代重建中,从而进一步平滑块效应并保护深度图像边缘。实验表明,相对于传统算法而言,本文提出的算法对于合成视点的质量有0.21.8d B的性能提升。从主观测试来看,本文提出算法在防止合成视点边界抖动、鬼影等问题上均有较好的效果。2、联合深度序列时空特性的分布式压缩感知系统研究在分析了不同分布式压缩感知模型优缺点的基础上,利用深度序列时空域的相关性设计了一种联合深度时空特性的分布式压缩感知系统。系统在基于多假设联合重建模型的分布式压缩感知的基础上,引入了一种全新的线性TV范数模型作为空间维度约束以减少深度重建过程中产生失真。实验表明,较其他算法而言,本文提出的方法对于合成视点有0.20.6d B左右的性能提升。此外,本文对于系统5种不同的预测模式进行了探讨,并通过实验讨论了不同模式下算法对虚拟视点合成的影响。3、自由式视点编码系统优化方法研究(1)纹理视频编码优化方法研究对纹理视频而言,采用高效的HEVC(High Efficiency Video Coding)框架进行编码。针对HEVC运算复杂度高的问题,本文提出了一种快速帧内编码单元选择算法。算法从三个方面进行优化,分别提出基于图像内容编码单元快速选择方法;基于统计训练的率失真优化以及基于残差分布的快速CU抉择算法。实验表明,本文提出的算法在编码速度上较参考软件HM14.0有50.4%的提升,且只有0.08d B的PSNR损失和1.37%的BDBR上升。(2)面向深度序列分布压缩感知边信息预测算法研究深度编码采用分布式压缩感知框架进行处理。边信息预测是分布式压缩感知重要的组成部分,预测质量的好坏直接影响重建质量。针对深度图像的特点,本文提出一种面向深度图像多尺度边界保护边信息预测算法。算法利用小波多尺度变换建立深度图像金字塔模型,并定义了边界保护匹配准则。而后,从金字塔底层开始逐级进行运动平滑与提纯。为了进一步提升算法性能将深度块分为连续深度块和非连续深度块,并采用不同方式对初始运动向量进行在线更新。实验表明,与较其他算法相比,本文提出的边信息预测方法平均有7.32%的深度图像错误率下降,以及0.53%的边缘错误率下降。无论从深度图像以及合成视点的主观质量而言,本文提出的算法都有较大的提升。
其他文献
随着现代社会的发展和科学技术的进步,金属材料在极端非平衡条件下的相变越来越引起人们的重视。纳米量热作为一种新兴的量热技术,具有高达107 K/s的加热冷却速度,可以原位获取金属材料在极端非平衡条件下的相变行为。相对于传统热分析技术,其热容灵敏度在纳米量级,可以检测到微弱的相变信息。除热力学和动力学外,纳米量热结合其它表征手段,可以对相变进行全方面的研究。这不仅有助于揭示极端非平衡相变的内部机理,还
人类社会的进步离不开新材料的发展,而新材料的开发和应用又推动着科学技术的发展和人类文明的进步。从1995年世界上第一块高质量YAG透明陶瓷开发至今,透明陶瓷已走过了20多个年头。倍半氧化物、石榴石型氧化物、硅酸盐体系等透明或半透明陶瓷被广泛用于透明窗口、无机闪烁体、LED和固态激光激励介质等方面。与YAG基质相比,Yb3+离子掺杂的镥铝石榴石(Yb3+:Lu AG)具有大的有效原子序数Zeff、发
本文提出一个适用于多轴有限变形非线性联合硬化的新弹塑性模型,用来模拟金属和合金的多轴热耦合疲劳失效.新模型与先前模型相比,有如下几个创新点:(i)对比于经典弹塑性模型,所提出新模型结构简单并且在下述意义上完全自由且是光滑的:该模型无需引入为表征塑性行为须强加的屈服条件以及加载卸载条件,而是自动包含这些塑性特征作为模型的固有本构特征,此外,该模型给出连续弹塑性切模量,避免了通常模型所涉及的模量强间断
玉米作为粮食作物的广泛种植为人类文明的进步做出了突出贡献。如今,玉米仍是重要的饲料、粮食作物及工业原料。玉米籽粒富含淀粉和蛋白质等,其中蛋白质的品质决定了玉米籽粒的营养价值。醇溶蛋白是籽粒的主要储藏蛋白,但其氨基酸比例不均匀,缺乏必需氨基酸赖氨酸和色氨酸,导致常规玉米的营养价值较低。Opaque2是玉米籽粒胚乳特异表达的转录因子,opaque2(o2)突变体能显著改善玉米籽粒蛋白必需氨基酸含量,是
工业合金在凝固过程中先析的固溶体初生相常以枝晶形貌结晶。枝晶组织决定了铸锭中晶粒和第二相的特征。掌控凝固过程中枝晶形貌的演化对调控铸锭组织,提高铸件性能至关重要。在材料制备过程中施加强静磁场,可改变体系内物质的传输行为,从而改变材料的微观组织。枝晶生长受凝固过程中传热和传质的影响,施加强静磁场可起到影响枝晶凝固过程的效果。本文以Al-4.5wt.%Cu合金和2024铝合金为实验对象,使用定向凝固方
随着3D显示和交互多媒体系统的迅速发展,多视点加深度(MVD:Multi-view Video plus Depth)视频已经成为新一代3D视频应用的主要方向,日益引人关注。与传统2D视频相比,MVD格式的3D视频可以给观众提供更加丰富的立体感和沉浸感,并且支持用户在一定范围内选择任意的观看视点。MVD中除了有各个视点的2D纹理视频外,还增加了对应视点的深度图。与纹理视频相比,深度图是灰度图像,表
横向振动的分布式以及陀螺效应的共同存在,既使得陀螺连续系统具有独特的动力学行为,也给其理论分析带来一定的挑战。同时,陀螺连续系统是很多实际工程结构的力学模型,如带锯,轴向运动弦线、梁、膜、板、壳,输流管和旋转体等,对其进行振动分析具有重要的工程意义。本文主要研究广义阻尼陀螺连续系统的振动特性,包括固有频率、固有振型以及用复模态方法研究系统的动力学响应。主要内容如下:第一章论述了广义阻尼陀螺连续系统
三值光学计算机是众多新型计算机中被理论和实验成功验证过、最接近实际应用的代表,它具有数据位众多、数据位可分组独立使用和各位的计算功能可重构三大特征。然而三值光学计算机硬件可提供的计算能力仍然很有限,更多运算需要依靠数学计算例程来实现。在最常用的算术运算——加减乘除中,除法的计算延时相比于其它初等运算要长很多,如何加快除法计算过程是计算机科学领域长期关注的一个课题。传统电子计算机面临着许多技术瓶颈,
随着计算机技术的发展,数字图像彩色化技术得到广泛的应用和传播。如何得到清晰自然的彩色化图像,受到人们的关注。图像彩色化技术可广泛应用于古画修复、影视制作、广告设计、图像通信、视频编辑等诸多领域,是数字图像处理及应用的前沿研究课题。本论文研究数字图像彩色化的理论和关键技术,提出几种有效的图像彩色化方法。取得的成果概括如下:1.避免颜色越界的各向异性扩散图像彩色化利用偏微分方程解决图像彩色化问题。建立