智能点云几何压缩

来源 :南京大学 | 被引量 : 0次 | 上传用户:sdmaxdh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人们对立体信息日益增长的需求,图像限制了我们表示三维世界的能力。相比之下,点云(Point Cloud)数据能够直接表示三维空间信息,在沉浸式媒体、自动驾驶环境感知等应用中表现出重要作用与巨大潜力。但是点云数据量庞大,且无规则结构,它的存储传输面临挑战,亟需高效的数据压缩算法。针对点云压缩(Point Cloud Compression,PCC)这一重要课题,本文进行了大量而深入的调查研究,总结分析了各种点云压缩技术,并利用先进的智能图像压缩及点云处理方法,提出了智能点云几何压缩方案,在创新性和性能上都取得了较大突破。本文首先综述了点云压缩的相关背景和各种方法,以MPEG(Moving Picture Experts Group)PCC标准等先进点云压缩技术为参考,介绍了八叉树编码、表面编码等传统点云几何压缩方案,以及点云属性压缩方法。我们还综述了点云压缩智能化的相关工作,具体介绍了基于端到端学习的图像压缩、点云处理神经网络、以及智能点云压缩这个新方向。然后本文详细介绍了所提出的基于端到端学习的几何有损压缩方案,它基于体积模型,整体框架包括三部分:点云体素化及分块的前处理、基于三维卷积网络的编解码器、和基于二分类的后处理重建。对于该方案中的主要创新点,如前处理中的缩放操作、深度神经网络结构设计、自适应分类阈值设置等,本文进行了充分实验,以证明其合理性与有效性。我们还和其它点云压缩方法进行了大量实验比较,显示出所提方案在密集点云上优秀的性能,它比MPEG基于几何的编码方案(Geometry based PCC,G-PCC)能够节省60%以上的码率。在该基于学习的点云几何压缩框架之上,本文又提出了一个更加高效的多尺度几何编码方案,它在性能和复杂度上都有明显改进。该方案基于点云的稀疏张量形式,而非冗余的体积模型,并使用稀疏卷积构建变换网络,复杂度低、实现高效。我们使用这种先进的稀疏表示和卷积设计了多尺度重采样变换:在编码端,通过卷积下采样,将点云局部几何特征嵌入到低尺度点云的属性信息中,然后对属性进行编码。在解码端,我们使用对称的上采样操作递进式地从低尺度点云属性信息恢复原始点云细节几何结构。这种多尺度上下采样机制结合稀疏卷积,能够实现高效紧凑的隐层表征提取。经过实验比较,该方法能够比前一个基于学习的方案节省30%以上的码率,并且超过了其它传统方法,达到了目前领先的压缩性能。除了以上两个有损几何压缩工作,本文还展望了未来研究工作,包括无损几何编码、颜色属性编码等,未来还将继续深入探索动态点云压缩等广泛课题。本文的相关代码和数据都已开源①②,以供同行交流研究。
其他文献
在工业现场的生产和加工过程中,粉末作为一种非常常见的物质形态,经常会需要对其进行成分检测,如水泥生产过程中的水泥生料粉末和燃煤电厂的煤炭粉末等。对水泥和煤等矿粉的元素组成进行快速、在线监测,可以达到节能减排的目的,具有巨大的经济和社会效益。目前常规的对于煤和水泥的检测分析方式由于周期长、元素种类分析受限、有辐射源等缺点,不利于未来可持续发展。激光诱导击穿光谱技术(LIBS)是近年来新兴的一种光谱化
近些年来,随着中东部发达地区公路交通网络建设的完善,我国基础交通设施的建设开始大规模的向着西部山区发展,采用悬臂施工工法建造的连续刚构桥在山区高速公路跨越深谷河流时应用的十分广泛。然而,连续刚构桥悬臂施工周期长、施工工序繁琐工艺复杂、山区复杂的自然环境复杂,导致施工阶段事故多发,本文基于这一现实需求开展山区公路连续刚构桥主梁悬臂施工风险评价研究。论文将连续刚构桥悬臂施工和山区特殊自然环境特点结合起
随着我国经济和城市化进程高速发展,道路系统不断更新,道路改造项目不断增多,如何科学地进行城市道路改造已成为城市发展中的重要问题。为了更好地进行道路改造,不仅需要在设计、施工中进行控制和管理,更需要在前期进行合理的、有前瞻性的策划,从而使项目整体定位更准确,建设更经济合理,公共效益最大化。本文采用实地调查、案例分析和比较研究等方法进行道路改造前期策划研究。通过对国内外道路改造研究现状及海绵城市、综合
近几十年来,北极地区迅速升温,冰川、冻土快速消融,降水显著变化,这导致北极水文循环发生了显著变化,成为全球气候变化的指示器。北极河流网络是北极水文循环的重要组成部分,近年来,北极河流网络明显扩张,形成了众多河宽小于30 m的细小河流,这些细小河流分布广泛、变化迅速,能够储存和运输大量地表物质,在水文循环与生物地球化学循环过程中发挥了重要作用。但是,受限于自然与后勤保障等条件,在北极地区实地开展细小
目的:通过对孕期水产品、内脏摄入量与尿中元素砷(As)、镉(Cd)、铅(Pb)、钼(Mo)浓度关系进行分析,确定孕期水产品和动物内脏的摄入量是否影响尿金属浓度。方法:在同济母婴健康队列的基础上,纳入1622名妊娠期提供尿样的研究对象进行分析。通过现场调查收集妊娠期女性的人口学指标和半定量食物频率问卷,使用医院提供的聚丙烯尿杯收集尿样。运用电感耦合等离子体质谱(ICP-MS)测定尿样中金属浓度。使用
焊接过程是一个非常复杂的过程,涉及电弧物理、传热及冶金的变化。焊接的数值模拟能够有效地模拟焊接过程中的各种现象,对焊接结构的设计,优化和焊接材料的选择起着非常重要的作用。焊接现象包括传热过程,金属熔化凝固、冷却、焊接应力和变形等。模拟计算各种焊接现象,可以使用计算机来确定焊接结构、材料的最佳选择、工艺方法和最佳的焊接参数。坡口焊接是目前船舶、机车、车辆、桥梁、锅炉以及车库等工业产品常用的焊接方式,
随着国Ⅵ排放法规的出台,对柴油车废气中主要污染物NOx和PM都提出了更为严苛的排放要求,单一后处理技术难以将所有尾气污染物都降至限值以下,结合机内净化技术开发高效紧凑的集成尾气后处理装置是当前柴油车减排的发展趋势,而怎样提高SCR系统低温工况下NOx转化效率和抗结晶能力是亟需解决的难题。本文基于尿素SCR系统,对非气助喷射SCR喷雾混合过程进行了详细的研究。利用可视化定容弹实验台架和高速摄影机,对
近年来车辆装备行业发展迅速,产量增加,国内销售和出口数量不断创新高。随着汽车工业的发展,特别是近十年来中国汽车工业的爆炸性增长,车辆装备制造商越来越多。但是,企业管理水平参差不齐,质量管理有很大不同,特别是特种车辆行业的管理与质量差异性更是区别较大,随着车辆装备产量的增加,质量对客户构成的安全隐患更加突出。因此,提升企业质量不仅可以减少售后和返修,降低企业成本;还可以提高产品和企业的市场竞争力。建
石英粉尘是我国最常见的职业性有害因素之一,石英粉尘吸入后,经呼吸道进入肺部,巨噬细胞作为机体防护的第一道屏障,被石英粉尘刺激,从而启动一系列的免疫防御反应。三碘甲腺原氨酸(T3)是一种内分泌激素,能够调节机体的固有免疫反应,甲状腺激素受体α(TRα)作为三碘甲腺原氨酸的核受体,主要与三碘甲腺原氨酸结合后发挥抗氧化、抗炎和抗凋亡的生物学功能,然而,在目前的研究中,三碘甲腺原氨酸在石英粉尘导致的氧化应
钢桁架应急桥采用焊接整体式节点,节点处由于焊接工艺等原因存在的裂纹缺陷,会在车辆移动荷载的反复作用下不断扩展,节点处容易产生疲劳问题,疲劳破坏为钢桁架应急桥的主要破坏形式之一。研究应急桥节点处初始裂纹的扩展规律跟结构的剩余寿命,对于应急桥的安全评定具有重要意义。本文采用损伤容限法对钢桁架应急桥节点裂纹扩展规律及扩展剩余寿命进行了研究,具体研究内容如下:(1)基于损伤容限理论基本内容,将裂纹简化为半