宽视场高分辨率拼接成像及片上网络多核快速处理技术研究

来源 :北京理工大学 | 被引量 : 1次 | 上传用户:lkhyuse
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深空探测、军事侦察、遥感航拍等成像应用领域需要解决的主要问题之一是如何将多个成像传感器具有的一定重叠区域的高分辨率图像快速敏捷地合成一幅宽视角的全场景图像。宽视场高分辨率快速拼接成像技术是一种集光学、计算机视觉、图像处理以及并行计算等多个学科和领域的交叉技术,具有重要的理论意义和实际应用价值,也是国内外研究的热点之一。宽视场高分辨率快速拼接成像涉及多源图像配准、融合拼接、边缘修复以及快速并行处理硬件平台设计等多方面技术。考虑到实际应用中,图像传感器的数量、类型和位置等因素存在不确定性,输出的图像数据吞吐率巨大,系统的应用环境可能受光照变化、图像内容变化、视差及动态目标干扰等影响,都对算法的处理精度、鲁棒性和普适性,以及硬件处理平台的计算效率等提出了更高的要求。本文围绕宽视场高分辨率快速拼接成像系统实现的关键技术开展研究,主要的研究内容和创新点如下:首先,提出了一种适用于复杂背景下的高精度强鲁棒性快速图像配准方法。该方法改进了用于检测提取待配准图像中特征点的ORB(Oriented FAST and Rotated BRIEF)算法,通过增加对尺度图像的预处理,提高了提取的特征点质量并保证了算法的尺度不变性,根据特征点的分布,给出了去除大量不可靠匹配点对的特征距离约束条件。而对于特征点稀疏和缺乏纹理的图像,还提出了一种基于几何约束的特征点匹配算法,对特征点建立基于几何不变量的特征描述,更新了匹配代价函数来评估特征点之间的相似性,最后利用改进的样本一致性算法获得精确的图像几何变换关系。对各种复杂场景的图像数据配准结果表明,本文提出的算法在显著降低错误匹配率的同时能保留更多高质量的匹配点对,具有较强的鲁棒性,便于快速处理。之后,提出了内容保护低畸变的多视角图像拼接方法。该方法先对序列影像自动排序,利用基于最佳缝合线搜索的拼接方法完成了无视差下的拼接,并对拼接后的图像进行了漂移校正;对存在视差下的图像拼接,利用特征点筛选机制、光束平差法和优化的局部变换模型来消除视差影响,克服了传统基于全局单应性变换的拼接方法只能处理近似二维平面的图像场景的不足。针对图像非重叠区域形状畸变较大的情况,提出了多约束的局部混合变换拼接方法,在保持重叠区域对齐精度的基础上,减轻非重叠区域的形状畸变。实验结果表明所提出的方法能够有效处理图像视差问题,消除了拼接错位和鬼影问题,并显著减轻了形状畸变,保护了图像的主体内容和整体结构。针对传统的影像修复方法大多只能对图像中间区域的空洞进行修补的不足,提出了一种宽视场边缘受损影像的修复方法。该方法采用基于最优填补缝搜索的算法将填补内容集中在图像的能量最低处,避开了细节丰富区域,通过复制和插值的方式进行单像素宽度的细缝填充,将整个图像拉伸至规则边界处,最后通过能量函数约束和网格优化对图像进行局部调整。实验结果表明本文方法能够在保护原始图像内容和整体结构的基础上,很好的完成受损边缘的修复任务,获取形状规则的低畸变宽视场拼接影像。设计了一种基于Tilera众核架构的快速图像处理硬件平台,用于宽视场高分辨率图像的拼接处理。分析了传统的基于CPU/GPU的多核硬件处理平台以及基于DSP/FPGA等嵌入式硬件平台在进行复杂图像处理时的局限性。根据高分辨率宽视场快速拼接成像的应用需求,设计了以Tile Gx64众核处理器为主控核心的CPU核心板,以及功能接口扩展底板。通过数据划分和算法任务调度的方式,对本文算法进行了并行化设计,优化和提升了系统的整体性能与运行效率。实验结果表明,所设计的硬件系统能够高效地完成快速处理,并且在处理效率和功耗上要显著优于传统多核CPU。最后,论文对完成的工作及创新点进行综述,并对今后的发展前景和下一步的研究方向进行展望。
其他文献
太阳能以其资源丰富、使用清洁和储量巨大等特点,成为人类未来的主要新型能源之一。太阳光泵浦激光器是一种将太阳光直接转换成激光的装置,具有系统结构简单,能量转换环节少,
“健康是人类社会生存和发展的永恒话题,人民健康是国家和社会发展的核心竞争力”。作为人民健康的保障,医疗卫生服务的发展会直接影响国家和社会的发展。在新医改的背景下,
当前,随着以提供服务作为主要工作内容的员工逐渐成为企业的主力军,企业组织中日益普遍的员工服务行为正越来越受到管理者的重视。与此同时,企业中出现一批乐于为下属提供服
机器人集合了机械、电子、信息、控制和计算机等多种学科技术,是目前学术研究和工程应用都非常活跃的领域之一。经过几十年的发展,机器人已经从一个科幻概念慢慢地走向商业化
技术壁垒是在当前全球贸易摩擦不断蔓延和升级背景下拓展出的新型非关税壁垒。经济全球化背景下全球经济竞争方式和手段日趋多元化,科技竞争成为全球竞争的核心,创新驱动发展
信息物理系统(Cyber-Physical Systems,CPS)将信息系统和物理系统通过各种大规模异构网络连接起来,实现对物理环境的实时和准确的感知与控制,实现人与人之间、人与物之间的资
随着成像技术的发展,图像增强技术成为很多领域不可或缺的处理手段,如科学研究、军事应用、森林农业的估产减灾、目标跟踪、石油勘探等。由于成像设备在成像过程中或多或少的
隐通道是指利用授权的公开信道作为秘密信息载体介质的一种隐蔽通信方法。网络隐通道成为在公开网络流量中隐蔽地传输秘密信息的一种有效手段,分为时间隐通道和存储隐通道两
为解决城市道路网络中日益激烈的交通供需不平衡问题,世界各国均大力推动关于车-路通信与协同控制的新一代智能交通系统的研究。智能网联汽车加强与外部实时信息交互,能实现
近年来,随着移动互联设备数量的爆炸性增长,全球通信产业对无线频谱的需求日益增加。由于频谱资源的稀缺性,未来的通信系统将要探索与其他电子设备共享同一频段的可行性。这