面向植株果叶识别的3D点云高精重建与分割

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:caiql
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
植物表型参数是作物品种选育中判断品种优劣的重要依据。然而现有的植株表型测量方法大多依靠人工完成,费时费力同时测量误差大,而基于图像的表型测量往往造成信息丢失。植株三维模型是植株表型高精度自动化测量的重要手段,是模拟作物生长过程的重要基础,同时三维重建几乎不丢失植株的三维形貌信息。植株形态复杂多变,柔性易变形的特点使得植株三维重建和拼接较为困难。植株叶片、果实、茎秆等器官相互交错遮挡使点云数据配准和表型测量较为困难。植株三维点云模型分割是使用植株三维模型进行表型测量重要手段,复杂的、非标准化的植株三维模型分割缺乏高效算法。因此为了缩短作物育种时间提高作物表型测量精度,研究植株三维点云模型重建方法,开发高精度植株点云分割算法是很有必要的。本文基于投影仪与相机构建了格雷码编码的线结构光三维扫描设备,并基于上述设备设计开发了基于转台的小型植株三维重建平台和基于多视角的大尺度植株三维重建平台。实现了小型植株的高精度三维点云获取,解决了大尺度植株缺乏进行有效三维重建方法的问题。本文提出了一系列算法用于上述平台获取的植株点云序列的拼接。针对基于转台的三维重建平台点云拼接,提出了简易高效的转台转轴标定算法,并给出了转轴位姿的解析解。针对基于多视角的三维重建平台点云拼接,使用二维靶标和三维靶标实现不同结构光扫描设备位姿和移动平台移动方向标定。使用上述标定结果实现点云序列的粗拼接,并结合ICP算法实现植株点云的高精度配准。最后开发了基于GPU加速的植株点云拼接软件,用于上述平台的相关标定与植株点云拼接。使用基于主动视觉的方法,实现植株遮挡信息的补全。设计了基于主动视觉的遮挡信息补全方案,采用六轴机械臂搭载相机并进行手眼标定作为主动视觉设备。基于Harris角点的SHOT描述子进行匹配,使用3D霍夫变换对果实识别并计算机械臂末端位姿。通过机械臂末端相机完成遮挡信息的补全。研究了植株三维点云分割问题。使用DBSCAN方法和三维区域生长算法对植株三维点云进行了叶片分割。针对稻穗点云的分割,制作了稻穗点云数据集。基于3D点云卷积/反卷积设计了用于植株点云分割的卷积神经网络。通过实验与其它神经网络模型进行对比,证明了设计的模型对稻穗点云分割的准确性。本文提出的植株三维点云重建方法与植株器官分割方法对于植株的生理生态结构分析、表型测量与植株的栽培品种选定有重要意义。
其他文献
数据仓库在数据综合、归类并进行分析上具有很好的处理能力。因此,用数据仓库集成元器件生命周期中的质量数据可以为元器件选型提供支持。但是建立元器件全生命周期质量数据仓库存在以下问题:一、对数据的统一表示困难。由于元器件的生命周期中存在很多部门,分散的数据组成要素不全,缺乏统一的数据表示模型,多源数据之间无法进行数据传递和交换。二、对实例数据的转化困难。由于各个部门的数据具有语义异构、海量的特点,所以转
移动设备的使用极为广泛,有多样化的设备且覆盖到生活与生产中的各个场景。在移动设备上通常运行着数?到数百个应用程序,这些应用程序简称App。许多App的使用依托用户端与服务器的通信完成功能。移动互联网的不断发展使得应用的网络通信持续增长,用户网络环境的复杂性和设备的多样性,以及App本身的工程复杂性,都会导致App在生产环境发生故障。随着App用户使用量的增大,故障发生也会非常频繁。软件开发者获取A
当前中国教育行业处于行业上升期。政策、资本、技术和重视教育的传统作为关键因素持续驱动教育市场稳定发展,并推动教育产业迈向新高度。随着计算机技术的高速发展,人工智能、大数据、AI等革命性新技术持续颠覆传统教育模式,引领教育走向智能化、数字化、立体化、扁平化,为打造未来个性化定制、家校、师三方联动,全方位沉浸式的教育新模式提供了可能。各教育集团为适应新的发展趋势,出于节约成本和创新的需求,对在线教育的
移动互联网飞速发展给人们生活带来的巨大改变不仅仅局限于电子商务等信息产业领域,随着云计算服务的成熟普及,使得建立在移动云服务上的面向传统领域的移动应用成为了可能。尽管各类基于位置服务(LBS)的电子地图应用在车速提醒上都有着各自的尝试,但大都属于基于传统技术的简单应用,也很少完全建立在各类交通限速规定和标准之上。在大数据技术不断发展的今天,云计算服务和大数据技术提供了将之应用于车速提醒的基础,这种
骨关节炎是一种常见的退行性骨关节疾病,主要是由于关节软骨退变引起的,常见于中老年人,好发于承重关节。作为人体最主要的承重关节之一,膝关节是骨关节炎发病率最高的关节。在膝骨关节炎的发生与发展过程中,生物力学因素的影响愈发重要,长期关节负载不平衡和下肢力线畸形都是导致膝骨关节炎发生与发展的主要因素。作为非手术治疗的一种手段,膝关节矫形支具通过矫正下肢力线,减轻膝关节不平衡负荷,减轻关节面摩擦,已成为缓
语义分割是计算机视觉领域的基础任务,能够解析场景的内容。本论文对道路场景视觉语义分割的关键技术进行研究,包括两部分内容:利用场景的深度信息提升语义分割精度以及对语义分割模型的加速。现有的道路场景语义分割方法主要使用场景的表观颜色信息进行逐像素分类,容易出现由类内不一致性与类间相似性导致的误分类情况,使得精度受到影响。本文提出使用场景的深度信息来缓解误分类的发生,并分别把深度作为先验信息或监督信息引
我国是世界水产大国,将转基因等现代生物技术引入传统的水产养殖中,已成为必然的发展趋势。现代生物技术,在观赏水族业中,更具应用前景。随着组织特异性启动子研究的深入,用荧光基因构建重组子,并转入鱼受精卵中,获得在不同部位发荧光的转基因观赏鱼技术已经得到初步应用。稀有鮈鲫(Gobiocypris rarus)是我国特有的一种小型鲤科鱼类,并已作为一种新型的模式实验鱼应用于鱼类遗传学、鱼病学、环境科学以及
随着电子商务、社交和移动技术的火热发展,产生了一种基于移动互联网的空间,借助于社交软件为工具,以人为中心,社交为纽带,有别于传统电子商务的新商业——社交电商。而社交电商平台是用于发布和规范社交电商商品的平台。由于社交电商商品来自成千上万的移动端注册个人商家且商家入驻门槛较低,商品质量参差不齐,所以需要保证平台优先推广的是货真价实的商品,社交电商平台引入信任商品推荐系统引导用户购买或分享高信任度商品
组件化的航电软件系统是一个在开放架构约束下由相互关联的多个软件组件构成的大规模复杂软件系统。在这种航电软件系统中,航电软件传输服务是指对多种工业标准的传输协议(如Socket、DDS等)进行封装,以标准化的接口支持航电软件组件间进行数据传输和互操作。可移植和可扩展是航电软件传输服务的关键因素。美国军方主导并由Open Group国际组织提出的未来机载能力环境(FACE)技术标准提供了一种航电软件系
钢铁制造各工序技术水平的发展关系到我国工业现代化和制造智能化的进程。在传统的炼钢作业测温取样工艺中,需要人工周期性对测温枪套接取样器,并且回收测温完成后燃烧的取样器送检。由于该工艺危险系数较高,急需构建面向测温取样工艺的机器人自动化作业系统代替人工作业。本文主要围绕炼钢作业中的测温取样任务,通过搭建视觉系统,研究复杂环境光下如何对取样器端面退化图像进行增强处理,继而通过基于线段和弧线段检测器的特征