基于云计算的作物灾害光谱图像数据挖掘与应用技术研究

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:suojianpku798
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息技术在农业领域的应用越来越广泛,农业数据来源更加广泛,数据维度变得越来越高,更新更加迅速、数据类型也更加多样。信息与互联网技术通过监测和测量物理环境的各个方面,以前所未有的速度产生海量数据,这意味着需要大规模收集、存储、预处理、建模和分析来自各种异类源的海量数据。面对大量的农业数据需要采用人工智能、机器视觉、数据挖掘以及云计算等多种技术将农业大数据整合到计算机系统中,建立信息库并且从中挖掘有价值的信息,为农业生产提供决策,提高产量和降低成本并且减少农业生产活动对环境的负面影响。农业大数据处理是对农业数据进行处理分析的主要问题,通过并行计算和分布式存储方式将云计算资源和作业分散到系统中各个节点上,加快农业大数据的处理、分析、存储以及决策的速度,特别是在面对高并发读写、高维度和海量数据的高效率存储和访问、高可扩展性和高可用性等问题方面,需要使用合理的大数据分析处理技术,挖掘农业数据的价值、提高数据分析应用能力。本文针对作物灾害,可见-近红外光谱、高光谱成像以及云计算等方面的内容展开对于作物灾害光谱图像的数据挖掘与并行计算的研究,主要研究工作和创新点如下:(1)基于主成分分析、特征波段选择以及光谱学理论,探索作物虫害胁迫下的作物可见-近红外光谱特征,针对不同等级虫害胁迫的下的可见-近红外反射光谱进行主成分提取,通过模拟退火算法提取最优波段,使用层次聚类、K-Means,Fuzz C-means以及自组织映射(SOM)等机器学习方法对作物虫害光谱进行聚类分析,探索不同机器学习算法在作物虫害可见-近红外光谱识别中应用的潜力。(2)在第(1)点的研究基础之上,提出了一种基于云计算的作物灾害可见-近红外光谱并行分类识别方法。使用Hadoop和Spark框架搭建云计算平台,对于采集的作物冻害可见近红外反射光谱进行分类研究,使用Spark提供的MLlib机器学习库实现决策树、随机森林、人工神经网络以及支持向量机等多种机器学习方法,对于采集的光谱信息进行特征提取和分类分析,进行作物冻害的分类识别。实验结果表明和传统的光谱分析技术相比,基于云计算的并行光谱数据挖掘算法具有更好的性能和更高的数据挖掘效率。(3)通过采集作物渍害的高光谱图像信息,提取高光谱图像中的光谱与图像信息,并对RGB图像进行主成分分析和颜色空间转换以及对图像信息进行可视化分布。采用连续投影算法(SPA)筛选出了高光谱图像特征波段,提取高光谱图像的最优波段,并将高光谱图像中的光谱与图像信息融合,使用不同的分类模型对不同渍害高光谱图像进行分类预测与识别。(4)在第(3)点的研究基础之上,提出一种基于云计算的作物渍害高光谱图像二阶段分类识别方法,通过分别提取作物油菜高光谱图像中的可见-近红外光谱信息和数字图像信息,分别进行预处理和空间转换,去除图像与光谱噪声并建立相应的光谱矩阵和图像矩阵,通过使用Spark平台和MLlib机器学习库实现并行分类算法,分别对采集作物渍害的图像和光谱矩阵进行分类分析,再将图像和光谱矩阵的分类结果进行信息融合,得到最终的分类与识别结果,从而实现与建立基于云计算的作物灾害高光谱图像无损快速检测方法,并通过实验表明在保证分类预测准确性下,并行分类算法具有较高的加速比、可扩展性和规模增长性,有效地提高作物高光谱图像分类的效率。
其他文献
毫米波探测系统具有全天时、全天候、抗干扰能力强、作用距离远等优点,在军事和民用领域如近程探测、精确制导、对地遥感、导航和反恐安检等方面获得了广泛应用,在目标探测领域具有重要地位。自动目标识别技术是毫米波探测系统应用的关键技术之一。然而,受系统体制、系统参数、环境噪声、目标方位和姿态、数据样本数量等因素的影响,毫米波探测系统自动目标识别在理论和技术方面仍有许多问题亟待解决。因此,本文以毫米波探测系统
切换系统将子系统与离散的切换信号融合,被广泛运用到机器人系统、飞行器系统、网络系统等复杂系统的模拟与控制中。采样控制是模拟信号转化为数字信号的重要环节,在减少不必要的数据传输、促进传输通道的高效利用等方面发挥重要作用。注意到切换系统在采样区间内可能发生切换,将导致切换系统模态与采样控制器模态之间的异步现象。因此,研究切换系统采样依赖的异步控制,减弱相关结果的约束条件,寻求保守性较小的镇定结果,具有
基层综合行政执法改革工作开展以来,河南省新密市乡镇(街道)和市直职能部门按照有关要求,采取各种措施积极推进,社会治理的薄弱环节得到了加强,社会和市场秩序有了明显改善,群众投诉较为集中的私搭乱建、占道经营、噪声污染等违法行为大幅减少。为加强乡镇综合治理,构建科学高效的乡镇管理体制,
期刊
综合行政执法体制改革是党中央、国务院做出的重大战略部署,是深化党和国家机构改革的重要内容。河南省三门峡市在严格贯彻落实政策的基础上,结合本地实际,积极稳妥推进改革,先后印发了五大领域综合行政执法队伍机构编制文件,并全面完成了人员移交等后续工作,确保了改革平稳有序、工作有效衔接。
期刊
在现实世界中,大部分被控系统本质上都是非线性的,并且含有不确定性。与此同时,系统往往存在执行器故障和时延现象。因此,带有执行器故障和时滞的非线性系统的控制问题引起了国内外学者的广泛关注。近年来,在非线性系统稳定性理论、自适应控制、反步(Backstepping)设计方法、神经网络以及其他设计工具的基础上,非线性系统的自适应控制设计取得了丰富的研究成果。但是现有的大部分成果往往需要较强的假设条件且考
红外成像系统拓展了人眼的可视光谱范围,近年来被广泛应用于军事侦察、安防监控、森林防火、疾病诊断和自动驾驶等各个领域。然而由于红外成像系统的复杂性及红外焦平面探测器制造工艺的限制,红外焦平面探测器输出的红外图像通常存在严重的非均匀性,而且图像的灰度过度集中,对比度和动态范围较低,从而极大地降低了红外图像的图像质量及目标分辨能力。基于此,本文围绕红外成像系统架构设计、红外图像非均匀性校正算法、红外图像
众所周知,扰动如外部环境扰动、噪声扰动、机械系统与电力系统内部的摩擦等普遍存在于各类实际系统中,而这些实际系统都是本质非线性的。因此,提高非线性系统的抗扰动能力并得到更好的控制性能具有重要的实际意义。近年来,在非线性稳定性理论、Lyapunov函数、反推(Backstepping)技术、基于扰动观测器的控制以及其他设计工具的基础上,不确定非线性系统的控制设计取得了丰富的研究成果。但大部分已有的成果
随着计算机特别是移动计算机技术的普及和发展,被动接受信息的方式已不能满足人们的需求了,应运而生的人机互动是优化利用计算机的一个重要问题。而诸如增强现实(Augmented Reality,AR)等人机交互手段越来越受到人们的关注。如在军事实战演练、医疗模拟手术、汽车维修助手、电影制作、交互式游戏、旅游向导、生活辅助等应用邻域都有涉及。这些应用中,需要将虚拟的事物或者信息准确地叠加在真实物体或者场景
随着信息科技的飞速发展,信息产业对计算机人才素养要求越来越高。计算机教师在教学过程中应与学生积极互动、共同发展,要处理好传授知识与培养能力的关系,注重培养学生的独立性和自主性,引导学生质疑,探究,在实践中学习,促进学生在教师指导下主动学习。本文讨论的问题是如何在中专院校的计算机教学中实现有效教学,让学生为将来的工作,需要准备充分的专业知识,以及实践能力和学习能力。
随着物联网技术的发展,越来越多的传感器、移动终端和计算机通过网络联系在一起。物联网传感器已经作为基础装备应用到电力系统、交通系统、建筑系统、供水系统、油气系统以及家用电器等生活的各个方面。近年来,由于物联网技术得到广泛与深入的应用,海量的数据处理对计算资源的需求显现爆炸性增长的趋势。云计算和边缘计算技术的出现为海量数据的存储与处理提供了大量的计算资源,而大数据技术则为海量数据的有效处理与分析提供了