基于Spark的森林生物量并行反演方法研究

来源 :东北林业大学 | 被引量 : 0次 | 上传用户:qifasoft2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着全球气候变暖,森林碳储量成为目前十分受关注的问题。森林生物量是估算森林碳储量的重要参数,不仅是碳循环的标志,更是森林生态系统评价的重要指标。森林郁闭度同样作为森林生态资源调查中的主要参数之一,也是碳循环中的重要因子,与生物量有着密切的关系,通过遥感影像反演有效得到郁闭度的值可以更精确的实现生物量的反演。但是随着遥感大数据的发展,遥感影像处理的复杂度和数据量也在增加,因此为了实现遥感影像的高效处理,本文将Spark并行计算框架应用于遥感影像的并行处理中,以帽儿山老山施业区为数据源,提出了基于Spark的并行反演算法,将基于郁闭度的生物量反演模型与之集成完成了生物量的并行反演。本文主要的研究内容如下:(1)针对遥感影像数据量大,在并行反演过程中反复读取、存储数据造成时效性低的问题,本文在遥感影像预处理后建立了遥感影像金字塔。在并行反演过程中,可以直接从金字塔模型中快速提取信息。同时,针对本文数据类型,提出了一种针对遥感影像数据和影像瓦片采用不同数据库分而治之的存储方式。将原始遥感影像和并行反演的处理过程和结果保存在分布式文件系统HDFS中。影像金字塔瓦片的生成和金字塔模型构建过程采用列式分布式数据库HBase来存储数据。从并行计算框架的底层存储到上层的应用都在云平台上实现,提高了数据存储和读取的效率。(2)针对遥感影像反演效率低的问题,本文提出了基于Spark自定义RDD的并行反演算法。将反演过程中遥感影像融合、相关因子的提取和反演模型集成三个关键步骤作为自定义RDD中的操作算子,对其进行设计完成自定义RDD中不同类型RDD转化。在程序执行过程中通过调用自定义RDD完成并行反演。(3)森林郁闭度控制着森林的光合、呼吸、循环等物理过程,对于生物量来说具有很强的相关性,基于郁闭度值的有效估算能够提高生物量反演的精度。针对生物量反演精度低的问题,本文建立了基于郁闭度的生物量反演模型,并与基于Spark自定义RDD的并行反演算法相集成完成了森林生物量的并行反演。通过单机串行模式、基于MapReduce模式和Spark并行计算框架中Spark standalone和Spark on yarn模式进行了对比实验。实验结果表明本文提出的基于郁闭度的并行反演模型精度较高同时基于Spark自定义RDD生物量并行反演算法结果达到了预期的效果,并且反演效率高。随着计算节点的增加并行反演的效率也在不断提高。在反演结果一致准确的前提下,此并行反演算法能够较精确并且高效的完成森林生物量的并行反演。
其他文献
目的:通过回顾性分析绝经后子宫内膜息肉患者的一般资料、临床症状、超声影像特点与手术后病理诊断的关系,探讨绝经后子宫内膜息肉的临床特征以及其发生恶变及癌前病变的危险因素,寻求适当的诊疗方案。方法:回顾性分析了从2012年1月至2019年10月于天津医科大学总医院因绝经后子宫内膜息肉行宫腔镜手术治疗的387例患者的临床资料。根据术后病理诊断分为:恶性及癌前病变组19例(A组),恶性包括息肉恶变(息肉局
临摹一直以来都是视觉艺术领域的一种学习途径和手段,基于这一性质,临摹行为的产物也更多地被大家看作是一种纯粹的复制品。临摹可以产生具有独创性的产物吗?“临摹作品”一词在法律层面上是不合理的存在吗?这些问题在学术界乃至司法实践中仍然饱受争议。本文主要从四个章节对临摹作品所涉及的以著作权为主的相关法律问题进行研究。第一章从临摹的基本概念出发,在厘清“临摹”的双重性质后,对临摹的种类、特点进行讨论,并对临
党的十八大以来,国有企业党委(组)、纪检监察部门深入贯彻“转职能、转作风、转方式”要求,推动落实“两个责任”,把握运用监督执纪“四种形态”,党风廉政建设取得显著成效。
目的:本研究旨在了解乳腺癌患者抑郁情绪现状,分析婚姻满意度对乳腺癌患者抑郁情绪的影响及作用机制;在此基础上,探究着眼于婚姻关系的认知行为疗法(Cognitive Behavioral Th
研究大兴安岭主要建群树种兴安落叶松林土壤CO2时间变化特征以及对环境因子的响应,为进一步阐明我国寒温带地区碳释放及对气候变化的影响具有重要意义。本研究利用LGR 土壤温
干旱胁迫是影响植物生长代谢和最终产量的最重要的多维非生物胁迫因子之一。5-氨基乙酰丙酸(5-aminolevulinic acid,5-ALA)是植物中一种生理活性物质,具有提高农业生产的潜力。
研究背景及研究目的葡萄糖是哺乳动物能量代谢的重要物质。循环系统血液中的葡萄糖被简称为血糖。血糖的稳定是体内一切生理活动的基础,机体根据饮食状态的改变随时调控组织
东北地区作为我国玉米主产区之一,位于中高纬度的气候脆弱带,面临严峻的气候变化挑战。近年来,全球气候变暖促使中高纬度地区热量增加,部分地区为了追求高产盲目北移种植中晚
在“大众创业万众创新”这样的大环境下,诞生了很多民营企业并且民营企业在国家整体经济发展中占比越来越大,对我国经济发展起到重要作用。然而,民营企业可持续发展却普遍较低。究其原因,其在经营过程中不注重财务风险的防范。因此,本文希望企业管理者治理企业时采取有效措施规避财务风险,同时希望给予同行业和不断发展壮大的企业在经营发展中出现类似问题提供一些帮助。如果内部控制环境建设有缺陷,就会使企业在经营期间财务
目的探索健脾化瘀解毒方对慢性萎缩性胃炎大鼠胃黏膜上皮增殖状态以及对自噬蛋白Beclin-1和LC3B的影响。方法本次实验采用MNNG-乙醇复合造模法诱导CAG大鼠模型。将70只鼠龄4-