基于深度强化学习的跟踪拍摄AUV路径规划方法

来源 :哈尔滨工程大学 | 被引量 : 0次 | 上传用户:kim_xt
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
广阔的海域不仅蕴藏着丰富的资源,而且是贸易和文化交流的重要通道。大力发展海洋装备,是提高中国海洋建设和治理能力的必要手段。自主式水下航行器(Autonomous underwater vehicle,AUV)作为一种探索和开发水下空间的无人驾驶航行器,能够出色的完成各种科学调查和工程任务,具有广泛的应用前景和重要的研究价值。在观测级AUV领域,其小巧敏捷等特性在水下环境的跟踪拍摄中发挥着难以代替的作用,而如何达到理想的拍摄效果是目前需要关注的重点问题。本课题主要聚焦于AUV对水下潜水员等目标进行跟踪拍摄的过程,提出了一种保证拍摄效果的AUV路径规划方法,对该类型的路径规划任务提供了理论依据。本文首先介绍了文章的研究背景以及研究意义,并对路径规划算法的国内外研究现状进行综合分析。针对海洋环境的复杂多变性,将深度强化学习算法应用到跟踪拍摄AUV路径规划问题中,有效地提高了跟踪拍摄AUV的拍摄效果和学习能力,提高了对环境的适应性。其次,对基于归一化优势函数的深度Q学习算法进行了改进,提出基于双归一化优势函数的深度Q学习算法,并进行了AUV跟踪拍摄路径规划问题的研究。本课题的具体任务为根据拍摄图像效果实时规划路径,所以将该深度强化学习算法应用到路径规划领域,并进行了仿真验证。然后,针对双归一化优势函数的深度Q学习算法的学习效率较低的问题,本文提出一种基于元强化学习以及自适应学习率改进算法。主要是采用元强化学习方法以加快学习速度。通过对比分析试验结果,该调整策略有效地提高了原算法的收敛速度,而且优化后算法的在收敛稳定性上也有所提升。最后,对半实物仿真平台的概念及意义进行了简明扼要的阐述,对所开发的路径规划系统的软硬件结构进行了描述分析。叙述了半实物仿真试验流程,以及本课题算法在半实物仿真中的试验结果,由此证明了本文所提出的跟踪拍摄AUV的路径规划方法的可靠性和稳定性。
其他文献
中国大运河是世界上距离最长、开凿最早、规模最大的人工运河,承载着中华民族悠久的历史和灿烂的文明。进入大运河后申遗时代,如何保护好、传承好、利用好大运河相关历史文化资源,持续推进大运河文化带建设,是当下值得深思的重要问题。胭脂河作为大运河南京段的集中展示带,曾是江南漕运北上的集散转运中心和中国历史中心迁移兴衰的珍贵记忆载体,促成了早期宁杭水路经济带合作与长三角一体发展,亦是目前唯一保存完好的切岭运河
学位
随着数字化学习资源的丰富,现代教育技术在中职学校广泛应用,逐渐改变了中职学校传统的教学模式,中职教师面临着传统课堂教学的转型升级,开始逐步结合远程式网络课堂开展教学,这种将面授课堂和在线学习互相结合的混合教学模式越来越多地受到专家和学者的欢迎,也对中职学校的教学实践产生较大的影响。为了进一步了解混合教学模式在中职学校的应用状况,本人在查阅大量国内外有关混合教学文献的基础上,采用问卷调查、实地访谈和
学位
虽然当今社会正处于泛在信息的时代,但是由于个人对信息的获取以及利用存在差异,就产生了信息不平等的现象,个人信息世界作为信息不平等研究的逻辑起点,研究个人信息世界对于信息获取以及利用具有重要意义。高中生作为一个重要群体来说,其个人信息世界也存在差异,家庭社会经济地位和父母教育卷入行为是影响高中生个人信息世界的重要因素,对高中生个人信息世界影响因素的实证研究有利于丰富个人信息世界的理论,同时,有利于为
学位
高校辅导员是开展大学生思想政治教育的主要力量,是莘莘学子全面发展成才的知心伙伴和人生引导者,伴随着社会的进步和经济的迅速发展,高等教育的内涵式发展体系也在不断地丰富,对辅导员的专业素养有着进一步的高期望。努力推进高校辅导员专业化,造就一批素质高、专业化程度强的辅导员,是高等教育进步必不可少的保障,也进一步推动社会的发展。高校辅导员的岗位聘任随着时代的变革也经历了不断的变革,2017年起施行的教育部
学位
报纸
新冠肺炎疫情的全球蔓延使得健康问题得到前所未有的关注,医疗保障是社会保障的重要组成,既直接关系人们的健康风险应对,也事关经济社会的发展与稳定。我国农村人口众多,农村工作关系全局,医疗保障关乎群众切身利益。中国共产党在马克思主义的指导下,结合我国各个历史发展阶段,进行了各个时期的农村医疗保障实践探索,整体上推进了农民健康水平的提升和助推了经济社会的发展,也促进了马克思主义社会保障思想的中国化。其中体
学位
能够服务多用户的大规模多输入输出(Multi-Input Multi-Output,MIMO)技术是第五代移动通信(5th Generation,5G)中的关键技术之一,通过在基站端(Base Station,BS)配置大量天线,实现在同一时频资源下利用空间资源服务多个用户,显著提高系统容量、频谱效率、能量效率以及通信可靠性。大规模MIMO虽已得到广泛使用,但是在实际部署中仍存在成本较高的问题,包
学位
在过去的几十年中,微纳机电系统发展迅速。但是目前的现状是加工工艺远远超前于流动机理的研究,对微纳尺度气体流动和传热问题的研究是系统进一步发展的保障。对于微纳尺度的气体流动,标志气体稀薄程度的Kn数较大,流动进入滑移过渡区,流场中的分子由于缺乏足够的碰撞,流体偏离了热平衡状态。此时,采用传统N-S方程描述流场得到的结果与实验结果有较大的偏差,而基于DSMC方法收敛速度慢,MD方法对于稀薄气体缺乏有效
学位
在制备ZnO透明导电薄膜的方法中掺杂法应用较多,而金属夹层复合结构透明导电膜具有制备简单、薄夹层又具有掺杂效果等优点,并且由于Cu导电性好且价格低廉,使得Cu、ZnO复合薄膜更具有实用意义,所以本文以ZnO、ZnO/Cu/ZnO、ZnO/Cu薄膜为主要研究对象。主要工作如下: 采用反应磁控溅射法在玻璃衬底上制备ZnO薄膜,研究了衬底温度、溅射功率、工作压强、退火处理等制备工艺对ZnO薄膜光电
学位
在当代媒介文化中,对过去事物的迷恋使得复古与怀旧成为一种流行趋势。Y2K(千禧年文化)的再流行正是这种媒介文化的产物。经过20年后,Y2K再次进入大众视野当中,其内涵完全脱离了2000年前后的“电脑千禧虫”程序风险,而转变为一种亚文化的怀旧审美。这种转变的发生依托于不同时代,不同主体的记忆书写与实践对其意义的阐释,不断扩大其集体记忆的内涵使其具有文化共享与传承的意义。在当代怀旧视野下,Y2K内涵的
学位