【摘 要】
:
人体姿态估计是计算机视觉重要的基础任务之一,也是动作识别、行为识别、人机交互等算法实现的基础。目前主流人体姿态估计算法复杂度高、计算量大、无法在边缘端等资源受限设备上运行,严重限制了该项技术的推广应用。针对这些问题,本文提出了一种基于精细化模块设计的轻量级人体姿态估计网络Mobile Pose Net和基于知识蒸馏的轻量级人体姿态估计网络Ghost Pose Net。主流人体姿态数据集MPII和M
论文部分内容阅读
人体姿态估计是计算机视觉重要的基础任务之一,也是动作识别、行为识别、人机交互等算法实现的基础。目前主流人体姿态估计算法复杂度高、计算量大、无法在边缘端等资源受限设备上运行,严重限制了该项技术的推广应用。针对这些问题,本文提出了一种基于精细化模块设计的轻量级人体姿态估计网络Mobile Pose Net和基于知识蒸馏的轻量级人体姿态估计网络Ghost Pose Net。主流人体姿态数据集MPII和MSCOCO上的实验结果表明,本文所提方法分别在仅有1.5M参数量与0.60GFLOPs计算量的情况下,获得了与大型网络相当的性能。主要工作如下:1、提出了基于精细模块的轻量级人体姿态估计模型。与已有人体姿态估计方法使用大卷积核,设计复杂网络结构片面追求精度不同,本文提出了轻量级上采样模块,并基于该模块设计了一个结构简单、参数量低的轻量级人体姿态估计模型。其中,轻量级上采样模块主要包含点卷积、空间转置卷积和通道注意力三个部分。具体操作是:首先将输入原始特征通过点卷积映射到高维度空间,然后使用空间转置卷积提高输入特征的分辨率,再使用点卷积将高维度特征压缩到低维度空间,最后使用通道注意力机制对不同通道的特征信息进行编码,实现不同通道间的信息融合。轻量级人体姿态估计模型采用编码器-解码器的结构,使用Mobile Net V3前14层作为编码器的主体,使用提出的轻量级上采样模块作为模型的解码器,最后使用1×1卷积进行关键点的回归。结果显示,Mobile Pose Net以1.5M的参数量实现了大型人体姿态估计网络同等的性能。2、提出了基于知识蒸馏的轻量级人体姿态估计模型。为了进一步提高模型运行效率与精度,与现有人体姿态估计知识蒸馏方法使用与教师网络结构相似、复杂度差异小网络作为学生网络的方法不同,本文提出基于关节点在线优化知识蒸馏策略,设计使用计算量较小和网络结构简单的轻量级人体姿态估计网络Ghost Pose Net作为学生网络,使用网络复杂度高的HRNet作为教师网络。为了解决师生网络复杂度差异大造成学生网络难优化的问题,在模型训练的过程中,师生网络使用MSE损失函数进行约束,再利用标签和学生网络的输出生成关节点偏置,使学生网络专注于教师网络的输出。MSCOCO数据集上实验结果表明,Ghost Pose Net以0.6GFLOPs实现了大型人体姿态估计网络同等的性能。3、研发了基于轻量级人体姿态估计模型的姿态匹配系统。为了解决人工姿态纠正耗时耗力、效率低下,专业运动器材价格昂贵等问题,实现随时随地进行健身姿态纠正,本章研发了人体姿态匹配系统。姿态匹配系统采用Windows10操作系统,基于Py Qt5和Pytorch框架开发,主要包含用户登录注册模块、数据库模块、人体姿态检测模块和人体姿态匹配共四个模块。其中,人体检测模块采用本文提出的轻量级人体姿态估计模型,使得该系统在运行时,CPU和内存占用率更低。此外,人体姿态匹配主要包含绝对姿态匹配和相对姿态匹配功能,实现了不同尺度下姿态的匹配。
其他文献
随着旅游业的发展,旅游“真实性”一直是旅游学研究中非常重要的问题之一,不仅游客越来越关注景区“真实性”,同时也获得了更多的学者以及各地政府的关注。研究表明,不仅旅游目的地本真性是影响游客满意度的重要因素,地方依恋对游客满意度也起着至关重要的作用。然而,在旅游蓬勃发展的同时,出现了民族节庆活动模式化和旅游商品同质化等现象,民族文化的保护和今后的发展带来了隐忧。随着高文化辨识度和认知能力游客的增多,或
非物质文化遗产侗族武术月牙镋原名叫做“月牙翼齿镋”是古代军事御敌的一种冷兵器,是古代冷兵器“镋”与黔东南北侗尚武文化相互融合而形成的少数民族传统体育武术项目。2005年侗族武术月牙镋被贵州省列为首批省级非物质文化遗产名录。随着现代化进程的加快,侗族武术月牙镋的原始文化内涵的原真性和整体性发生了巨大改变,在当前传承与发展过程中面临着诸多困境。本文以贵州省非物质文化遗产侗族武术月牙镋的教育传承为研究对
为准确刻画区域电供暖负荷特性以支撑电网改造和需求侧管理,提出了基于个体时空行为模拟的区域电供暖负荷特性仿真建模方法。该模型引入智能体建模方法,以家庭成员作为最小决策单元,采用家庭成员、家庭网络、住宅区域三层结构。首先,考虑出行行为和人体热舒适度,建立家庭成员供暖温度决策模型;其次,考虑家庭成员情感交互、出行时序及经济因素,建立家庭供暖温度决策模型;最后,考虑天气温度、住宅保暖性能并结合电供暖设备运
随着我国经济社会的稳步发展,人民的生活水平不断提升,我国旅游业迈入繁荣发展新时期。人们对旅游的需求持续增长,并且不再拘泥于传统旅游形式,旅游模式呈现多元化发展趋势。其中,黑色旅游作为一种新型的旅游形式愈发受到游客的关注与青睐,也成为当前国内外旅游学科的研究热点。黑色旅游可以帮助人们回顾与正视历史,更好地审视死亡,感悟生命的真谛,具有深刻的教育意义。我国拥有丰富的黑色旅游资源,如地震遗址、烈士陵园、
自跆拳道成为奥运会比赛项目后,吸引了众多体育爱好者关注,并且由于跆拳道运动具有健身、防身、表演等特点,也深受青少年及家长朋友的喜爱,极大的带动了大众跆拳道俱乐部的发展。然而,大众跆拳道俱乐部在发展过程中也出现了不少问题,影响跆拳道俱乐部的发展。因此,本研究通过对贵阳市大众跆拳道俱乐部的发展现状进行分析、总结、找出影响其发展的内外部环境因素,构建SWOT-A HP模型,并针对性地提出发展策略。本研究
语言学习的最终目标是为了更好地交流。然而,许多关于英语学习的研究表明,中国学生使用英语的能力远远低于他们的英语知识。学生在英语课上不愿意说英语,高分低能的现象很普遍,因此他们被认为是“沉默的英语学习者”。这种情况在少数民族地区农村初中生的英语课堂中尤为严重。关于学生英语交际意愿的研究有很多,而对贵州少数民族地区农村初中生英语课堂交际意愿的研究却很少。本文以贵州省都匀市匀东中学的学生为研究对象。本文
为深入贯彻落实习近平总书记关于振兴中国足球“从娃娃抓起、从基层抓起、从基础抓起”的重要指示精神,扎实推进校园足球“八大体系”建设,下移普及重心,加快推进校园足球普及,夯实校园足球发展根基,教育部于2019年3月印发了《关于开展幼儿足球试点工作的通知》,启动了足球特色幼儿园遴选创建工作。截止到2021年底,贵州省共有114所幼儿园被认定为国家级足球特色幼儿园,贵阳市区有14所国家级足球特色幼儿园。为
旅游业的不断发展,促进了旅游业与其他产业的融合。白酒产业的快速发展,也探索出“白酒+旅游”的模式,形成新的旅游业态。基于酒文化遗产、工业遗产的白酒旅游,成为旅游发展的一个分支,尤其在白酒产业集中的产地,已经形成特色旅游区域。贵州作为白酒产业大省,在茅台等头部企业的带动下,优质酱香酒在市场上呈现出供不应求的特征。作为贵州特色产品的茅台酒,已经成为贵州的地理标志产品,依托国酒文化城等旅游资源,茅台镇成
科技型企业在国家提出创新驱动发展战略的背景中快速成长。创新是为其提供旺盛生命力的源泉,资金是为其维持各部门正常运营的保障。科技型企业选择双重股权结构,创始人一股多票的制度可以在融资并购过程中,不用过于担心恶意并购,将投票权,创新主动权掌握在自己手中,提升融资效率,实现自立自强,推动企业发展迈向更高水平。创始人担任CEO为企业长期发展考虑,目光更长远,着重加大研发投入,打造创新方案,提高创新绩效。前
在当前我国市场经济发展态势下,技术市场作为新时代中国科技兴国的重要领域,肩负着科技创新和技术引领的时代重任,并且持续我国经济社会高质量发展。哈尔滨市作为老牌工业城市和科教强市,科技资源富集,但目前技术市场管理体系不健全、技术市场监管职能弱化、要素化技术市场管理不到位、技术市场中介服务相对滞后等问题十分突出。本文选择哈尔滨市技术市场管理为主要研究对象,基于市场失灵理论、新公共服务理论、放管服理论,分