层级监督通道注意力网络的多人姿态估计算法研究

来源 :长安大学 | 被引量 : 0次 | 上传用户:zhghliu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,使用深度卷积神经网络的姿态估计问题已得到快速发展,成为了计算机视觉领域的一个研究热点,而多人姿态估计是姿态估计中一项基本但又极具挑战性的任务,它是人体动作识别、运动分析、人机交互等高级视觉任务的前提。在实际的应用场景中,错综复杂的背景、人与人之间的遮挡以及人与物之间的遮挡对多人姿态估计造成了巨大的干扰。对此,本文针对目前多人姿态估计算法中的两大痛点,即人物漏检和关键点的错误连接,在现有的多人姿态估计算法的基础上做改进。本文选择了自上而下的多人姿态估计算法作为基准。首先,根据目标检测算法的实验结果选择了现阶段得分最高的YOLOv3-spp目标检测器,并改进其包围框损失方式进行训练,将训练出的模型作为本文的多人姿态估计算法的人形目标检测器,来帮助姿态估计器获得高质量的人形目标的提议框。其次,设计了拥有通道注意力机制的人体姿态估计器,该姿态估计器先通过一开始的像素重组网络来提高经过层层下采样的特征图的分辨率,再让注意力网络层对每个通道的特征图分配不同的权重来达到调整关注区域的目的,有效的解决了姿态估计过程中对关键点模棱两可的预测。加入了注意力机制的姿态估计器对关键点的定位比之前准确,但仅限于可见关键点,如果一个人形实例中的大量关键点被遮挡,仅靠少量的可见关键点依然难以做出准确的姿态估计。最后,本文在通道注意力姿态估计器的基础上设计了层级监督姿态估计器,它是将姿态估计器中上采样网络替换为反卷积网络,再在训练阶段对姿态估计器中的三个网络层进行预测值与真实值之间差距的计算来达到层级监督的目的,自适应地从训练样本中捕获人体关键点局部信息和人体结构信息,从而对一些不可见关键点的位置进行预测。并且,还探索了GAN超分辨率对人体姿态估计的影响。为了验证本文算法改进的有效性,使用了三个开源的数据集对其进行模型训练与测试。从这三个数据集中获得的得分可以看出本文提出的层级监督通道注意力网络的多人姿态估计算法有一定的竞争力,从渲染的效果图中可以看到层级监督通道注意力网络的多人姿态估计算法可以有效地解决拥挤复杂的场景中人物漏检和关键点误连的问题。
其他文献
改革开放以来,我国制造业出口规模迅猛扩大,年均增长率高达15.12%,超过了出口贸易总额的年均增长速度。伴随着我国创新发展战略的实施和中国制造2025的出台,知识产权保护的重要性日渐突出。加强知识产权保护作为新时期的重大举措,对提高我国经济竞争力具有重要的激励作用。在此背景下,本文以探究知识产权保护与我国制造业出口的关系为研究主题,从理论和实证两个方面探讨知识产权保护对我国制造业出口的影响及传导机
目的:先前的研究表明,肌肉的功能状态通过直接或间接途径对大脑功能发挥着重要的调节作用。全身的肌肉功能状态可以通过肌肉力量这个指标来反映,而握力是目前最广泛被推荐的肌肉力量测评方法之一。据我们所知,很少有流行病学研究直接评价握力与抑郁症状之间的关联。因此,本研究拟在一般成年人群中,评估握力是否与抑郁症状间存在关联。方法:本研究是天津市慢性低度炎症与健康(Tianjin Chronic Low-gra
本文围绕低能耗亚硫酸氢镁预处理(Magnesium bisulfite pretreatment,MBSP)麦草制备燃料乙醇工艺展开研究,对影响预处理能耗的关键因素进行了探讨,研究了亚硫酸氢镁预处理液
二阶锥互补问题(SOCCP)作为一类具有普遍意义的均衡优化问题,近年来备受关注.学者们将欧几里得若当代数与谱分解作为工具,使得二阶锥互补问题的研究取得重大进展.目前,有关确
本文主要研究半模Iizuka同余下的一些基本性质与应用,研究了Iizuka同余下商半模的性质和三个基本同构定理;半模Iizuka同余下短伪正合列基本性质及其应用.全文一共分成四个章
在坚持发展新时代“枫桥经验”、强化基层社会治理、深入推进社会治安防控体系建设的社会大背景下,基层社区警务工作,作为维护基层社会治安秩序、发挥基层治安防控作用、预防和打击违法犯罪活动、深入推进基层社会治理、实现党群关系以及警民关系进一步密切融合、化解基层矛盾纠纷促进平安社区、平安社会建设的重要警务模式,在当今社会发挥越来越重要的作用。而基层社区网格化治理的试行与推进,坚持以人为本、服务为先的原则,坚
【关键词】党史学习教育 常态化 制度化  【中图分类号】D23 【文献标识码】A高度重视党史学习教育是中国共产党的优良传统  重视党史学习教育是我们党的优良传统。习近平总书记指出:“历史是最好的教科书。学习党史、国史,是坚持和发展中国特色社会主义、把党和国家各项事业继续推向前进的必修课。”建党百年来,中国共产党始终重视对自身历史的学习,并在总结历史经验中推进党的事业不断前进。  中国共产党成立初期
Coxeter群在代数,几何,组合学和其它数学领域都有重要应用。在很多地方都用了代数和几何观点来阐述Coxeter群理论。这篇文章的主要目的是研究XY
这篇学位论文研究的是局部ample半群代数,证明了≤ -有限的局部ample半群代数都有一个形式矩阵表示。特别地,有限局部ample半群代数有个一般的三角矩阵表示。作为它应用的推
神经文本生成模型的一般模型是序列到序列(seq2seq)的模型,其核心思想是按序列顺序采样单词来生成文本,其中每个单词都以前一个单词为条件。这类模型对于解决类似于机器翻译的输入与输出具有较强对应关系的问题时是十分有效的,然而,当人们需要对训练时未被观测到的单词序列进行调整时,这种模型所生成的文本质量就会很差。生成对抗网络(GAN)在生成真实数据尤其是图像数据方面取得了巨大的成功,但是,由于生成对抗