基于深度学习的多摄像头协同目标跟踪方法研究

来源 :华东师范大学 | 被引量 : 0次 | 上传用户:mumurong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着公共安全受到社会大众越来越多的关注,视频监控系统正在人们的生活中逐渐普及。目前,一般的公共安全监控系统采取在监控区域布设大量摄像头设备的方案,从而实现对大范围区域的监控。通常这些摄像头是离散的,并且拍摄的监控信息缺乏快速完善的整合机制,导致视频信息的处理仅基于图像,最终未能有效结合视频监控系统的空间位置信息。在实际应用中,除了对监控区域十分熟悉且经验丰富的工作人员,普通人难以直接从大量监视器的图像信息中获取目标的位置信息以实现高效监控,尤其在处理突发事件时,可能因为判断延迟而导致重大事故的发生。针对目前视频监控系统存在的不足,本文基于摄影测量学、GIS以及深度学习等理论方法,重点关注目标检测、目标定位以及多摄像头协同追踪三个方面提出改进方案,实现在多摄像头视频监控场景下的目标检测与跟踪。主要研究内容及结论如下:(1)构建视频监控系统空间数据模型。总结视频监控环境中包含的空间数据类型并构建空间数据模型,实现视频场景的空间化,是GIS与视频监控集成的基础。(2)探索监控视频图像与平面地理空间的映射关系。基于摄影测量学、计算机视觉的理论方法,融合两个领域的相机模型,得到基于固定地理空间高程(5_?的映射模型,经过实测和相机标定获取相机内外参数,为监控系统包含的摄像头构建映射模型,完成图像信息与地理空间信息的关联。(3)基于深度学习方法的目标检测。针对样本源为视频的特殊性,本研究创新开发了一种基于视频的标注工具,构建用于模型训练的标准数据集;利用训练的Faster R-CNN目标检测模型,实现对特定目标的检测,并获取表征目标位置的像素坐标信息,结合(2)构建的图像与平面地理空间的映射模型计算获得目标在真实监控场景的位置,即实现目标定位。(4)多摄像头协同目标跟踪。本文提出一种新的基于位置和视觉特征的多摄像头协同目标跟踪的方法,筛选空间位置和拍摄视角最佳的摄像头来承担目标跟踪任务,实现多摄像头间的目标交接工作。最后,本文通过实验分别验证坐标映射模型和目标检测模型是否精确可靠,并将改进的多摄像头协同目标追踪方法应用到“轨迹地图的生成”和“异常事件的处理”两个实验中进行验证。实验结果表明:(1)图像未进行畸变校正计算的样本点均方根误差(RMSE)范围在4.75-7.04之间,平均绝对误差(MAE)在4.22cm-6.44cm之间;畸变校正后计算的RMSE范围在2.11-3.35之间,MAE保持在3cm以内。实验说明图像畸变校正能有效提高目标定位精度。(2)采用的Faster R-CNN目标检测方法的平均精度均值(mAP)达到90%,检测单帧图片速度达到0.08秒,达到几近实时的效果。(3)在“生成轨迹地图”和“处理异常事件”两个实验中,结果显示目标在横跨多摄像头视域后映射的定位坐标未发生突变等异常现象,符合目标真实的移动情况。以上实验证明了本文提出的多摄像头协同目标跟踪方法高效且可靠性强。
其他文献
教师在解读和学习洋思经验的过程中,要从转变教学理念、自己的实际、提高自身素质三个方面反思教学,不断提高课堂效率,使课堂教学具有更强的实效性。
在单轴压缩数值模拟试验中,加载速率由每次边界条件变化幅度和边界条件变化后的平衡计算时间这两个因素共同控制。同样的加载速率,两个因素的不同组合也会对加载效果有很大的
针对传统单相变换器存在二次功率脉动和能量不能双向流动问题,提出2种基于简化H桥的单相电流型变换器拓扑。将简化H桥串联到单相电流型变换器直流端则可等效于一个可控电压源
随着我国现代化城市进程的加快,城市规划越来越详细。通常情况下,市政工作的开展和部署,需要借助GPS-RTK技术进行测量规划,该技术的应用能有效地提升市政测量的质量,保障市政
在研究《木兰诗》解读与教学多层面的存在现状的基础之上,探讨其中的导向和存在的问题,从而科学的选取教学内容,通过对比更直观立体的展现策略选取的合理性。研究如何能调动
GPS-RTK技术的出现是全球定位系统技术发展史上的重要阶段。GPS-RTK技术不仅大幅度提高了测量的精准度,在自动化方面也取得较大的进步。随着该项技术的进一步发展,GPS-RTK测
Bucholtz&Hall(2005)把身份定义为自我与他人的社会定位。长期以来,身份一直深受各学科学者青睐,是各个领域研究的热门课题。迄今为止,对于“身份”究竟是什么,学者们还没有
离散元法基于非连续介质力学理论,尤其适用于砂土等离散介质体的数值模拟研究。利用岩土体离散元模拟软件MatDEM的二次开发功能,研发了砂土侧限压缩试验三维离散元模拟器。对三
<正>三角是高考数学中的重要考点,覆盖了三角函数定义,三角函数图像与性质,三角恒等变换与解三角形等知识,在全国卷中呈现出比较稳定的命题规律与试题特点,既侧重"双基"(基本
我国中小企业融资难,制约了中小企业的健康稳定发展,对我国经济社会产生重大的不利影响。我国政府加大了对中小企业融资渠道及信用担保体系建设,加大对小额贷款股份公司及中