基于视觉内容相似性的视频片段自动定位关键技术研究与应用

来源 :中国科学院大学 | 被引量 : 0次 | 上传用户:xiao678
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于视觉内容相似性的视频片段定位作为视频内容智能分析的一项关键技术,能够辅助人们完成视频定位检索、挖掘等任务,在广告视频定位统计、视频版权追踪、网络视频检索等领域具有广阔的应用前景,是国内外众多学者研究的一个热点。针对视频片段定位的相关研究,多集中在增强算法对各种拷贝变换攻击的鲁棒性方面,而对于如何提高算法执行效率的研究相对较少,尤其在目标视频为未分割长视频情况下,尚缺乏有效的快速定位算法。   本文围绕目标视频为未分割长视频情况下的视频片段快速定位问题,根据全拷贝视频片段定位检索、部分拷贝视频片段定位检索、重复视频片段定位挖掘三种不同应用场景的具体特点,分别对其快速定位算法展开了深入研究。本文的主要贡献包括:   针对全拷贝视频片段定位检索问题,提出了一种基于时空灰度序特征的全拷贝视频片段定位算法。该算法的核心思想在于:(1)在精确定位之前,通过引入线性时间复杂度的基于时空二值模式直方图特征的实时预定位算法以及基于二值时间灰度序特征的快速预定位算法,大幅减少了精确定位阶段需要处理的候选视频片段的个数;(2)在精确定位阶段,通过引入一种判别能力更强且保持较好鲁棒性的时空统一灰度序特征进行序列匹配,在保持较高召回率的前提下,进一步提高了全拷贝视频片段定位的精度。实验结果表明该算法对于存在轻微拷贝攻击下的全拷贝视频片段的定位检索问题,在进一步提高定位检索精度的同时,大幅减少了定位检索的平均响应时间。   针对部分拷贝视频片段的定位检索问题,提出了一种基于时空约束极大连通区域的部分拷贝视频片段定位算法。该算法的核心思想在于:(1)在精确定位之前,根据视频片段仅为部分拷贝的特点,引入了基于局部二值模式直方图部分匹配的预定位算法和基于最长公共子串的预定位算法,对候选视频片段进行快速预过滤;(2)在精确定位阶段,通过引入对时序编辑鲁棒的时空约束极大连通区域检测查询视频片段与候选视频片段之间视觉内容相似度和时序相似度较高并且关键帧序列匹配长度较大的所有拷贝视频子片段,然后进一步利用时序约束关系选择合适的视频子片段组成最终的部分拷贝视频片段。实验结果表明该算法能够很好的解决存在轻微拷贝变换攻击情况下的部分拷贝视频片段定位检索问题。   针对重复视频片段的定位挖掘问题,提出了一种基于空间约束灰度级矩阵与类哈希索引结构的重复视频片段定位挖掘算法。该算法首先利用计算复杂度低且判别能力强的空间约束灰度级矩阵特征表示视频关键帧;然后,将近似重复视频关键帧检测问题转换为类哈希索引结构的构造问题;最后,利用类哈希索引结构保存的近似重复视频关键帧和时序约束信息,在线性时间复杂度内完成连续近似重复视频关键帧的合并,实现重复视频片段的定位挖掘。实验结果表明,该算法能够在保持较高定位挖掘精度的同时,显著提高重复视频片段定位挖掘的执行效率。   结合广告视频定位统计、内容审核等方面的具体需求,在广告内容审核系统中应用本文上述三项关键技术,能够实现为指定广告、指定电视台或某些违反广告播出条例的情况提供监管服务,以及为系统管理人员提供广告新模板发现等服务。
其他文献
社会化媒体(Social Media),是一种给予用户极大参与空间的新型在线媒体。它能极大的改变并丰富人们的上网及生活方式,因此关于社会化媒体数据的分析和挖掘是当今的一大研究热点
定位正在成为我们日常生活中的一个非常重要的应用,人们越来越多的体会到基于定位的服务给生活带来的便利。无线传感器网络可以很方便的得到位置信息,更有助于提高很多应用系统
该文就神经网络的基本结构和算法的C语言实现进行了探讨,构建了一个神经网络实现的框架,形成了一个可以使用的神经网络仿真软件NNES,并为其今后扩展和改进打下了良好的基础.N
随着自动控制控制理论和计算机技术的快速发展,移动机器人技术迅速发展,在工业、国防、宇宙空间、海洋开发、医疗救助等领域得到了广泛应用。履带式机器人是移动机器人中的一种
伴随着社交媒体的快速发展,信息过载已经成为社交媒体中的重要问题。面对每天大量更新的信息流,用户往往难以快速的发现令自己感兴趣的内容。因此,如何更好的分析和理解用户,帮助
作为一种新兴的社交媒体,微博以其便捷快速的交互方式与实时动态的平台特性,受到了越来越多网络用户的青睐。用户可以在该平台上自由地发布帖子,跟随其感兴趣的用户以及快速地浏
静态优化技术将工业运行过程假设为拟稳定状态,然而对于部分动态变化显著的实际生产过程,很难满足这一假设条件。特别是现代化工的发展趋势是精细化生产。它的特点是:过程间歇
目前,采用智能控制方法对倒立摆的稳定控制的研究已取得了不少成就,但对具有大范围非线性且存在强烈车摆耦合的小车倒摆的摆起倒立控制的研究还很少.该文以仿人智能控制(HSIC
巡线机器人是一种应用于高压输电线路巡检的特种机器人,它可以运行在输电线路上,利用自身携带的检测设备对输电线路的导线及附属金具进行自动检测,从而降低电力工人的劳动强度和
一台智能的计算机应能观察、理解人类情感并根据使用者的情感自动调整交互环境。如何使计算机能够准确地识别人类的情感具有重大的理论和实际意义。人类情感识别主要包括:表情