基于内容的视频检索与关键技术简述

来源 :新学术论丛 | 被引量 : 0次 | 上传用户:ymlazy62
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  1.引言
  随着多媒体技术的发展和信息高速公路的出现,数字视频的存储和传输技术都取得了重大的进展。如何能在海量的视频中找到需要的资料,是视频检索要解决的问题。传统的视频检索只能通过快进和快退等顺序的方法人工查找,因而是一件非常繁琐耗时的工作,这显然已无法满足多媒体数据库的要求。用户往往希望只要给出例子或特征描述,系统就能自动地找到所需的视频片断点,即实现基于内容的视频检索。
  2.基于内容的视频检索
  基于内容的视频检索(Content Based Video Retrieval, CBVR)指根据视频的内容及上下文关系,对大规模视频数据库中的视频数据进行检索。主要特点:直接从视频数据中提取信息线索,它是一种近似匹配,在没人工参与的情况下自动提取并描述视频的特征和内容。它融合了图像理解、模式识别、计算机视觉等技术。
  基于内容的视频检索的过程是先将视频流通过镜头边界检测分割为镜头,并在镜头内选关键帧,再提取镜头的运动特征和关键帧中的视觉特征,作为一种检索机制存入视频数据库,最后根据用户提交的查询按一定特征进行视频检索,将检索结果按相似性程度交给用户,用户可优化查询结果,系统会依用户意见灵活优化检索结果。特征的提取和检索算法的优劣决定了系统的效率和性能。
  3.关键技术
  视频包含着丰富的内容。一般对视频采用分层的表达方式表示视频。一个视频可以表示为场景、镜头、帧几个层次。帧是视频最基本组成单元,镜头边界检测是视频层次化的基础。
  3.1镜头边界检测
  实现基于内容的视频检索首先要将视频数据自动地分割为镜头,称为镜头边界检测或场景转换检测。镜头的切换有突变和渐变,突变表现为在相邻两帧之间发生的突变性的镜头转换。
  (1)基于像素的镜头检测方法
  利用视频两帧对应像素之差的绝对值之和作为帧间差,当大于某个阈值m时,则认为有镜头的切换。缺点是对噪声和物体运动敏感,易造成误识别。
  (2)颜色直方图差法,颜色直方图平方差法
  直方图法是用得最多的计算帧间差的方法,它丢失了颜色的位置信息,故抗噪声能力较强。缺点是两幅图像可能内容完全不同但直方图相似,易造成误识别。
  (3)基于边缘的方法
  基于边缘的方法是提取前后两帧视频图像的边缘图,计算出现的新边缘和消失的旧边缘的像素比例,当两者的最大值大于某个阈值m时,则认为出现了镜头的切换。缺点是计算量比较大,当边缘不明显时识别效果差。
  (4)压缩域的方法
  大量视频数据是以MPEG等压缩形式保存的,对压缩视频进行镜头边界检测通常先解压再检测,但耗时且运算量大,故更理想的方法是直接在压缩域中进行边界检测,目前使用的主要有DC系数法和运动矢量法。
  上述前三种利用帧间差的方法对镜头突变识别效果较好。
  3.2关键帧提取
  关键帧是反映镜头中主要信息内容的一帧或若干帧图像,其选取要能够反映镜头中的主要事件,且描述应尽可能准确完全,数据量应尽量小,计算不宜太复杂。
  (1)基于镜头的方法
  此法提取关键帧主要采用颜色特征,选镜头片段的第一帧作为关键帧,有帧平均法和直方图平均法,计算比较简单,所选帧具有平均代表意义。缺点是只从一个镜头中选一个关键帧,对运动较多的镜头无法充分描述其内容。
  (2)基于内容分析的方法
  这种方法基于每一帧的颜色、纹理等视觉信息的改变来提取关键帧,当这些信息有显著变化时,当前的帧即可作为关键帧。在基于内容分析的方法中,帧平均法和直方图平均法统计所有帧的像素值或直方图平均,取最接近平均值的帧作为代表帧。
  (3)基于光流分析的方法
  Wolf通过光流分析来计算镜头中的运动量,在运动量取局部最小值处来选取关键帧,它反映了视频数据中的静止。视频中通过摄像机在一个新的位置上停留或通过人物的某一动作的短暂停留来强调其本身的重要性。Wolf的这种基于运动分析的方法可以根据镜头的结构选择相应数目的关键帧。如果先把图像中的运动对象从背景中取出,再计算对象所在位置的光流,可以取得更好的效果。
  (4)基于聚类的方法
  视频聚类是将内容上有关系的镜头结合,经过聚类形成具有更高抽象层次的情节层,用有代表性的帧来代表情节(称为情节代表帧)。
  4.小结
  视频数据的镜头边界检测和关键帧提取是实现基于内容的视频检索的关键技术,它直接影响到视频检索的精度,其研究还处于起步阶段,各种理论和相关技术都不尽完善,需要继续做大量的探讨研究。
其他文献
摘 要:我国是拥有最全面医疗保障体系的国家之一,但与20多年来的经济高速增长形成反差,人民收入增加了,生活水平提高了,近半数的老百姓却看不起病了。医疗资源分配不均、机构重复、医疗效率低下、医疗技术和服务质量问题、药价虚高、医疗腐败等现象备受舆论批评。本文将针对目前医疗体制存在的问题对医疗体制改革提出若干政策建议。  关键词:医疗体制;医药分离;医疗腐败  近年来比例逐渐下降的政府卫生投入,使得中国
期刊
摘 要:在新的历史时期,人口计生宣传教育工作是否具有原本的重要地位和作用 ?对群众婚育观念的重大转变,人口计生宣传工作应该进一步强化,还是应该悄然退出?“十二.五”期间计划生育宣传工作如何定性、定位?它的实现手段如何进一步发展,尤其是基层计生宣传工作如何适应新形势,在稳定低生育水平中发挥更好更有效的作用,值得我们进行深入思索和探讨。  关键词:新时期;计划生育;宣传教育;发展方向  在新的历史发
期刊
摘 要:中国英语的概念虽然目前在学术界还没有公认的定论,但它确实是带有中国特色的客观存在的一种语言形式。其词汇的显著特点是词汇语义重复,具体表现为名词结构、形容词、副词、同义词等的重复;其句法也是以累赘、复杂为其根本特点,具体表现在多用名词结构,句式不够简练、明了等。  关键词:中国英语;概念;词汇;句法;特点  一.概念的界定  中国英语的概念到目前为止,学术界并没有一个完全确定和公认的定义,有
期刊
摘 要:学员队管理工作是军队院校干部培养中的最基本一环。针对军队院校干部学员存在的现实特点,总结出干部学员管理“五要领”,提出从“五要领”入手创造性地开展干部学员队管理工作,为干部培养过程中的院校培养阶段提供借鉴。  关键词:干部学员;培养;五要领  干部学员作为未来军队建设的中坚力量,承担着建设部队、打赢未来信息化战争的重任。干部学员培养质量的好坏直接决定着部队未来的发展大势。而作为干部学员培
期刊
摘 要:随着影视数字化技术的运用,数字技术在影视艺术的创作中越发占据了重要的地位。自从数字技术运用到影视中以来,使得影视创作的样式发生了翻天地覆的变化,同事也引出了关于数字技术与艺术之间的关系的讨论。本文就数字影视的技术与艺术之间的关系做一定的探讨。  关键词:数字技术;影响;技术决定论;技术与艺术的结合  自100多年前卢米埃尔兄弟发明了电影开始,影视技术注定要和影视艺术的发展紧密地联系在一起
期刊
摘 要:随着经济的发展,劳动保障工作的内容越来越丰富,任务也越来越繁重。而劳动保障工作事关社会大局,涉及广大群众的切身利益,是维护经济社会稳定发展的基石。当前,我国正处于建立中国特色社会主义市场经济体制的关键时期,需要大力加强劳动保障工作;而建设和谐社会,同样需要劳动保障工作的大发展。因此,如何做好劳动保障工作显得尤为重要。  关键词:经济发展;社会和谐;劳动保障  劳动保障是国民经济和社会发展
期刊
摘 要:艺术热衷于从社会文化意义上来表现性别,进入二十世纪后,性别观念经历了“女性意识”和“跨性别意识”的发展阶段。这种性别意识上的超越,在文化意义上是一种深刻的转变。《美杜莎的星期天》就是对“性别”的一种阐释,这幅作品表现出了跨性别的意义。  关键词:性别;女性意识;跨性别意识;《美杜莎的星期天》  如果把艺术批评比作一个专制的家长,那么当今的艺术创作就像一个顽童。他拒绝被规训,拒绝循规蹈矩,同
期刊
摘 要:作者结合工作实践,针对军队审计人员综合素质不高的现状,从加强政治素质建设、业务素质建设和法制意识建设三个方面阐述了如何提高军队审计人员综合素质,以提高军队审计工作质量,加强审计监督。  关键词:审计人员;综合素质;对策  军队审计人员身处要职,工作在军队审计工作的前沿,是依法从严治军和贯彻执行法规制度的具体组织者、实践者。但从目前情况看,一些审计人员综合素质还不高,在工作开展中不敢管、不
期刊
摘 要:严歌苓的中篇小说《白蛇》以“官方版本”、“民间版本”、“不为人知的版本”三种并置交错的叙事方式,讲述了著名舞蹈家孙丽坤在文化大革命中的一系列人生遭遇,及与徐群珊之间的感情联系。从小说的叙事聚焦方式、叙事聚焦的改变及叙事干预,透析作品揭示出文革对主体人格的戕害及文革时期人性的复杂、人生的无奈、时代的荒谬。  关键词:《白蛇》;叙事聚焦;文革创伤  当代文坛中,表现“文革”时期的作品不计其数
期刊
摘 要:文章在介绍发达国家人力资源中介组织的基础上,着重阐述发达国家人力资源中介组织的发展趋势,同时指出发达国家人力资源中介组织的发展趋势及其对我国中介组织发展的启示。  关键词:人力资源中介组织;发展趋势  随着经济全球化的不断发展,人力资源的作用越来越举足轻重。人才市场及人力资源中介组织从中扮演了很重的角色。欧美发达国家的人力资源中介组织在经历了长期的发展后,已趋于成熟。本文通过介绍发达国家人
期刊