现代信息检索课程报告.docVIP

本科学生课程报告 课程名称：现代信息检索 报告名称：基于内容的视频信息检索系统 开课学期： 2012至 2013 学年 02 学期 选课班级： 选课B01班 报告人： ******* 学号： ******** 完成时间： 2012 年 5 月 30 日 基于内容的视频信息检索系统 **** （江西财经大学信息管理学院 *********班） 摘 要: 本文从基于内容的视频信息检索技术的发展历史出发，对基于内容的视频检索系统的技术要点及主要的功能模块进行了讨论和分析，并说明了当今技术存在的缺陷，最后提出了以后可能的商业应用的发展方向。 关键词: 基于内容的视频信息检索; 镜头边缘检测; 关键帧提取; 特征描述 1 引言 1.1 背景 伴随着信息时代的到来，计算机技术和网络技术的发展，海量的信息在全球被采集、传输、流通和应用。特别是数码照相机、数码摄像机等数字化产品的出现，，80%是通过视觉获取的， 视频有哪些信誉好的足球投注网站精准竞速 技术元年开启[2]”所阐述的那样，当今越来越需要准确的检索视频，我们将迎来一个新的技术元年。视频信息检索技术将在各个行业上得到运用，不管是安防还是破案又或者是广告的投放，这都将会是一个新的市场，随着视频信息检索技术的成长，“海量视频检索离安防监控还有多远？[3]”将不再遥远，正确的应用该技术，将为我们的安防提供更可靠的支持。新的广告投放方式“有趣的视链技术[4]”将变成主流，而与之对应的的新的营销方式“视链广告打开视频营销新空间 [5]”将改变大家以往的思维模式。可以这么说，当今的视频行业的发展，催出视频信息检索技术的发展，同时也将影响着该技术在商业上的运用，其产生的价值和展现出的市场前景，将值得期待。 2 基于内容的视频信息检索系统 下图是基于内容的视频检索系统的工作框架图[6] 图1 基于内容的视频检索系统工作框图 我们可以看出，用户使用可视化的界面操作，可选择三种不同的方式进行检索，如范例查询、文字查询、视觉浏览等。用户通过一个关键字或者关键内容的键入，系统根据此查找多维索引，通过在线的数据库的匹配，自动提取特征，这种特征可以使纹理、图像颜色、物体形状等等。然后通过在线的相似度匹配可以得到用户需要的信息。离线时，可以通过标引员进行手工的标引。其主要特点如下： ( 1) 基于内容的检索直接对视频数据库中的图像、视频、音频内容进行分析，抽取特征和语义。对视频信息的描述更加具体、客观和全面。利用这些内容特征建立索引进行检索准确率会大大提高。 ( 2) 基于内容的视频信息检索为我们提供了更多的视频内在信息， 比如视频段的运动活动性、摄像机运动方式或者是关键帧的主颜色、纹理特征等重要信息， 并且这些信息都可以作为视频信息的特征值进行匹配查询。 ( 3) 基于内容的视频信息检索为我们提供了多样灵活的检索方式。我们既可以上载一段关于日出的视频或是仅仅上载一幅有关日出的图像，来查找视频数据库中与日出相关的视频信息，也可以通过一幅手工画出的日出草图对视频数据库中的视频信息进行查询，这些查询方式在传统的检索系统中是无法想象的。 3 基于内容的视频检索系统的实现方式 3.1视频信息的特征 一、关键帧 关键帧是计算机动画术语，帧——就是动画中最小单位的单幅影像画面，相当于电影胶片上的每一格镜头。在动画软件的时间轴上帧表现为一格或一个标记。关键帧——相当于二维动画中的原画指角色或者物体运动或变化中的关键动作所处的那一帧。关键帧与关键帧之间的动画可以由软件来创建，叫做过渡帧或者中间帧 二、镜头 影视中所指的镜头，并非物理含义或者光学意义上的镜头，而是指承载影像、能够构成画面的镜头镜头是组成整部影片的基本单位。若干个镜头构成一个段落或场面，若干个段落或场面构成一部影片。因此，镜头也是构成视觉语言的基本单位。它是叙事和表意的基础。在影视作品的前期拍摄中，镜头是指摄像机从启动到静止这期间不间断摄取的一段画面的总和；在后期编辑时，镜头是两个剪辑点间的一组画面；在完成片中，一个镜头是指从前一个光学转换到后一个光学转换之间的完整, 表现为在相邻两帧间发生突变性的镜头转换。 四、视频段落 在时间上连续的镜头是相关的, 因为这一组镜头是一个情节。显然, 视频段落是一种比镜头具有更高抽象层次的结构。 3.2 实现方式 基于内容的视频信息检索系统主要通过以下三种方式实现： (1) 基于图象的方式：将视频资料进行镜头检测和关键帧提取后，用镜头的关键帧来代表镜头。通过对关键帧的特征提取( 如: 纹理、直方图等) 以及手工注释的方法来实现对视频信息的内容描述。在检索端通过对视频信息关键帧的匹配来实现对视频信息的检索。在前面提到的视链广告便是其中应用之一。