一种基于证据融合的视频语义概念检测方法.pdfVIP

第 12卷第 3期 Vol_l2 No．3 2011年 6月 Jun．20ll 一 种基于证据融合的视频语义概念检测方法 万建平，高毫林 ，李弼程 (信息工程大学 信息工程学院，河南 郑州 450002) 摘要：提 出了一种基于证据融合 的视频语义概念检测方法。提取 了镜头关键帧的分块颜色矩、 小波纹理特征和视觉词汇直方 图，利用 SVM 对 3种特征数据分别进行训练 ，建立模型；对各 SVM模型泛化误差进行分析 ，采用折扣系数法对不同SVM模型输出的分类结果进行修正；采 用基于min—max算子的证据融合公式对修正后的输出进行融合 ，把 融合结果作为最终的概念 检测结果。实验结果表 明，新方法提高 了概念检 测 的准确率，优 于传 统的线性分 类器 融合 方法 。 关键词 ：视频语义概念；视觉词典法；证据理论；分类器 融合 中图分类号：TN911．73 文献标识码：A 文章编号 ：1671—0673(2011)03—0327—06 VideoSemanticConceptDetectingM ethod Based onEvidenceFusion WAN Jian-ping，GAO Hao—lin，LIBi—cheng (InstituteofInformationEngineering，InformationEngineeringUniversity，Zhengzhou450002，China) Abstract：A videosemanticconceptdetectingmethodbased on evidencefusion isproposed．Fea— turesincludinggridcolormoment，wavelettextureandvisualwordhistogram areextractedfrom key framesofvideoshots，andforeachtypeoffeature，aSVM modelistrained．Byanalyzingthegener- alizationerrorofeachSVM model，adiscountingcoefficientmethod isimplementedtomodifyclassi— fieationresultsofthesemodels．Thenthesemodifiedresultsarefusedwithanevidencefusionequa— tionbasedonmin—maxoperator，andthefusedresultisregardedasthefinalsemanticconceptdetec— tionresult．Experimentalresultsshow thatthenew methodhasimprovedthedetectionaccuracyand outperformsthetraditionallinearclassifierfusionmethod． Keywords：videosemanticconcept；bagofvisualwords；evidencetheory；classifierfusion 0 引言 人是从语义上对图像 ／视频内容进行理解和判断的，而现行的主要做法是利用低层视觉特征，如颜色 、 纹理 、形状 、空间关系和运动等来表征视觉 内容 ，这就导致语义鸿沟 (SemanticGap)¨问题，即低层视觉特 征与人对图像 ／视频内容的理解之间存在的较大差异 。视频语义概念检测是跨越语义鸿沟，实现基于语义 的大规模快速图像 ／视频内容检索的基础 ，已经成为多媒体内容分析领域一个很活跃 的方向。 传统的视频语义概念检测方法先提取视频关键帧的颜色 、纹理、形状等全局特征，然后用机器学习方 法对各高层语义概念建立分类模