图像视频语义分析.pdf

1 图像视频语义分析 薛向阳 xyxue@ 计算机科学技术学院 复旦大学 2 致谢：研究团队主要成员 姜育刚，副教授 路红，副教授 张巍，副教授 张珂，研究生 陆遥，研究生 视频动作识别 视频结构分析 图像标注 图像语义分割 图像显著性检测 3 目录 Contents 一、 研究背景 二、 什么是语义分析 V 三、 代表性方法介绍 四、 我们的研究进展 3 4 研究背景 一 • 互联网上有数千亿幅照片 • 全世界有数亿摄像头 4 5 互联网用户上传了数千亿幅照片！ 随时随地拍照，方便快捷发布！ 如何实现互联网上海量图片的共享？ 管理、有哪些信誉好的足球投注网站、推荐 6 全世界安装了数亿摄像头！ 治安/破案/取证 道路/交通要道监控 码头/机场/车站监控 展馆/会场监控 企业运营监控 金融银行监控 小区/家庭监控 7 什么是语义分析 二 • 给图像一个类别或多个关键词 • 给图像多个关键词，并指出其所在区域 • 给图像一句或多句话描述 • 给视频一个动作类别或语句描述 7 8 图像分类：给图像一个类别标签 类别 图像 + 目标类（Object ） Mountain forest flower Sheep Boat