用于裸眼立体显示得平面视频立体转换方法.docxVIP

用于裸眼立体显示的平面视频立体转换方法作者：杨铀，戴琼海单位：清华大学自动化系联系方式：杨铀sayu_yangyou@163.com技术摘要摘要附图图1图2图3权利要求书1、用于裸眼立体显示的视频立体转换方法，其特征在于，所述方法包括：A1：对所输入的视频类型进行分类，所述类别包括单视点平面视频、双目立体视频，并根据所分类型分别输入至对应的A2或A3；A2：输入视频类别为单视点平面视频，设裸眼立体显示设备所需视点数为N（N2），对单视点平面视频进行适用于裸眼立体显示设备所需视点数的N视点立体转换；A3：输入视频类别为双目立体视频，对双目立体视频进行适用于裸眼立体显示设备所需视点数的N视点立体转换；A4：对于A2或A3所转换得到的多视点立体视频，进行适用于裸眼立体显示设备所需的像素排列。2、如权利要求1所述的方法，其特征在于，所述步骤A1中对输入的视频进行类型判断，具体方法包括：如果所输入视频的视点数为1，则为单视点平面视频；如果所输入视频的视点数为2，则为双目立体视频。3、如权利要求1所述的方法，其特征在于，所述步骤A2中对输入的单视点平面视频进行适用于裸眼立体显示设备所需视点数的N视点立体转换，具体方法包括：B1：对单视点平面视频计算场景深度；B2：利用视频帧序列在时域上的相关性，将B1所计算得到的场景深度进行时域传播；B3：利用基于深度的图像绘制方法，对视频的每一帧进行其余N-1视点的图像绘制，与该视点一起总共为N个视点。4、如权利要求1所述的方法，其特征在于，所述步骤A3中对输入的双目立体视频进行适用于裸眼立体显示设备所需视点数的N视点立体转换，具体方法包括：C1：计算双目立体视频间的视差，并利用视差与深度间的转换关系，得到视频的场景深度；C2：利用视频帧序列在时域上的相关性，将C1所计算得到的场景深度进行时域传播；C3：利用基于深度的图像绘制方法，对视频的每一帧进行其余N-2视点的图像绘制，与双目视点一起总共为N个视点。5、如权利要求1所述的方法，其特征在于，所述步骤A4中对A2或A3所得的N视点视频帧其像素按照裸眼立体显示设备所需的像素排列进行重排列。说明书技术领域本发明涉及计算机视觉技术领域，特别涉及一种用于裸眼立体显示的平面视频立体转换方法。技术背景随着3D立体显示技术的不断发展，立体电影、电视、移动设备等立体产品迅速普及，大众对立体视频的需求程度越来越高。此时，除了提供新的立体拍摄片源以外，还有大量平面视频资料需要通过立体化的方法才能实现立体观赏。立体视频目前大多是通过双目的方式进行显示，观看过程中需要通过主动快门式、偏振式、红蓝式眼镜等将双目图像分别发送至人的左右两眼，从而形成立体视觉感知。这种方式需要用户佩戴眼镜，观看不便。裸眼立体显示设备能够让用户无需佩戴辅助设备即观看到视频所具有的立体效果，是未来家庭娱乐、广告宣传、公共展示等场合中进行立体观赏较为理想的方式。如何向该设备提供立体片源内容，成为一个需要解决的问题。在裸眼立体显示设备进行立体内容的显示，需要根据该显示设备所提供的观看视点数量N，向该设备同时输入等量视点N的视频信号源。比较直观的做法是，开发具有N个视点的视频采集设备进行同步采集，为裸眼立体显示设备提供节目源。但是这样的方式下，节目制作的成本高、周期长、技术难度大，同时对采集设备及辅助控制设备的要求较高，而且已有的大量单视点平面节目源、双目立体节目源无法在裸眼立体显示设备上得以展示。本专利针对单视点平面节目源、双目立体节目源在裸眼立体显示设备上的播放而涉及的节目源裸眼N视点立体转换方法。本发明中所涉及的已有算法单目镜头检测（3篇）颜色直方图方法——1篇聚类方法变换域方法（DCT、小波变换）——1篇镜头渐变检测方法（双阈值法、模糊聚类、B样条拟合方法）——1篇图像特征提取（聚类、色彩量化等方法、运动信息）直接灰度化聚类最小生成树——0~1篇色彩量化运动信息提取——0~1篇分水岭深度图求取（深度赋值方法、深度传播方法）基于立体线索的直接计算（遮挡、透视、纹理、聚焦等）——1篇基于运动的深度赋值轮廓匹配进行深度图求取的方法——1篇关键帧的空域深度扩散方法——1篇非关键帧的深度传播方法（运动信息、各种跟踪算法）——2篇深度图后处理（滤波、时域平滑、边缘增强等）非对称滤波、双边滤波时域平滑——1篇边缘增强——1篇立体图像绘制方法像素偏移（方法选择，均匀or汇聚）空洞填充方法（最近邻、邻域插值、邻域滤波、Inpainting）——1~2篇参考渲染方法（每次参考相邻视点进行渲染）——1篇双目双目图像镜头检测（已校准）同上双目图像视差/深度估计局部匹配方法（区域匹配、特征匹配等）——至少2篇全局方法（动态规划、图割、BP）——3篇有文献非关键帧深度传播（同上，可考虑利用双目视频得到更