3D码率控制.ppt

3D-HEVC码率控制的研究 Contents 提出问题 相关研究 相关研究 失真模型如何建立 失真模型的研究 D-Q模型 R-Q模型 求解方程及实验结果 Yuan方法小结 建立虚拟失真模型 失真模型 实验结果 实验结果 Shao方法小结 视点间的码率分配 视点间的码率分配 3、视点间的码率分配 视点相关性 总结 * LOGO * 1、问题的提出 2、相关研究 3、联合纹理与深度码率分配 4、视点相关性 问题：如何提高绘制的虚拟视点质量？ 因为压缩深度图时很少考虑直接地减少绘制失真的问题，张秋闻博士就从深度图的角度 分析了深度编码对于绘制视点的影响。探索一种以绘制视点为最小化失真的方法来压缩深度图，建立由有损深度编码引起深度变化造成的绘制视失真(不是由绘制方法引起)的估计模型。 又有人不断研究发现，深度图通常由锐化边缘和低纹理 的匀质区域组成，且深度边缘与多视点视点中相关图像 边缘有高度的相关性，所以人们又用深度图的边缘进行 一个深度复杂度的衡量。 后来又有人从视点之间的相关性进行分析，从参考视点 优化进行了入手，在编码过程中选择最优参考从而达到 最佳的绘制质量。 10kB 10kB 2kB 18kB 纹理 细节 纹理 深度 + + 虚拟视点 左视点 右视点 问题：失真模型如何建立？ 中间视点的像素值 绘制出的中间视点的像素值 Model-Based Joint Bit Allocation Between Texture Videos and Depth Maps for 3-D Video Coding Circuits and Systems for Video Technology, IEEE Transactions on (Volume:21 , Issue: 4 ) 通过对虚拟视点失真模型的建立，找 到虚拟视点与量化步长的关系，同时建立D-Q模型和R-Q模型，通过失真模型最小化方程和输出码率与目标码率的受限方程，从而达到在码率控制精准的同时，使得绘制出的虚拟失真度最小。 在D-Q，R-Q模型建立的同时，由于在相关性并不能达到1，因此对最后的结果会有一定的影响。 Joint Bit Allocation and Rate Control for Coding Multi-View Video Plus Depth Circuits Systems Society Multimedia, IEEE Transactions on (Volume:15 , Issue: 8 ) 随着多视点加深度研究的深入，有人不断对虚拟视的失真公式进行了不懈的推导。 由深度引入的失真 由纹理引入的失真 0 22.47% 60.77% 1 2 3 4 对比Yuan的方法，邵博士直接建立R-D的方法，没有用到R-Q模型以及Q-D模型，减少了建模过程中步骤转换带来的相关性损失，因此在码率控制的精度上更高，而在虚拟视点的绘制上，Yuan和Shao的表现互有高低。 然而不管是Yuan还是Shao的方法，他们都是通过两个视点绘制中间一个虚拟视点，而目前3D-HEVC已经可以达到3视点，3深度绘制6个虚拟视点，因此如何对于3个基本视点之间码率分配才能达到一个最佳的选择。 其中u(x),u(y)为一帧图像的亮度均值 5th 1st 9th GGOP balloons kendo dancer GT_Fly *