一种快速的双目立体视频分形压缩与解压缩方法

文档序号:7917756阅读:216来源:国知局
专利名称:一种快速的双目立体视频分形压缩与解压缩方法
技术领域
本发明属于视频压缩编码领域,涉及双目立体视频的压缩编码,在保证峰值信噪比PSNR基本保持不变的前提下,极大地降低了运算复杂度和提高压缩比,为双目立体视频编码的实时性应用奠定了基础,进一步提高了分形视频压缩编码的性能。
背景技术
分形理论最初由Mandelbrot于上世纪70年代提出(参见Benoit B. Mandelbrot. The Fractal Geometry of Nature[M]. New York H. Freeman and Company,1982.)。 分形编码的数学基础是迭代函数系统(IFS)理论。Barnsley首先将分形编码用于交互式图像压缩(参见 Michael F. Barns ley, Alan D. Sloan. A better way to compress image [J]. Byte Magazine,1988,13 (1) :215_233.)。Jacqain 提出了全自动的分形图像压缩方法(参见 Arnaud E. Jacquin. A novel fractal blocking-coding technique for digital image[C]. IEEE International Conference on Acoustics,Speech and Signal Processing,1990,4 2225~2228.),(参见 Arnaud Ε.Jacquin. Fractal image coding a review[J]. Proceeding of the IEEE,1993,81 (10) :1451_1465.),该方法釆用基于图像分块的方式以局部的仿射变换代替全局的仿射变换。之后,Fisher利用四叉树改进了这一方法(参见 Y. Fisher. Fractal Image Compression [J]. Fractals,1994,2 (3) 347-361.),(参见 Y. Fisher,E. W. Jacobs. Image compression :A study the iterated transform method[J]. Signal Processing,1992,29 (3),251-263.),(参见 Y.Fisher. Fractal Image Compression Theory and application to digital images[M]. New York =Spring-Verlag, 1995,55-77.),大大提高了编码效率,并成为目前分形图像编码中的主流方法。 在此基础之上,一些学者和研究人员把分形图像压缩的方法应用到视频序列的压缩上。Meiqing Wang等提出了综合基于数据立方体和基于帧的分形视频压缩方法(参见 Meiqing Wang, Choi-Hong Lai. A hybrid fractal video compression method[J]. Computers Mathematics with Applications,2005,50 (3-4) :611_62L),(参见 Meiqing Wang,Zhehuang Huang,Choi—Hong Lai. Matching search in fractal video compression and its parallel implementation in distributed computing environments[J]. Applied Mathematical Modeling,2006,30 (8) :677-687.), ( # B Meiqing Wang, Rong Liu, Choi-Hong Lai. Adaptive partition and hybrid method in fractal video compression[J]. Computers & Mathematics with Applications,2006,51(11) 1715-1726.) ο 其中最为经典和影响较大的参见(C.S.Kim,R.C.Kim,S. U. Lee. Fractal coding of video sequence using circular prediction mapping and noncontractive interframe mapping[J]. IEEE Transactions on Image Processing,1998,7(4) 601-605.)。该方法采用类似于标准视频编码方法所采用的运动估计/补偿技术,该方法利用了相邻帧之间的时间强相关性,对视频序列压缩取得了较好的效果。在CPM和NCIM中,子块域中的每个图像块都由来自相邻帧相同大小的父块域通过运动补偿得到。CPM和NCIM 两者间最大的不同在于CPM在解码的过程中需要具备收敛性,而NCIM不需要。但是在循环预测编码(CPM)方法中,为了保证起始帧经过自身的循环解码能够近似收敛到原来的图像,压缩过程需要经过复杂变换、搜索和迭代等,压缩时间和图像质量难以达到要求。目前典型的分形图像和视频压缩方法的运算量很大,编码速度较慢,并且解码的质量有待提高, 使得分形图像和视频压缩方法还需要进一步的改进和提高。
随着多媒体技术的不断发展,多视点视频因其具有单目视频无法比拟的优越性渐渐成为研究的热点。而双目立体视频是多视点视频中应用最为广泛的一种形式,它增加了场景的深度信息,使欣赏到的图像有强烈的现实感和逼真感,可以应用于立体电视,远程教育,远程工业控制,远程医学诊断和虚拟现实等众多领域(参见A Schertz. Source coding of stereoscopic television pictures[C]. Proceedings of the IEEE International Conference on Image Processing and its Applications. Maastricht, The Netherlands,1992,462-464)。双目立体视频是利用人眼睛的双目视差原理,双目各自独立地接收来自同一场景的特定摄像点的左右图像,左眼看偏左的图像,右眼看偏右的图像,形成双目视差,大脑能得到图像的深度信息,使欣赏到的图像有强烈深度感、逼真感,观众能欣赏到超强的立体视觉效果。但是相对于单目视频,双目立体视频系统必须传输和存储翻番的数据量,所以必须对其进行有效地压缩。(参见Shigang Wang,Xuejun Wang,Hexin Chen.Stereoscopic video compression coding based on H. 264[J]. Chinese Journal of Stereology and Image Analysis,2008,13 (1) :11_16)在双目立体视频编码过程中,不但要考虑各通道内前后帧图像之间的时域相关性和帧内图像的空域相关性,还要充分利用通道之间的空域相关性进行编码。前者可以利用运动补偿预测(MCP)去除冗余,后者可以采用视差补偿预测(DCP)去除通道间冗余。DCP 与MCP相比要复杂的多,其中的关键技术是视差匹配。Michael Ε. Lukaces是双目立体视频编码的早期研究者,他探索了将视差补偿(DC-based)(指使用双目视差关系在两幅图像之间建立对应)用于从双目立体视频序列中的一个视频序列预测另一个视频序列,并提出了多种基于视差补偿的方法(参见 Lukacs M E. Predictive coding of multi-viewpoint image sets[C]. IEEE International Conference on Acoustics, Speech and Signal Processing, 1986,521-524)。Perkins将基于视差补偿的方法归纳为一种条件编码方法,对于无损编码来说是最优的,对于有损编码则是次优的(参见Perkins M G. Data compression of stereo pairs[J]. IEEE Transactions on Communications,1992,40(4) 684-696)。Tzovaras等人提出了视差估计的分层块匹配以及运动视差双向补偿方法,称之为聚合估计(参见 Tzovaras D,Grammalidis N, Strintzis M G. Object-based coding of stereoscopic image sequences using joint 3D motion/disparity segmentation[C]. Proceedings of SPIE :Visual Communication and Image Processing,1995,1678-1689)。 另外Franich还提出了基于通用块匹配算法的视差估计方法,并引入一种平滑检测手段来 if ^EKlifif ( Franch R E H, Lagendijk R L, Biemond J. Stereo-enhanced displacement estimation by genetic block matching[C]. Proceedings of SPIE Volume 2094-Visual Communications and Image Processing. Cambridge, MA, USA, 1993, 362-371)。Siram Sethuramn以及M. Siegel等人提出了基于视差和运动的可变块四叉树多分辨率分割方法,针对基于MPEG视频编码标准的双目立体视频流的编码,按在解码端是否有合成中间视图的需要,提出了两个双目立体视频流的混合分辨率编码方法(参见 Sethuraman S, SiegelM W, Jordan A G. Segmentation based coding of stereoscopic image sequences[C]. Proceedings of SPIE :Volume 2668-Digital Video Compression Algorithms and Technologies. San Jose,CA,USA,1996,420-429)。常用的双目立体视频编码方案有独立 MCP(Motion Compensated Prediction)编码,层间 DCP(Disparity Compensated Prediction)编码和MCP与DCP相结合编码。其中在MCP与DCP相结合编码中,基本层采用独立MCP编码,增强层采用MCP与DCP两种方式进行预测,从中选择误差较小的一种作为预测结果。本专利申请人已于2010年10月申请了两个有关分形双目视频编码的专利一种基于分形的双目立体视频压缩编解码方法(201010522161. 9 CN 101980538 A)和一种基于对象和分形的双目立体视频压缩编解码方法(201010522152. X CN 101980537 A)。本发明与上述公开文献不同在于1)利用了预搜索限定条件;2)利用了分数像素块匹配;3)利用了基于运动矢量场的自适应六边形搜索算法;4)DCP编码方式时,充分利用视差分布约束条件;5)解码中,利用了去方块环路滤波。因此,编码性能有了很大的改善和提高。

发明内容
本发明提出了一种快速的双目立体视频分形压缩与解压缩方法,在编码中以左通道为基本层,采用单独的运动补偿预测方式(MCP)进行编码,首先对左目的起始帧采用块 DCT变换编码,对左目的非I帧进行块运动估计/补偿编码,计算与子块域和父块域相关子块的像素和与像素平方和,同时计算分数像素内插值对应块的像素和、像素平方和,然后进行预搜索限制条件判断,并在前一帧搜索窗中利用分数像素块匹配和基于运动矢量场的自适应六边形搜索算法寻找最相似的匹配块。右通道为增强层,采用MCP加视差补偿预测方式(DCP)进行编码,选择误差最小的作为预测结果。在进行DCP编码方式时,充分利用分数像素块匹配和视差分布约束条件。在解码过程中利用去方块环路滤波进行解码。一种快速的双目立体视频分形压缩方法,包括以下步骤步骤一对于左目,首先判断是否为I帧,若是I帧,则对该帧进行互不重叠的固定大小的块划分,对每一个图像块分别采用基于块DCT变换的I帧帧内图像压缩方法,对图像进行单独编码和解码,转到步骤十一;否则,转到步骤二 ;所述I帧为视频序列起始帧或者视频序列中只进行帧内编码的图像帧;所述将当前帧划分为固定大小的互不重叠的图像块称为宏块;所述将当前宏块进行树状划分得到的块称为小块;所述当前帧为正在进行压缩的帧,所述参考帧为当前帧的已经编码并重建的前一帧;所述当前帧所有块的集合称为子块域;所述前一帧的所有块的集合称为父块域;所述块DCT变换中的块采用固定大小模式; 对于右目,转到步骤七;步骤二 若左目为非I帧,用常规单目的运动补偿预测(MCP)编码,对该帧进行互不重叠的宏块划分,然后计算这些宏块以及经树状划分得到的小块的像素和、像素平方和, 以及左目前一帧重建图像即参考帧中,按照设定步长划分的所有宏块以及经树状划分得到的小块的像素和、像素平方和,同时计算分数像素内插值对应块的像素和、像素平方和,转到步骤三;
步骤三依次对当前帧的所有宏块进行编码,在父块域中的搜索窗内首先对该宏块进行块匹配;在进行子块与父块的匹配过程中,子块的位置作为父块的起始搜索点,父块的大小与子块的大小相同,转到步骤四;步骤四利用基于运动矢量场的自适应六边形搜索算法,然后利用分数像素块匹配,搜索分数像素内插值对应小块处的RMS点,搜索出最佳的匹配误差RMS,转到步骤五;步骤五预搜索限制条件判断对于特定的子块,若与父块对应值满足预搜索限制条件,则转到步骤六;否则直接保存当前的迭代函数系统系数即IFS系数,转入步骤三编码下一宏块;步骤六如果匹配误差RMS小于开始设定的阈值Y,保存当前的迭代函数系统系数即IFS系数,转入步骤三编码下一宏块;否则,依次按照树状结构对该块进行划分,并对各个划分得到的小块利用分数像素块匹配和基于运动矢量场的自适应六边形搜索算法,分别计算匹配误差RMS,如果RMS小于设定阈值Y,则停止划分并记录该小块IFS系数,转入步骤三编码下一宏块;否则继续划分,直到将当前块划分为预先设定的最小块,记录IFS系数;转入步骤三编码下一宏块;所述搜索窗为在参考帧中的矩形搜索区域;所述IFS系数包括父块位置(x,y)和比例因子s、偏移因子0 ;如果当前帧所有的宏块都已编码完毕,且是左目,则转到步骤十一;若是右目,则执行步骤八;步骤七对右目图像,首先进行互不重叠的宏块划分,然后计算这些宏块以及经树状划分得到的小块的像素和、像素平方和,以及右目前一帧重建图像参考帧,按照设定步长划分的所有宏块以及经树状划分得到的小块的像素和、像素平方和,同时计算分数像素内插值对应块的像素和、像素平方和,以减少块匹配过程中的重复计算,转到步骤三;步骤八计算左目中对应帧图像参考帧,按照设定步长划分的所有宏块以及经树状划分得到的小块的像素和、像素平方和,同时计算分数像素内插值对应块的像素和、像素平方和,以减少块匹配过程中的重复计算,转到步骤九;步骤九首先对与当前子块位置相同的父块进行块匹配,得到RMS,并保存迭代函数系统系数,该系数包括父块与子块的相对位移矢量(X,y),比例因子S和偏移因子O;依次对当前帧的所有宏块进行编码,在父块域中的搜索窗内首先对该宏块进行块匹配;在进行子块与父块的匹配过程中,子块的位置作为父块的起始搜索点,父块的大小与子块的大小相同并转入步骤十,执行完步骤十返回之后,如果所得的匹配误差RMS小于开始设定的阈值Y,则保存当前的迭代函数系统系数即IFS系数,转入步骤九编码下一宏块;否则,依次按照树状结构对该块进行划分,并对各个划分得到的小块分别转入步骤十,执行完步骤十返回之后计算匹配误差RMS,如果RMS小于设定阈值Y,则停止划分并记录该小块IFS系数,转入步骤九编码下一宏块;否则继续划分,直到将当前块划分为预先设定的最小块,转入步骤十计算RMS,执行完步骤十返回之后记录IFS系数,转入步骤九编码下一宏块;最后与步骤六所得结果比较,选择误差最小的作为预测结果;所述搜索窗为在参考帧中的矩形搜索区域;所述IFS系数包括父块位置(X,y)和比例因子s、偏移因子ο ;如果当前帧所有的宏块都已编码完毕,则转到步骤十一;步骤十充分利用分数像素块匹配和视差分布约束条件将上一个视差估计矢量作为当前帧的搜索中心,在水平方向沿初始点的右侧进行搜索,在搜索过程中进行跳跃式搜索;点匹配完之后,向右间隔三个点进行搜索,进行比较,直到找到最小的RMS ;同时对分数像素位置进行相同的操作,比较得到更小的RMS,结束DCP搜索过程;步骤十一对所有IFS系数进行Huffman编码,降低IFS系数数据的统计冗余;判断当前帧是否为最后一帧,如果是最后一帧结束编码;否则,返回步骤一继续处理下一帧图像。所述一种快速的双目立体视频分形压缩方法,处理的视频序列为YUV格式,分别对3个分量中的每个采用上述十一个步骤进行处理。所述步骤四中分数像素块匹配,包括以下三个步骤1)对参考帧中搜索区域内的像素进行内插形成一个更高分辨率的区域;2)在内插区域进行整数像素和半像素位置搜索找到最佳匹配;3)用匹配块的仿射变换来替代当前块。所述步骤四中基于运动矢量场的自适应六边形搜索算法,充分根据分形编码的特点,具体如下1)在小十字模式中的五个搜索点中搜索最小匹配误差所在点;应用块匹配准则搜索,如果最小匹配误差点在小十字模式的中心,此时即得到最终要求的最佳匹配误差;否则,转入步骤2);2)以步骤1)搜索到的最小匹配误差点为中心构造新的小十字模式,应用块匹配准则,搜寻3个新的搜索点;再搜索最小匹配误差点,如果搜索到的最小匹配误差点在小十字模式的中心,即得到最终要求的最佳匹配误差;否则,进入步骤3);3)搜索大十字模式3个还没有搜索到的点,应用块匹配准则,搜索新的最小匹配误差点,以作为下一步搜索的中心;4)以上一步的最小匹配误差点为中心,构造六边形搜索模式,应用块匹配准则搜索,找出新的最小匹配误差点,如果该点在六边形的中心,进入步骤5);否则,继续步骤4), 直到最小匹配误差点在六边形的中心;5)以步骤4)所搜索到的位于六边形的中心的最小匹配误差点为中心,构造小十字搜索模式,应用块匹配准则搜索,找出最小匹配误差点,即得到最终要求的最佳匹配误差。所述步骤五中预搜索限制条件为以下形式,其中,bi为子块的像素值, 为父块的
像素值
权利要求
1. 一种快速的双目立体视频分形压缩方法,其特征在于具体步骤如下 步骤一对于左目,首先判断起始帧是否为I帧,若是I帧,则对该帧进行互不重叠的固定大小的块划分,对每一个图像块分别采用基于块DCT变换的I帧帧内图像压缩方法,对图像进行单独编码和解码,转到步骤十一;否则,转到步骤二 ;所述I帧为视频序列起始帧或者视频序列中只进行帧内编码的图像帧;所述将当前帧划分为固定大小的互不重叠的图像块称为宏块;所述将当前宏块进行树状划分得到的块称为小块;所述当前帧为正在进行压缩的帧,所述参考帧为当前帧的已经编码并重建的前一帧;所述当前帧所有块的集合称为子块域;所述前一帧的所有块的集合称为父块域;所述块DCT变换中的块采用固定大小模式;对于右目,转到步骤七;步骤二 若左目为非I 帧,用常规单目的运动补偿预测(MCP)编码,对该帧进行互不重叠的宏块划分,然后计算这些宏块以及经树状划分得到的小块的像素和、像素平方和,以及左目前一帧重建图像即参考帧中,按照设定步长划分的所有宏块以及经树状划分得到的小块的像素和、像素平方和,同时计算分数像素内插值对应块的像素和、像素平方和,转到步骤三;步骤三依次对当前帧的所有宏块进行编码,在父块域中的搜索窗内首先对该宏块进行块匹配;在进行子块与父块的匹配过程中,子块的位置作为父块的起始搜索点,父块的大小与子块的大小相同,转到步骤四;步骤四利用基于运动矢量场的自适应六边形搜索算法,然后利用分数像素块匹配,搜索分数像素内插值对应小块处的RMS点,搜索出最佳的匹配误差RMS,转到步骤五;步骤五预搜索限制条件判断对于特定的子块,若与父块对应值满足预搜索限制条件,则转到步骤六;否则直接保存当前的迭代函数系统系数即IFS系数,转入步骤三编码下一宏块;步骤六如果匹配误差RMS小于开始设定的阈值Y,保存当前的迭代函数系统系数即 IFS系数,转入步骤三编码下一宏块;否则,依次按照树状结构对该块进行划分,并对各个划分得到的小块利用分数像素块匹配和基于运动矢量场的自适应六边形搜索算法,分别计算匹配误差RMS,如果RMS小于设定阈值Y,则停止划分并记录该小块IFS系数,转入步骤三编码下一宏块;否则继续划分,直到将当前块划分为预先设定的最小块,记录IFS系数; 转入步骤三编码下一宏块;所述搜索窗为在参考帧中的矩形搜索区域;所述IFS系数包括父块位置(X,y)和比例因子s、偏移因子ο;如果当前帧所有的宏块都已编码完毕,且是左目,则转到步骤十一;若是右目,则执行步骤八;步骤七对右目图像,首先进行互不重叠的宏块划分,然后计算这些宏块以及经树状划分得到的小块的像素和、像素平方和,以及右目前一帧重建图像参考帧,按照设定步长划分的所有宏块以及经树状划分得到的小块的像素和、像素平方和,同时计算分数像素内插值对应块的像素和、像素平方和,以减少块匹配过程中的重复计算,转到步骤三;步骤八计算左目中对应帧图像的参考帧,按照设定步长划分的所有宏块以及经树状划分得到的小块的像素和、像素平方和,同时计算分数像素内插值对应块的像素和、像素平方和,以减少块匹配过程中的重复计算,转到步骤九;步骤九首先对与当前子块位置相同的父块进行块匹配,得到RMS,并保存迭代函数系统系数,该系数包括父块与子块的相对位移矢量(x,y),比例因子s和偏移因子ο ;依次对当前帧的所有宏块进行编码,在父块域中的搜索窗内首先对该宏块进行块匹配;在进行子块与父块的匹配过程中,子块的位置作为父块的起始搜索点,父块的大小与子块的大小相同并转入步骤十,执行完步骤十返回之后,如果所得的匹配误差RMS小于开始设定的阈值Y, 则保存当前的迭代函数系统系数即IFS系数,转入步骤九编码下一宏块;否则,依次按照树状结构对该块进行划分,并对各个划分得到的小块分别转入步骤十,执行完步骤十返回之后计算匹配误差RMS,如果RMS小于设定阈值Y,则停止划分并记录该小块IFS系数,转入步骤九编码下一宏块;否则继续划分,直到将当前块划分为预先设定的最小块,转入步骤十计算RMS,执行完步骤十返回之后记录IFS系数,转入步骤九编码下一宏块;最后与步骤六所得结果比较,选择误差最小的作为预测结果;所述搜索窗为在参考帧中的矩形搜索区域; 所述IFS系数包括父块位置(X,y)和比例因子s、偏移因子ο ;如果当前帧所有的宏块都已编码完毕,则转到步骤十一;步骤十充分利用分数像素块匹配和视差分布约束条件将上一个视差估计矢量作为为当前帧的搜索中心,在水平方向沿初始点的右侧进行搜索,在搜索过程中进行跳跃式搜索;点匹配完之后,向右间隔三个点进行搜索,进行比较,直到找到最小的RMS ;然后对分数像素位置进行相同的操作,比较得到更小的RMS,结束DCP搜索过程;步骤十一对所有IFS系数进行Huffman编码,降低IFS系数数据的统计冗余;判断当前帧是否为最后一帧,如果是最后一帧结束编码;否则,返回步骤一继续处理下一帧图像。
2.根据权利要求1所述的一种快速的双目立体视频分形压缩方法,其特征在于处理的视频序列为YUV格式,分别对3个分量中的每个采用上述十一个步骤进行处理。
3.根据权利要求1所述的一种快速的双目立体视频分形压缩方法,其特征在于所述步骤四中分数像素块匹配,包括以下步骤1)对参考帧中搜索区域内的像素进行内插形成一个更高分辨率的区域;2)在内插区域进行整数像素和半像素位置搜索找到最佳匹配;3)用匹配块的仿射变换来替代当前块。
4.根据权利要求1所述的一种快速的双目立体视频分形压缩方法,其特征在于所述步骤四中基于运动矢量场的自适应六边形搜索算法,充分根据分形编码的特点,具体如下1)在小十字模式中的五个搜索点中搜索最小匹配误差所在点;应用块匹配准则搜索, 如果最小匹配误差点在小十字模式的中心,此时即得到最终要求的最佳匹配误差;否则,转入步骤2);2)以步骤1)搜索到的最小匹配误差点为中心构造新的小十字模式,应用块匹配准则, 搜寻3个新的搜索点;再搜索最小匹配误差点,如果搜索到的最小匹配误差点在小十字模式的中心,即得到最终要求的最佳匹配误差;否则,进入步骤3);3)搜索大十字模式3个还没有搜索到的点,应用块匹配准则,搜索新的最小匹配误差点,以作为下一步搜索的中心;4)以上一步的最小匹配误差点为中心,构造六边形搜索模式,应用块匹配准则搜索,找出新的最小匹配误差点,如果该点在六边形的中心,进入步骤5);否则,继续步骤4),直到最小匹配误差点在六边形的中心;5)以步骤4)所搜索到的位于六边形的中心的最小匹配误差点为中心,构造小十字搜索模式,应用块匹配准则搜索,找出最小匹配误差点,即得到最终要求的最佳匹配误差。
5.根据权利要求1所述的一种快速的双目立体视频分形压缩方法,其特征在于所述步骤五中预搜索限制条件为以下形式,其中,h为子块的像素值,Bi为父块的像素值
6.根据权利要求1所述的一种快速的双目立体视频分形压缩方法,其特征在于所述步骤六中对宏块采用树状划分,块匹配采用匹配误差准则,子块与父块的匹配误差RMS为
7.根据权利要求1所述的一种快速的双目立体视频分形压缩方法,其特征在于所述步骤十中视差分布约束条件如下1)外极线约束对于左目中的图像上的一点,通过相对定向参数找出右目中的图像上与其对应的极线,其对应点在上述极线上搜索;对于平行系统的视差搜索,只需沿扫描线,进行χ方向的搜索即可;最佳匹配点位于偏振线上即水平线上;在立体平行摄像系统中,沿水平方向进行DCP搜索;两摄像机在同一时刻观看空间同一特征点P (χ。,Jc, ζ。),在左目中的图像和右目中的图像的坐标分别Spleft= (Xleft,Yleft) ,Pright= (Xright,Yright);其中点 P(x。,y。,z。)与两个光心所确定的平面称为偏振平面,偏振平面与左右图像的交线称为偏振线;由几何关系得到,其中f表示摄像机的焦距,B为两摄像机的投影中心连线的距离,即基线距,zc为世界坐标系下特征点P的Z坐标
8.一种快速的双目立体视频分形解压缩方法,包含以下步骤步骤I 首先读入左目压缩信息,包括压缩帧数,每帧图像的宽和高,I帧压缩质量和插入I帧的间隔;步骤II 判断解码帧是否为I帧,若是I帧转入步骤III,否则转入步骤IV ; 步骤III 对于I帧,从压缩文件中读入码流进行解码,帧数加一转入步骤VIII ; 步骤IV 对于非I帧,计算左目前一帧中按照设定步长划分的所有宏块以及经树状划分得到的小块的像素和、像素平方和;步骤V 读入右目压缩信息,包括压缩帧数,每帧图像的宽和高,I帧压缩质量和插入I 帧的间隔;计算右目前一帧和左目对应帧中按照设定步长划分的所有宏块以及经树状划分得到的小块的像素和、像素平方和,转入步骤VI ;步骤VI 从对应的压缩文件中读入块的划分信息和Huffman码流,从而得到该帧所有宏块的划分方式和每一个小块的迭代函数系统系数,转入步骤VII ;步骤VII 采用去方块环路滤波方法首先对边界的类型进行判断,定义参数块边缘强度,针对不同强度的块边缘,选择的滤波器和所需要滤波的像素点数也不一样,如果为帧内编码且为宏块边界,则采用强滤波;若不是帧内编码且不是宏块边界,仿射块边界采用一级滤波,非仿射块边界不需要滤波;其他情况采用二级滤波;最后按照每一宏块进行解码;步骤VIII 判断此时所有帧是否都已解码,若都解码完毕,结束解码过程,否则转入步骤II。
9.根据权利要求8所述的一种快速的双目立体视频分形解压缩方法,其特征在于对于每一个宏块进行解压缩时,首先判断该宏块在编码时的划分方式,对于每一个子块,首先在父块域找到与该子块相对应的区域,然后利用下面的公式获得该子块的像素值,Ti = S* di+o(7)其中A为待解码子块的像素值,di为父块域中的像素值,S为比例因子,O为偏移因子。
10.根据权利要求8所述的一种快速的双目立体视频分形解压缩方法,所述步骤VII中的块边缘强度用BS表示;其中,Pc/ ,Q0' ,P1' ,Q1'表示滤波后的像素值,PwPnQc^Q1表示原始的像素值,不同的BS和对应的滤波器如下BS = 3时,需要进行强滤波,滤波器表示为
11.根据权利要求8所述的一种快速的双目立体视频分形解压缩方法,其特征在于在快速的双目分形视频解压缩方法过程中,左目用常规单目的运动补偿预测(MCP)编码,右目的每个图像块通过运动补偿预测(MCP)和视差补偿预测(DCP)两种方式进行预测,从中选择误差较小的一种作为预测结果。
12.根据权利要求8所述的一种快速的双目立体视频分形解压缩方法,其特征在于处理的视频序列为YUV格式,分别对3个分量中的每个采用上述八个步骤进行处理。
全文摘要
本发明提出了一种快速的双目立体视频分形压缩与解压缩方法,在编码中以左通道为基本层,采用单独的运动补偿预测方式(MCP)进行编码,首先对左目的起始帧采用块DCT变换编码,对左目的非I帧进行块运动估计/补偿编码,计算与子块域和父块域相关子块的像素和与像素平方和,同时计算分数像素内插值对应块的像素和、像素平方和,然后进行预搜索限制条件判断,并在前一帧搜索窗中利用分数像素块匹配和基于运动矢量场的自适应六边形搜索算法寻找最相似的匹配块。右通道为增强层,采用MCP加视差补偿预测方式(DCP)进行编码,选择误差最小的作为预测结果。在进行DCP编码方式时,充分利用分数像素块匹配和视差分布约束条件。在解码过程中利用去方块环路滤波进行解码。
文档编号H04N7/50GK102316323SQ20111018875
公开日2012年1月11日 申请日期2011年7月6日 优先权日2011年7月6日
发明者侯仰拴, 王再阔, 祝世平, 陈菊嫱 申请人:北京航空航天大学
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1