一种帧处理方法及装置的制造方法
【技术领域】
[0001] 本发明设及图像技术领域,尤其设及一种帖处理方法及装置。
【背景技术】
[0002] 目前,帖率为50化(赫兹)或者60化的发光二极管(英文:light emitting diode, 缩写:L邸)显示屏、液晶显示器(英文:liquid c巧stal display,缩写:LCD)越来越流行,帖 率为50化或者60化的视频(由帖序列组成)也越来越普及。然而,由于网络带宽的限制,提供 片源的视频服务器在传输视频时,通常只将该视频的帖序列中的奇数帖序列或者偶数帖序 列编码为码流(该码流的帖率为25化或者30化)后传输给终端,如此可W降低视频传输过程 中占用的网络带宽。
[0003] 由于终端接收的是基于奇数帖序列或者偶数帖序列编码的码流,导致该码流的帖 率低于终端的屏幕的帖率,因此,为了提高码流的帖率W更好的和终端的屏幕的帖率匹配, 终端接收到该码流并对该码流进行解码W得到重构的奇数帖序列或者重构的偶数帖序列 (W下简称为重构的主帖序列)后,采用运动估计运动补偿(英文:mot ion estimation motion compensation,缩写:MEMC)技术,对帖序列进行帖率上转换(英文:frame rate up conversion,缩写:F抓C),具体的,首先通过运动估计(英文:motion estimation,缩写:ME) 获取重构的帖序列中每相邻两帖之间的运动矢量(英文:motion vector,缩写:MV),然后采 用运动补偿插值(英文:mot ion compensated inte;rpolat ion,缩写:MCI)算法,根据MV对该 相邻两帖进行插值运算,W获取该相邻两帖之间的插帖,该插帖即可理解为相邻两奇数帖 之间的偶数帖,或者相邻两偶数帖之间的奇数帖。
[0004] 然而,在上述方法中,终端获取的相邻两重构帖之间的插帖与原帖序列中的偶数 帖或者奇数帖,可能会出现误差过大的情况,从而当终端将获得的插帖序列与重构帖序列 合并输出时,输出的图像可能会出现光晕效应或者发生破损,导致终端呈现的图像的质量 较低。
【发明内容】
[0005] 有鉴于此,本发明提供一种帖处理方法及装置,能够提高终端输出的图像的质量。
[0006] 为达到上述目的,本发明采用如下技术方案:
[0007] 第一方面,本发明实施例提供一种帖处理方法,包括:
[000引将帖序列分离成主帖序列和附属帖序列;
[0009] 获取所述主帖序列的插帖序列;
[0010] 将所述附属帖序列和所述插帖序列相减W获取第一残差帖序列;
[0011] 将对所述主帖序列进行编码后形成的主码流和对所述第一残差帖序列进行编码 后形成的附属码流进行合并W形成传输码流;
[0012] 将所述传输码流发送给终端,W便于所述终端根据所述传输码流恢复出所述帖序 列。
[0013] 本发明实施例提供的帖处理方法中,视频服务器能够获取帖序列中的附属帖序列 与插帖序列之间的第一残差帖序列,该第一残差帖序列用于减少附属帖序列与插帖序列之 间的误差,W提高终端输出的图像的质量。即当视频服务器通过将该第一残差帖序列经过 编码后发送至终端后,W使得终端能够根据重构的该第一残差帖序列和插帖序列获取重构 的附属帖序列,由于重构的附属帖序列与帖序列中的附属帖序列之间的误差,远小于插帖 序列与附属帖序列之间的误差,因此,终端将所述重构的附属帖序列和所述重构的主帖序 列合并获得的重构的帖序列输出后,呈现的图像的质量,远远高于现有技术中终端将插帖 序列与重构的主帖序列合并获取的重构的帖序列输出后所呈现的图像的质量,即通过本发 明提供的帖处理方法,能够提高终端输出的图像质量。
[0014] 可选的,结合上述第一方面,在第一种可能的实现方式中,所述将所述附属帖序列 和所述插帖序列相减W获取第一残差帖序列,包括:
[0015] 将所述附属帖序列与所述插帖序列相减后所得的残差帖序列直接作为第一残差 帖序列。
[0016] 可选的,结合上述第一方面,在第一方面的第二种可能的实现方式中,所述将所述 附属帖序列和所述插帖序列相减W获取第一残差帖序列,包括:
[0017] 将所述附属帖序列与所述插帖序列相减后所得的残差帖序列进行预处理,将预处 理后的所述残差帖序列作为第一残差帖序列。
[0018] 可选的,结合上述第一方面的第二种可能的实现方式,在第Ξ种可能的实现方式 中,所述将残差帖序列进行预处理包括如下四种方式中的一种或多种:
[0019] 将所述残差帖序列中每个残差帖的色度分量置零;
[0020] 根据预设的缩放比例将所述残差帖序列中每个残差帖的分辨率进行缩小;
[0021] 根据预设的噪声值将所述残差帖序列中每个残差帖的像素进行去噪;W及
[0022] 根据预设的量化值将所述残差帖序列中每个残差帖的像素进行量化。
[0023] 可选的,结合上述第一方面的第Ξ种可能的实现方式,在第四种可能的实现方式 中,所述方法还包括:
[0024] 将对所述残差帖序列进行预处理时所采用的参数合并到所述传输码流中发送给 所述终端,所述参数包括所述缩放比例、所述噪声值W及所述量化值中的至少一种。
[0025] 可选的,结合上述第一方面,在第一方面的第五种可能的实现方式中,所述将所述 附属帖序列和所述插帖序列相减W获取第一残差帖序列,包括:
[0026] 将在所述附属帖序列中属于所述帖序列的指定区域的序列和在所述插帖序列中 属于所述指定区域的序列相减后所得的残差帖序列作为第一残差帖序列。
[0027] 可选的,结合上述第一方面,在第一方面的第六种可能的实现方式中,所述将所述 附属帖序列和所述插帖序列相减W获取第一残差帖序列,包括:
[0028] 将在所述附属帖序列中属于所述帖序列的指定区域的序列和在所述插帖序列中 属于所述指定区域的序列相减后所得的残差帖序列进行预处理,将进行预处理后的所述残 差帖序列作为第一残差帖序列。
[0029] 可选的,结合上述第一方面的第五种可能的实现方式或者第一方面的第六种可能 的实现方式,在第屯种可能的实现方式中,所述方法还包括:
[0030] 将所述指定区域的信息合并到所述传输码流中发送给所述终端。
[0031] 上述第一方面的第二种可能实现方式至上述第一方面的第六种可能的实现方式 中的任一种实现方式,都能够减小第一残差帖序列的比特数,从而能够减少视频服务器在 向终端传输第一残差帖序列经编码后生成的附属码流时,该附属码流占用的网络带宽。
[0032] 可选的,结合上述第一方面或者第一方面的第一种可能的实现方式至第一方面的 第屯种可能的实现方式中的任一种实现方式,在第八种可能的实现方式中,所述获取所述 主帖序列的插帖序列包括:
[0033] 通过帖率上转换算法对所述主帖序列进行帖率上转换W获取所述插帖序列和运 动矢量MV,所述MV用于所述终端对重构的所述主帖序列进行帖率上转换;
[0034] 所述附属码流中还包括所述MV。
[0035] 第二方面,本发明实施例提供一种帖处理方法,包括:
[0036] 接收传输码流,并将所述传输码流分离成主码流和附属码流;
[0037] 对所述主码流和所述附属码流分别进行解码W获取重构的主帖序列和重构的第 一残差帖序列;
[0038] 获取所述重构的主帖序列的插帖序列;
[0039] 根据所述重构的第一残差帖序列和所述插帖序列获取重构的附属帖序列;
[0040] 将所述重构的主帖序列和所述重构的附属帖序列进行合并W形成重构的帖序列。 [0041 ]本发明提供的帖处理方法中,终端能够根据视频服务器发送的附属码流解码获取 重构的第一残差帖序列,且当终端获取插帖序列后,终端能够进一步根据重构的第一残差 帖序列和该插帖序列获取重构的附属帖序列,由于第一残差帖序列是视频服务器根据帖序 列中的附属帖序列与插帖序列相减获取的,因此,重构的附属帖序列与帖序列中的附属帖 序列之间的误差,远小于插帖序列与附属帖序列之间的误差,因此,当终端将所述重构的附 属帖序列和所述重构的主帖序列合并形成的重构的帖序列输出后所呈现的图像的质量,高 于现有技术中终端将插帖序列与重构的主帖序列合并形成的重构的帖序列输出后所呈现 的图像的质量,即通过本发明提供的帖处理方法,能够提高终端输出的图像质量。
[0042] 可选的,结合上述第二方面,在第二方面的第一种可能的实现方式中,所述根据所 述重构的第一残差帖序列和所述插帖序列获取重构的附属帖序列,包括:
[0043] 将所述插帖序列与所述重构的第一残差帖序列相加 W获取所述重构的附属帖序 列。
[0044] 可选的,结合上述第二方面,在第二方面的第二种可能的实现方式中,所述根据所 述重构的第一残差帖序列和所述插帖序列获取重构的附属帖序列,包括:
[0045] 对所述重构的第一残差帖序列进行预处理;
[0046] 将所述插帖序列与进行预处理后的所述重构的第一残差帖序列相加 W获取所述 重构的附属帖序列。
[0047] 可选的,结合上述第二方面的第二种可能的实现方式,在第Ξ种可能的实现方式 中,所述传输码流中还包括缩放比例、噪声值,W及量化值中的至少一种,
[004引所述对所述重构的第一残差帖序列进行预处理如下四种方式中的一种或多种:
[0049] 将所述重构的第一残差帖序列中每个残差帖的色度分量置零;
[0050] 根据预设的缩放比例将所述重构的第一残差帖序列中每个重构的第一残差帖的 分辨率进行放大;
[0051] 根据预设的噪声值将所述重构的第一残差帖序列中每个重构的第一残差帖的像 素进行反去噪;W及
[0052] 根据预设的量化值将所述重构的第一残差帖序列中每个重构的第一残差帖的像 素进行反量化。
[0053] 可选的,结合上述第二方面,在第二方面的第四种可能的实现方式中,所述传输码 流中还包括指定区域的信息,
[0054] 所述将所述插帖序列与所述重构的第一残差帖序列相加 W获取所述重构的附属 帖序列,包括:
[0055] 根据所述指定区域的信息确定所述插帖序列中属于所述指定区域的序列;
[0056] 将所述插帖序列中属于所述指定区域的序列与所述重构的第一残差帖序列相加 W获取所述重构的附属帖序列。
[0057] 可选的,结合上述第二方面,在第二方面的第五种可能的实现方式中,所述传输码 流中还包括指定区域的信息,
[005引所述根据所述重构的第一残差帖序列和所述插帖序列获取重构的附属帖序列,包 括:
[0059] 对所述重构的第一残差帖序列进行预处理;
[0060] 根据所述指定区域的信息确定所述插帖序列中属于所述指定区域的序列;
[0061] 将所述插帖序列中属于所述指定区域的序列与进行预处理后的所述重构的第一 残差帖序列相加 W获取所述重构的附属帖序列。
[0062] 可选的,结合上述第二方面或第二方面的第一种可能的实现方式至第二方面的第 五种可能的实现方式中的任一种实现方式,在第六种可能的实现方式中,所述附属码流中 还包括运动矢量MV,
[0063] 所述对获取所述重构的主帖序列的插帖序列,包括:
[0064] 根据所述MV,通过帖率上转换算法对所述重构的主帖序列进行帖率上转换W获取 所述插帖序列。
[0065] 第Ξ方面,本发明实施例提供一种视频服务器,包括:
[0066] 分离单元,用于将帖序列分离成主帖序列和附属帖序列;
[0067] 获取单元,用于获取所述分离单元分离的所述主帖序列的插帖序列;
[0068] 所述获取单元,还用于将所述附属帖序列和所述插帖序列相减W获取第一残差帖 序列;
[0069] 合并单元,用于将对所述主帖序列进行编码后形成的主码流和对所述第一残差帖 序列进行编码后形