专利名称：一种视频编解码方法、系统的利记博彩app
技术领域：
本发明属于视频编解码技术领域，尤其涉及一种视频编解码方法、系统。
背景技术：
由于视频数据量庞大而网络频宽有限，视频在网络传输时一般都需要经过压缩以减少数据传输量。现在的网络视频压缩的方法都是单向的，并没有根据收看视频的用户状态去进行压缩处理。人类的视觉系统一般只有在中心点起计2度左右的视野是清晰的，而此角度以外的影像会随着角度越大而越模糊。模糊的影像部份大多数是通过人脑的记忆把细节填补，从而在脑海中重建整个影像。因此视频在每一个时刻的数据量都是远远高于用户实际能观察到的数据量。·
目前有一种方法是利用仪器跟踪观看视频者(下称用户)的视线，从而找出该视线在视频上的聚焦点，然后通过算法把没有被聚焦的影像模糊化，使该区域的影像数据变得接近，从而减少视频经压缩后的数据量。这种方法的用途主要是作生物研究而非减少视频的数据量。另一种类似做法是通过一个高解像度但视角小的摄像机拍摄用户的聚焦点，将该聚焦点和一个低解像度但视角大的摄像机拍摄所生成的影像迭加而成一个带有用户聚焦点，聚焦点部分清晰而其余影像模糊的影像。综上所述，现有技术需要使用仪器或者一定的算法来对视频影像进行处理，实现时需要人力或者具有快速计算能力的资源的大力配合，效率不高。
发明内容
本发明实施例提供了一种视频编解码方法、系统，旨在解决现有技术对视频影像的处理效率不高的问题。一方面，提供一种视频编解码方法，所述方法包括检测用户眼球在视频画面上的聚焦点；以所述聚焦点为中心，将采集的视频影像分割成预设个数的影像区域，所述影像区域至少包括第一影像区和底层影像区；根据所述影像区域的边框，将所述视频影像拆分成至少两个独立视频影像；对拆分后的所述独立视频影像执行透明化处理；按照预设的缩小比例逐个缩小所述独立视频影像，每个独立视频影像对应的缩小比例不同，离所述聚焦点的距离越近，所述独立视频影像对应的缩小比例值越大；对缩小后的所述独立视频影像逐个独立地进行视频编码，生成编码视频影像；对所述编码视频影像进行视频解码，得到与所述独立视频影像相对应的缩小独立视频影像；按照所述缩小比例逐个将所述缩小独立视频影像恢复至缩小前的尺寸；
根据对所述独立视频影像执行透明化处理时所使用的透明值，对放大后的所述缩小独立视频影像进行处理；以所述聚焦点为中心，对设置透明值后的所述缩小独立视频影像进行合并，生成一副完整的视频影像。进一步地，所述底层影像区的边框的形状及大小与所述视频影像的边框的形状及大小相同，除所述底层影像区 以外的其它影像区域的面积，以所述其它影像区域离所述聚焦点的距离递增的方式设定；除所述底层影像区以外的其它影像区域的面积是预设的；或者，根据用户与显示屏的距离而调节，用户与显示屏越近，所述影像区域的面积越小。进一步地，所述对拆分后的所述独立视频影像执行透明化处理具体包括将拆分后的所述独立视频影像中没有影像信息的区域设定为一种透明值；和/或，将拆分后的所述独立视频影像之间重复的影像信息设定为一种透明值。进一步地，在所述按照预设的缩小比例逐个缩小所述多个独立视频影像之后，还包括按照预设的颜色分辨率逐个调节所述多个独立视频影像的颜色分辨率，每个独立视频影像对应的颜色分辨率不同，离所述聚焦点的距离越近，独立视频影像对应的颜色分辨率越大。进一步地，在所述按照所述缩小比例逐个将所述多个缩小独立视频影像恢复至缩小前的尺寸之后，还包括对恢复至缩小前尺寸的所述缩小独立视频影像进行平滑化处理。另一方面，提供一种视频编解码系统，所述视频编解码系统包括用户端和视频采集端;所述用户端包括聚焦点获取单元，用于检测用户眼球在视频画面上的聚焦点，并发送所述聚焦点至所述视频采集端；所述视频采集端包括分割单元，用于以所述聚焦点为中心，将采集的视频影像分割成预设个数的影像区域，所述影像区域至少包括第一影像区和底层影像区；拆分单元，用于根据所述多个影像区域的边框，将所述视频影像拆分成至少两个独立视频影像；第一透明化处理单元，用于将拆分后的所述独立视频影像执行透明化处理；缩小单元，用于按照预设的缩小比例逐个缩小所述独立视频影像，每个独立视频影像对应的缩小比例不同，离所述聚焦点的距离越近，所述独立视频影像对应的缩小比例值越大；编码单元，用于对缩小后的所述独立视频影像逐个独立地进行视频编码，生成编码视频影像，并发送所述编码视频影像、所述缩小比例值和对所述独立视频影像执行透明化处理时所使用的透明值至所述用户端；所述用户端还包括
解码单元，用于对所述编码视频影像进行视频解码，得到与所述独立视频影像相对应的缩小独立视频影像；放大单元，用于按照所述视频采集端发送的缩小比例逐个将所述缩小独立视频影像恢复至缩小前的尺寸；第二透明化处理单元，用于按照所述视频采集端发送的透明值，对放大后的所述缩小独立视频影像进行处理；影像合并单元，用于以所述视频采集端发送的聚焦点为中心，对设置透明值后的所述缩小独立视频影像进行合并，生成一副完整的视频影像。进一步地，所述用户端还包括平滑处理单元，用于对恢复至缩小前尺寸的所述缩小独立视频影像进行平滑化处·理。进一步地,所述视频采集端还包括分辨率调节单元，用于按照预设的颜色分辨率逐个调节所述独立视频影像的颜色分辨率，每个独立视频影像对应的颜色分辨率不同，离所述聚焦点的距离越近，独立视频影像对应的颜色分辨率越大。进一步地，所述底层影像区的边框的形状及大小与所述视频影像的边框的形状及大小相同，除所述底层影像区以外的其它影像区域的面积，以所述其它影像区域离所述聚焦点的距离递增的方式设定；除所述底层影像区以外的其它影像区域的面积是预设的；或者，根据用户与显示屏的距离而调节，用户与显示屏越近，所述影像区域的面积越小。进一步地，所述第一透明化处理单元包括第一透明化处理模块，用于将拆分后的所述独立视频影像中没有影像信息的区域设定为一种透明值；和/或，第二透明化处理模块，用于将拆分后的所述独立视频影像之间重复的影像信息设定为一种透明值。在本发明实施例中，在进行视频编码前，先获取用户眼球在视频画面上的聚焦点，再根据所述聚焦点对视频影像进行区域划分，然后，再根据划分出的各个影像的边框将视频影像分割成至少两个独立视频影像，再对所述独立视频影像按比例逐个缩小，最后将缩小后的各个独立视频影像进行视频编码，后续，系统即可根据进行视频编码前的处理，执行相应的解码处理。由于离聚焦点的距离越近的独立视频影像对应的缩小比例值越大，因此能有效保留用户眼球聚焦点附近的视频影像的清晰度，同时减少不被关注的视频影像的数据量。并且本发明实施例全程是用户端和视频采集端自动执行的，不需要另外的仪器，因此可以节省人力成本，另外，本发明实施例也不需要执行一定的算法，对处理器的计算能力要求比较低，简单易行，效率高。
图I是本发明实施例一提供的视频编解码方法的实现流程图；图2是本发明实施例一提供的视频影像进行区域分割后的示意图；图3是本发明实施例一提供的进行分拆后的多个独立视频影像的示意图4是本发明实施例一提供的多个独立视频影像的缩小过程示意图；图5是本发明实施例二提供的视频编解码系统的结构框图。
具体实施例方式为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。在本发明实施例中，在进行视频编码前，先获取用户眼球在视频画面上的聚焦点，再根据所述聚焦点对视频影像进行区域划分，然后，再根据划分出的各个影像的边框将视频影像分割成至少两个独立视频影像，再对所述独立视频影像按比例逐个缩小，最后将缩小后的各个独立视频影像进行视频编码，后续，系统即可根据进行视频编码前的处理，执行 相应的解码处理。以下结合具体实施例对本发明的实现进行详细描述实施例一图I示出了本发明实施例一提供的视频编码方法的实现流程图，为了便于说明，仅示出了与本发明实施例相关的部分，详述如下在步骤SlOl中，检测用户眼球在视频画面上的聚焦点。在本发明实施例中，用户端利用立体摄像机拍摄用户，并获取用户眼球相对显示屏的三维位置，然后再通过检测用户眼球的姿态角度，从而判断出用户在视频画面上的聚焦点，最后发送聚焦点的信息至视频采集端。需要说明的是，显示屏是用户端的显示屏，视频画面显示在显示屏上。在步骤S102中，以所述聚焦点为中心，将采集的视频影像分割成预设个数的影像区域，所述影像区域至少包括第一影像区和底层影像区，所述底层影像区的边框的形状及大小与所述视频影像的边框的形状及大小相同，除所述底层影像区以外的其它影像区域的面积，以所述其它影像区域离所述聚焦点的距离递增的方式设定。在本发明实施例中，用户端检测得到用户眼球在画面上的聚焦点后，发送该聚焦点至视频采集端，视频采集端将所采集的视频影像以该聚焦点为中心分割成多个影像区域，如图2所示。其中，影像区域的数目不限，但至少包括第一影像区和底层影像区，在图2中，视频影像被划分为以聚焦点为中心的第一影像区、第二影像区、第三影像区和底层影像区。影像区域的边框可以如图2所示由圆形构成，也可以是由其它不同形状组成；而底层影像区的边框的形状及大小要与视频影像的边框的形状及大小相同，这样才能完整、准确的包括整个视频影像。除底层影像区以外，其它影像区域的面积需以所述其它影像区域离所述聚焦点的距离递增的方式设定。如第一影像区域比第二影像区域面积小，而第二影像区域比第三影像区域面积小，如此类推。其它影像区域的面积可以是预设的，也可以是跟据用户与显示屏的距离而调节，即用户与显示屏距离越近，影像区域的面积相应缩小。在步骤S103中，根据所述影像区域的边框，将所述视频影像拆分成至少两个独立视频影像。在本发明实施例中，当对视频影像分区完成后，根据图2所示的多个影像区域的边框将该视频影像拆分成多个独立影像，如图3所示，视频影像被拆分成4个独立视频影像，包括第一影像、第二影像、第三影像和底层影像。独立视频影像的外形以矩形为主并能完全覆盖各个影像区域的边框。在步骤S104中，对拆分后的所述独立视频影像执行透明化处理。在本实施例中，可以将拆分后的独立视频影像中没有影像信息的区域设定为一种透明值；也可以将拆分后的所述独立视频影像之间重复的影像信息设定为一种透明值。比如，以单一色调，如黑色填补独立视频影像中没有影像信息的区域或设定一种透明值，以该透明值填补独立视频影像中没有影像信息的区域如图3，所示，该部分中的影像信息以黑色表不。在步骤S105中，按照预设的缩小比例逐个缩小所述独立视频影像，每个独立视频影像对应的缩小比例不同，离所述聚焦点的距离越近，所述独立视频影像对应的缩小比例值越大。
在本实施例中，如图4所示，将分拆后得到的独立视频影像按设定的比例缩小，每个独立视频影像对应的颜色分辨率不同。其中一个有效的方法是以递减的方式设定缩小比例，即离聚焦点的距离越近的独立视频影像对应的缩小比例值越大。如第一影像的缩小比例是100%，第二影像的缩小比例是80%，如此类推。此方法能有效保留用户眼球聚焦点附近的视频影像的清晰度，同时减少不被关注的视频影像的数据量。此外，对独立视频影像的颜色分辨率也可以以递减的方式设定，即离聚焦点的距离越近的独立视频影像对应的颜色分辨率越大，以进一步减低影像数据量。在步骤S106中，按照预设的缩小比例逐个缩小所述独立视频影像，每个独立视频影像对应的缩小比例不同，离所述聚焦点的距离越近，所述独立视频影像对应的缩小比例值越大。在本实施例中，经缩小处理后的独立视频影像会独立地进行视频编码，如H. 264等编码，并经过网络传送至用户端。此外，各个独立视频影像的透明值、缩小比例以及步骤SlOl检测到的聚焦点会同时以数据的形式传送至用户端。在步骤S107中，按照预设的缩小比例逐个缩小所述独立视频影像，每个独立视频影像对应的缩小比例不同，离所述聚焦点的距离越近，所述独立视频影像对应的缩小比例值越大。在本实施例中，用户端接收到从视频采集端传送过来的数据和影像后，会先对独立的编码视频影像以相应的解码方法(如H. 264)进行解码，得到多个缩小独立视频影像。在步骤S108中，按照所述缩小比例逐个将所述缩小独立视频影像恢复至缩小前的尺寸。在本实施例中，用户端根据视频采集端所发送的每一个独立视频影像的缩小比例，把解码得到的缩小独立视频影像复原到原来大小，经过缩小再放大后的独立视频影像会变得模糊，但这些变模糊的影像区域都是用户不关注的区域。在步骤S109中，根据对所述独立视频影像执行透明化处理时所使用的透明值，对放大后的所述缩小独立视频影像进行处理。在本实施例中，放大后的缩小独立视频影像亦可进行平滑化处理，以减少锯齿状影像。然后套用进行视频编码前每个独立视频影像的透明值到每一个放大后的缩小独立影像中。
在步骤SllO中，以所述聚焦点为中心，对设置透明值后的所述缩小独立视频影像进行合并，生成一副完整的视频影像。在本实施例中，将经处理后的多个独立视频影像，最后以聚焦点为中心重迭在底层影像之上，从而形成一幅完整的视频影像，完整的视频影像最后会传送至显示屏进行显
/Jn ο本发明实施例，在进行视频编码前，先获取用户眼球在视频画面上的聚焦点，再根据所述聚焦点对视频影像进行区域划分，然后，再根据划分出的各个影像的边框将视频影像分割成至少两个独立视频影像，再对所述独立视频影像按比例缩小，最后将缩小后的每个独立视频影像进行视频编码，后续，系统即可根据进行网络视频编码前的处理，执行相应的解码处理。由于离聚焦点的距离越近的独立视频影像对应的缩小比例值越大，因此能有效保留用户眼球聚焦点附近的视频影像的清晰度，同时减少不被关注的视频影像的数据量。并且本发明实施例全程是用户端和视频采集端自动执行的，不需要另外的仪器，因此可以节省人力成本，另外，本发明实施例也不需要执行一定的算法，对处理器的计算能力要求 比较低，简单易行，效率高。实施例二图5示出了本发明实施例二提供的视频编解码系统的结构框图，为了便于说明，仅示出了与本发明实施例相关的部分，所述视频编解码系统包括用户端51和视频采集端52。其中，所述用户端51包括聚焦点获取单元511、解码单元512、放大单元513、第二透明化处理单元514和影像合并单元515。其中，聚焦点获取单元511，用于检测用户眼球在视频画面上的聚焦点，并发送所述聚焦点至所述视频采集端。所述视频采集端52包括分割单元521、拆分单元522、第一透明化处理单元523、缩小单元524和编码单元525。其中，分割单元521，用于以所述聚焦点为中心，将采集的视频影像分割成预设个数的影像区域，所述影像区域至少包括第一影像区和底层影像区，其中，所述底层影像区的边框大小与所述视频影像的边框大小相同，除所述底层影像区以外的其它影像区域的边框大小；另外，每个影像区域对应的边框大小不同，离所述聚焦点的距离越近，边框越小，每个影像区域对应的边框大小可以是预设的，也可以根据用户与显示屏的距离而调节，用户与显示屏越近，影像区域对应的边框越小；拆分单元522，用于根据所述影像区域的边框，将所述视频影像拆分成至少两个独立视频影像；第一透明化处理单元523，用于将拆分后的所述独立视频影像执行透明化处理；缩小单元524，用于按照预设的缩小比例逐个缩小所述独立视频影像，每个独立视频影像对应的缩小比例不同，离所述聚焦点的距离越近，所述独立视频影像对应的缩小比例值越大；编码单元525，用于对缩小后的所述独立视频影像逐个独立地进行视频编码，生成编码视频影像，并发送所述编码视频影像、所述缩小比例值和对所述独立视频影像执行透明化处理时所使用的透明值至所述用户端；
解码单元512，用于对所述视频采集端52发送的编码视频影像进行视频解码，得到与所述独立视频影像相对应的缩小独立视频影像；放大单元513，用于按照所述视频采集端52发送的缩小比例逐个将所述缩小独立视频影像恢复至缩小前的尺寸；第二透明值设置单元514，用于按照所述视频采集端52发送的透明值，对放大后的所述缩小独立视频影像进行处理；影像合并单元515，用于以所述视频采集端52发送的聚焦点为中心，对设置透明值后的所述缩小独立视频影像进行合并，生成一副完整的视频影像。进一步地，作为本发明的一个优选实施例，所述用户端51还包括平滑处理单元，该单元用于对恢复至缩小前尺寸的所述多个缩小独立视频影像进行平滑化处理。进一步地，作为本发明的一个优选实施例，所述视频采集端52还包括分辨率调节单元，该单元用于按照预设的颜色分辨率逐个调节每个独立视频影像的颜色分辨率，每·个独立视频影像对应的颜色分辨率不同，离所述聚焦点的距离越近，独立视频影像对应的颜色分辨率越大。进一步地，所述第一透明化处理单元523包括第一透明化处理模块和、或第二透明化处理模块，其中，第一透明化处理模块用于将拆分后的所述独立视频影像中没有影像信息的区域设定为一种透明值；第二透明化处理模块，于将拆分后的所述独立视频影像之间重复的影像信息设定为一种透明值。值得注意的是，上述系统实施例中，所包括的各个单元只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。另外，本领域普通技术人员可以理解实现上述各实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，相应的程序可以存储于一计算机可读取存储介质中，所述的存储介质，如R0M/RAM、磁盘或光盘等。以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。
权利要求
1.一种视频编解码方法，其特征在于，所述方法包括 检测用户眼球在视频画面上的聚焦点； 以所述聚焦点为中心，将采集的视频影像分割成预设个数的影像区域，所述影像区域至少包括第一影像区和底层影像区； 根据所述影像区域的边框，将所述视频影像拆分成至少两个独立视频影像； 对拆分后的所述独立视频影像执行透明化处理； 按照预设的缩小比例逐个缩小所述独立视频影像，每个独立视频影像对应的缩小比例不同，离所述聚焦点的距离越近，所述独立视频影像对应的缩小比例值越大； 对缩小后的所述独立视频影像逐个独立地进行视频编码，生成编码视频影像； 对所述编码视频影像进行视频解码，得到与所述独立视频影像相对应的缩小独立视频影像； 按照所述缩小比例逐个将所述缩小独立视频影像恢复至缩小前的尺寸； 根据对所述独立视频影像执行透明化处理时所使用的透明值，对放大后的所述缩小独立视频影像进行处理； 以所述聚焦点为中心，对设置透明值后的所述缩小独立视频影像进行合并，生成一副完整的视频影像。
2.如权利要求I所述的方法，其特征在于，所述底层影像区的边框的形状及大小与所述视频影像的边框的形状及大小相同，除所述底层影像区以外的其它影像区域的面积，以所述其它影像区域离所述聚焦点的距离递增的方式设定； 除所述底层影像区以外的其它影像区域的面积是预设的；或者， 根据用户与显示屏的距离而调节，用户与显示屏越近，所述影像区域的面积越小。
3.如权利要求I所述的方法，其特征在于，所述对拆分后的所述独立视频影像执行透明化处理具体包括 将拆分后的所述独立视频影像中没有影像信息的区域设定为一种透明值；和/或， 将拆分后的所述独立视频影像之间重复的影像信息设定为一种透明值。
4.如权利要求I所述的方法，其特征在于，在所述按照预设的缩小比例逐个缩小所述多个独立视频影像之后，还包括 按照预设的颜色分辨率逐个调节所述多个独立视频影像的颜色分辨率，每个独立视频影像对应的颜色分辨率不同，离所述聚焦点的距离越近，独立视频影像对应的颜色分辨率越大。
5.如权利要求I所述的方法，其特征在于，在所述按照所述缩小比例逐个将所述多个缩小独立视频影像恢复至缩小前的尺寸之后，还包括 对恢复至缩小前尺寸的所述缩小独立视频影像进行平滑化处理。
6.一种视频编解码系统，其特征在于，所述视频编解码系统包括用户端和视频采集端; 所述用户端包括 聚焦点获取单元，用于检测用户眼球在视频画面上的聚焦点，并发送所述聚焦点至所述视频米集端； 所述视频采集端包括分割单元，用于以所述聚焦点为中心，将采集的视频影像分割成预设个数的影像区域，所述影像区域至少包括第一影像区和底层影像区； 拆分单元，用于根据所述多个影像区域的边框，将所述视频影像拆分成至少两个独立视频影像； 第一透明化处理单元，用于将拆分后的所述独立视频影像执行透明化处理； 缩小单元，用于按照预设的缩小比例逐个缩小所述独立视频影像，每个独立视频影像对应的缩小比例不同，离所述聚焦点的距离越近，所述独立视频影像对应的缩小比例值越大； 编码单元，用于对缩小后的所述独立视频影像逐个独立地进行视频编码，生成编码视频影像，并发送所述编码视频影像、所述缩小比例值和对所述独立视频影像执行透明化处理时所使用的透明值至所述用户端； 所述用户端还包括 解码单元，用于对所述编码视频影像进行视频解码，得到与所述独立视频影像相对应的缩小独立视频影像； 放大单元，用于按照所述视频采集端发送的缩小比例逐个将所述缩小独立视频影像恢复至缩小前的尺寸； 第二透明化处理单元，用于按照所述视频采集端发送的透明值，对放大后的所述缩小独立视频影像进行处理； 影像合并单元，用于以所述视频采集端发送的聚焦点为中心，对设置透明值后的所述缩小独立视频影像进行合并，生成一副完整的视频影像。
7.如权利要求6所述的视频编解码设备，其特征在于，所述用户端还包括 平滑处理单元，用于对恢复至缩小前尺寸的所述缩小独立视频影像进行平滑化处理。
8.如权利要求6所述的视频编解码设备，其特征在于，所述视频采集端还包括 分辨率调节单元，用于按照预设的颜色分辨率逐个调节所述独立视频影像的颜色分辨率，每个独立视频影像对应的颜色分辨率不同，离所述聚焦点的距离越近，独立视频影像对应的颜色分辨率越大。
9.如权利要求6所述的视频编解码设备，其特征在于，所述底层影像区的边框的形状及大小与所述视频影像的边框的形状及大小相同，除所述底层影像区以外的其它影像区域的面积，以所述其它影像区域离所述聚焦点的距离递增的方式设定； 除所述底层影像区以外的其它影像区域的面积是预设的；或者， 根据用户与显示屏的距离而调节，用户与显示屏越近，所述影像区域的面积越小。
10.如权利要求6所述的视频编解码设备，其特征在于，所述第一透明化处理单元包括 第一透明化处理模块，用于将拆分后的所述独立视频影像中没有影像信息的区域设定为一种透明值；和/或， 第二透明化处理模块，用于将拆分后的所述独立视频影像之间重复的影像信息设定为一种透明值。
全文摘要
本发明适用于视频编解码技术领域，提供了一种视频编解码方法、系统，所述方法包括在进行网络视频编码前，先获取用户眼球在视频画面上的聚焦点，再根据所述聚焦点对视频影像进行区域划分，然后，再根据划分出的各个影像的边框将视频影像拆分成至少两个独立视频影像，再对所述独立视频影像按比例逐个缩小，最后对缩小后的各个独立视频影像进行视频编码，后续，系统即可根据进行视频编码前的处理，执行相应的解码处理。本发明，能有效保留用户眼球聚焦点附近的视频影像的清晰度，同时减少不被关注的视频影像的数据量。并且可以节省人力成本，对处理器的计算能力要求比较低，简单易行，效率高。
文档编号H04N7/26GK102905136SQ201210420838
公开日2013年1月30日 申请日期2012年10月29日 优先权日2012年10月29日
发明者林天麟, 阎镜予 申请人:安科智慧城市技术(中国)有限公司