CN108881743A - 一种基于拼接墙的视频图像处理方法、装置及*** - Google Patents

Abstract

本申请实施例公开了一种基于拼接墙的视频图像处理方法、装置、***及设备，包括：对视频码流进行解码得到原始图像；按照原始图像的第一宽高比，缩放原始图像至原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像；缩放第一缩放图像得到第二缩放图像，第二缩放图像与预设输出分辨率的第二宽度比值等于第一缩放图像与显示窗口的第一宽度比值，第二缩放图像与预设输出分辨率的第二高度比值等于第一缩放图像与显示窗口的第一高度比值；将第二缩放图像置于与预设输出分辨率对应的空间中，根据上述空间得到输出图像。本申请实施例解决了当信号源输出的视频图像的分辨率发生变化时，视频图像无法正常显示的问题。

Description

一种基于拼接墙的视频图像处理方法、装置及***

技术领域

本申请涉及多媒体技术领域，尤其涉及一种基于拼接墙的视频图像处理方法、装置、***及设备。

背景技术

拼接墙具备超高分辨率的显示能力，可以将各种类型的信号源发出的音视频信号汇聚进行显示。通常，拼墙操作人员会为信号源开启一个显示窗口，使信号源输出的视频图像在显示窗口中显示。

然而，当信号源输出的视频图像的分辨率的发生变化时，视频图像可能无法正常显示。比如，以手机作为信号源，将手机拍摄的视频图像进行上墙显示时，用户在拍摄过程中将手机进行了横屏到竖屏的切换，此时手机拍摄的视频图像的分辨率发生了变化，在显示窗口上显示的图像将会失真变形；同时，解码器由于视频图像的分辨率变化可能会重启，从而导致视频图像显示中断；上述两种情况均会导致视频图像无法正常显示。

因此，信号源输出的视频图像的分辨率发生变化时，如何保证视频图像可以正常显示，是本领域技术人员亟待解决的问题。

发明内容

本申请实施例提供了一种基于拼接墙的视频图像处理的方法、装置、***及设备，使得当信号源输出的视频图像的分辨率的发生变化时，视频图像能够正常显示。

有鉴于此，本申请第一方面提供了一种基于拼接墙的视频图像处理方法，所述方法包括：

对视频码流进行解码得到原始图像；

按照所述原始图像的第一宽高比，缩放所述原始图像至所述原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像；

缩放所述第一缩放图像得到第二缩放图像，所述第二缩放图像与预设输出分辨率的第二宽度比值等于所述第一缩放图像与所述显示窗口的第一宽度比值，所述第二缩放图像与所述预设输出分辨率的第二高度比值等于所述第一缩放图像与所述显示窗口的第一高度比值；

将所述第二缩放图像置于与所述预设输出分辨率对应的空间中，根据所述空间得到输出图像，以便于所述输出图像在所述显示窗口内显示。

优选地，所述按照所述原始图像的第一宽高比，缩放所述原始图像至所述原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像具体包括：

若所述原始图像的第一宽高比小于所述显示窗口的第二宽高比，则按照所述第一宽高比缩放所述原始图像至所述原始图像的高度等于所述显示窗口的高度，得到第一缩放图像；

否则，按照所述第一宽高比缩放所述原始图像至所述原始图像的宽度等于所述显示窗口的宽度，得到第一缩放图像。

优选地，缩放所述第一缩放图像得到第二缩放图像，所述第二缩放图像与预设输出分辨率的第二宽度比值等于所述第一缩放图像与所述显示窗口的第一宽度比值，所述第二缩放图像与所述预设输出分辨率的第二高度比值等于所述第一缩放图像与所述显示窗口的第一高度比值具体包括：

调整所述第一缩放图像的宽度等于所述第一宽度比值与所述预设输出分辨率的宽度的乘积；

调整所述第一缩放图像的高度等于所述第一高度比值与所述预设输出分辨率的高度的乘积，得到第二缩放图像。

优选地，所述将所述第二缩放图像置于与所述预设输出分辨率对应的空间中，根据所述空间得到输出图像具体包括：

将所述第二缩放图像的像素数据储存至根据所述预设输出分辨率的宽度与高度分配的内存空间中，根据所述内存空间得到输出图像。

优选地，所述将所述第二缩放图像的像素数据储存至根据所述预设输出分辨率的宽度与高度分配的内存空间中具体包括：

将所述第二缩放图像的像素数据存储至所述内存空间的预置空间中；

所述预置空间相对于所述内存空间的起始横坐标对应于所述预设输出分辨率的宽度与所述第二缩放图像的宽度的差值的一半，起始纵坐标对应于所述预设输出分辨率的高度与所述第二缩放图像的高度的差值的一半；

所述预置空间储存的像素数据的宽度为所述第二缩放图像的宽度，高度为所述第二缩放图像的高度。

优选地，所述按照所述原始图像的第一宽高比，缩放所述原始图像至所述原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像之前还包括：

响应于所述显示窗口的宽度或高度的变化，更新所述显示窗口的宽度与高度。

本申请第二方面提供一种基于拼接墙的视频图像处理装置，所述装置包括：

原始图像获取模块，用于对视频码流进行解码得到原始图像；

第一缩放模块，用于按照所述原始图像的第一宽高比，缩放所述原始图像至所述原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像；

第二缩放模块模块，用于缩放所述第一缩放图像得到第二缩放图像，所述第二缩放图像与预设输出分辨率的第二宽度比值等于所述第一缩放图像与所述显示窗口的第一宽度比值，所述第二缩放图像与所述预设输出分辨率的第二高度比值等于所述第一缩放图像与所述显示窗口的第一高度比值；

输出图像生成模块，用于将所述第二缩放图像置于与所述预设输出分辨率对应的空间中，根据所述空间得到输出图像，以便于所述输出图像在所述显示窗口内显示。

优选地，还包括：

窗口信息更新模块，用于响应于所述显示窗口的宽度或高度的变化，更新所述显示窗口的宽度与高度。

本申请第三方面提供一种基于拼接墙的视频图像处理***，包括：

信号源、上述第二方面所述的基于拼接墙的视频图像处理装置、拼接处理器以及拼接墙；

所述基于拼接墙的视频图像处理装置对所述信号源发出的视频图像进行处理得到输出图像，将所述输出图像发送至所述拼接处理器，所述拼接处理器将所述输出图像在所述拼接墙上进行显示。

本申请第四方面提供一种基于拼接墙的视频图像处理设备，所述设备包括处理器以及存储器：

所述存储器用于存储程序代码，并将所述程序代码传输给所述处理器；

所述处理器用于根据所述程序代码中的指令，执行如上述第一方面所述的基于拼接墙的视频图像处理方法。

从以上技术方案可以看出，本申请实施例具有以下优点：

本申请实施例中，提供了一种基于拼接墙的视频图像处理方法，通过对视频进行解码得到原始图像，将原始图像按照其本身的第一宽高比进行缩放，缩放至该原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像，由于在缩放过程中保持了原始图像真实的宽高比，因此得到的第一缩放图像没有发生变形失真，并且其的宽度与高度恰好是能够在显示窗口中最大化显示的宽度与高度；再将第一缩放图像进行二次缩放得到第二缩放图像，所述第二缩放图像与预设输出分辨率的第二宽度比值等于第一缩放图像与显示窗口的第一宽度比值，而第二高度比值等于第一缩放图像与显示窗口的第一高度比值；第一缩放图像可以理解为是适应显示窗口的，第二缩放图像可以理解为是适应预设输出分辨率的，因此二次缩放的过程是使图像由适应显示窗口到适应预设输出分辨率的过程，并且，二次缩放前与二次缩放后的图像与其所适应的窗口或者分辨率的宽度比值与高度比值保持不变，使得二次缩放后的图像也能与二次缩放前一样最大化的适应其要适应的对象即预设输出分辨率；将第二缩放图像置于与预设输出分辨率对应的空间中，根据所述空间得到输出图像，从而使得输出图像的分辨率变为预设的输出分辨率，并且输出图像中包括了第二缩放图像的内容，可见，无论原始图像的分辨率如何变化，最终都以预设的输出分辨率进行输出，因此解码器不会发生重启。

通过上述方法，原始图像处理成输出图像后，输出图像在显示窗口中显示时，输出图像将自动缩放到显示窗口的大小，相当于自动的将上述的二次缩放进行了反缩放，从而使得输出图像中的第二缩放图像的部分变回了第一缩放图像，第一缩放图像本身是保持真实宽高比且适应显示窗口的最大化显示的图像，因此显示的图像不再失真变形。综上所述，本申请实施例提供的方法同时解决了信号源分辨率变化引起的解码器重启以及宽高比失真的问题，从而保证了视频图像能够正常显示。

附图说明

图1为本申请提供的一种基于拼接墙的视频图像处理方法的第一种实施例的流程示意图；

图2为本申请提供的一种基于拼接墙的视频图像处理方法的第二种实施例的流程示意图；

图3为本申请提供的一种基于拼接墙的视频图像处理方法的第三种实施例的流程示意图；

图4为本申请提供的与图1所示的方法相对应的一种基于拼接墙的视频图像处理装置的实施例的结构示意图；

图5为本申请提供的一种基于拼接墙的视频图像处理***的实施例的架构图；

图6为本申请提供的一种基于拼接墙的视频图像处理设备的实施例的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请实施例提供的一种基于拼接墙的视频图像处理方法，能够解决信号源的分辨率发生变化时，视频图像无法正常显示的问题。其中，视频图像是有信号源提供的，信号源可以是各种类型的设备，比如手机、摄像机、平板电脑等，只要是能够提供视频图像的设备，均能够作为信号源，在此不做限定。

信号源分辨率变化的情况是很常见的，比如网速延迟高时，视频图像的分辨率有可能动态调整，又或者是手机拍摄过程中进行了横竖屏切换，也会导致视频图像的分辨率变化。

为了便于理解，请参阅图1，图1为本申请提供的一种基于拼接墙的视频图像处理方法的第一种实施例的流程示意图。该实施例中的方法包括以下步骤：

步骤101：对视频码流进行解码得到原始图像。

在信号源端获取到的视频图像通常是以视频码流的形式进行传输，为了能够对视频图像进行相应的处理，首先需要对视频码流进行解码得到原始图像。原始图像具体可以为YUV、RGB等格式的数据，显然，数据中包含了原始图像的分辨率信息，分辨率信息相应的包括原始图像的宽度与高度。

需要说明的是，屏幕分辨率是指屏幕显示的分辨率，而屏幕显示的分辨率是用屏幕上显示的像素的个数来表示的，通常是用宽度方向上的像素个数与高度方向上的像素个数的乘积来表示，比如分辨率160×128的意思是宽度方向含有像素数为160个，高度方向像素数128个；应当理解的是，分辨率160×128与分辨率128×160是不同的分辨率，虽然两者的像素的个数相同，但在宽度方向以及高度方向上的像素个数是不同的。

根据上述分辨率的定义，应当理解的是，上述“分辨率信息相应的包括原始图像的宽度与高度”中的“宽度”应当理解为宽度方向上的像素数，“高度”应当理解为高度方向上的像素数，同理，本申请文件中出现的所有“宽度”与“高度”均应按照上述定义进行理解，在此不再赘述。

步骤102：按照原始图像的第一宽高比，缩放原始图像至原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像。

将原始图像按照其本身的第一宽高比进行缩放，因此在缩放后得到的第一缩放图像仍然保持了真实的宽高比；应当理解的是，第一缩放图像并非是在显示窗口之内，第一缩放图像与显示窗口之间应当是独立的，只是将第一缩放图像置于显示窗口之内时，第一缩放图像正好相对于显示窗口是最大化显示。

步骤103：缩放第一缩放图像得到第二缩放图像，第二缩放图像与预设输出分辨率的第二宽度比值等于第一缩放图像与显示窗口的第一宽度比值，第二缩放图像与预设输出分辨率的第二高度比值等于第一缩放图像与显示窗口的第一高度比值。

在经过第一次缩放得到第一缩放图像后，需要对第一缩放图像进行了二次缩放，二次缩放后得到的第二缩放图像与预设输出分辨率的第二宽度比值与第二高度比值分别对应的等于二次缩放前的第一缩放图像与显示窗口的第一宽度比值与第一高度比值，经过二次缩放后的图像从与显示窗口相适应变为与预设输出分辨率相适应，并且由于保持了与显示窗口相适应时的宽度比值和高度比值，因此第二缩放图像也可以是在预设输出分辨率中最大化显示对应的宽度与高度。

可以理解的是，预设输出分辨率应当是预先设定的一个分辨率，该分辨率理论上可以是任何大小的分辨率，比如可以是1024×768，也可以是1920×1080，无论设定的分辨率是多少，都能够适用于本申请实施例提供的方法。

步骤104：将第二缩放图像置于与预设输出分辨率对应的空间中，根据上述空间得到输出图像，以便于输出图像在显示窗口内显示。

应当理解的是，输出图像是根据与预设输出分辨率对应的空间得到的，因此输出图像应当具有与预设输出分辨率相同的分辨率，并且，将第二缩放图像置于预设输出分辨率对应的空间中，使得输出图像包含了第二缩放图像的内容。

需要说明的是，在得到输出图像后，输出图像需要重新进行编码从而转换为视频码流数据格式的输出码流，进一步的，输出码流可以输入到拼接处理器，可以通过拼接处理器的解码模块进行解码，此时由于输出图像始终保持预设输出的分辨率，对应的，输出码流的分辨率也始终不变，拼接处理器的解码模块不会发生重启；拼接处理器再将解码后的数据输出到拼接墙进行显示，具体的，应当是在拼墙操作人员开设的显示窗口进行显示。

以上为本申请提供的一种基于拼接墙的视频图像处理方法的第一种实施例的详细说明，在第一种实施例中，通过对视频进行解码得到原始图像，将原始图像按照其本身的第一宽高比进行缩放，缩放至该原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像；再将第一缩放图像进行二次缩放得到第二缩放图像，上述第二缩放图像与预设输出分辨率的第二宽度比值等于第一缩放图像与显示窗口的第一宽度比值，而第二高度比值等于第一缩放图像与显示窗口的第一高度比值；将第二缩放图像置于与预设输出分辨率对应的空间中，根据所述空间得到输出图像。

将输出图像在显示窗口中进行显示时，由于输出图像将自动缩放到显示窗口的大小，由于第一缩放图像二次缩放为第二缩放图像时，保持了图像在二次缩放前适应显示窗口时的宽度比值和高度比值，因此输出图像的自动缩放到显示窗口的大小相当于自动的将上述的二次缩放进行了反缩放，从而使得输出图像中的第二缩放图像的部分变回了第一缩放图像，而第一缩放图像是原始图像保持其本身的宽高比缩放得到的，并且其宽度与高度正好是能够在显示窗口中最大化显示的宽度与高度，因此输出图像在显示窗口显示的效果是原始图像保持真实宽高比在显示窗口的最大化显示的效果；并且，由于解码器接收到的输出图像的分辨率始终是预设的输出分辨率，因此解码器也不会重启，从而解决了在当信号源输出的视频图像的分辨率的发生变化时，视频图像无法正常显示的问题。

下面请参阅图2，图2为本申请提供的一种基于拼接墙的视频图像处理方法的第二种实施例的流程示意图。第二种实施例包括以下步骤：

步骤201：对视频码流进行解码得到原始图像。

该步骤与第一种实施例中的步骤101相同，详细说明可见前文，在此不再赘述。

步骤202：若原始图像的第一宽高比小于显示窗口的第二宽高比，则按照第一宽高比缩放原始图像至原始图像的高度等于显示窗口的高度，得到第一缩放图像；否则，按照第一宽高比缩放原始图像至原始图像的宽度等于显示窗口的宽度，得到第一缩放图像。

原始图像的宽高比取决于信号源，拼墙的操作人员往往是不清楚信号源的分辨率的，因此开设的显示窗口可能与原始图像的宽高比不同，原始图像缩放到在显示窗口最大化显示时往往显示窗口会留有空白部分，并且留有空白部分的情况有两种，第一种是原始图像的第一宽高比小于显示窗口的第二宽高比时，使原始图像在显示窗口最大化显示时显示窗口的左右两边留有空白，第二种是原始图像的第一宽高比大于或者等于显示窗口的第二宽高比时，使原始图像在显示窗口最大化显示时显示窗口的上下两边留有空白。

在保持真实的第一宽高比缩放原始图像的基础上，针对上述第一种情况，原始图像缩放至其高度等于显示窗口的高度，原始图像便可适应显示窗口最大化显示，针对第二种情况，原始图像缩放至其宽度等于显示窗口的宽度，原始图像便可适应显示窗口最大化显示。

步骤203：调整第一缩放图像的宽度等于上述第一宽度比值与预设输出分辨率的宽度的乘积；调整第一缩放图像的高度等于上述第一高度比值与预设输出分辨率的高度的乘积，得到第二缩放图像。

通过分别调整第一缩放图像的宽度与高度，得到第二缩放图像，具体的，调整后得到的第二缩放图像的宽度等于第一宽度比值与所述预设输出分辨率的宽度的乘积，第二缩放图像的高度等于所述第一高度比值与所述预设输出分辨率的高度的乘积，可见，缩放后的图像与预设分辨率的宽度比值与高度比值与缩放前的图像与显示窗口的宽度比值和高度比值对应的相等。

步骤204：将第二缩放图像的像素数据储存至根据预设输出分辨率的宽度与高度分配的内存空间中，根据上述内存空间得到输出图像，以便于输出图像在显示窗口内显示。

为了使最终输出的图像的分辨率为预设的输出分辨率，可以先根据预设出分辨率的宽度与高度分配相应的内存空间以存储预设输出分辨率的像素数据，将第二缩放图像的像素数据储存到该内存空间中，具体的使其储存至所述内存空间的方式有多种，比如可以是发送、拷贝、替换等，再根据储存了第二缩放图像的像素数据的内存空间生成输出图像，由于内存空间对应的分辨率是预设的输出分辨率，因此输出图像的分辨率也为预设的输出的分辨率，且输出图像包含了第二缩放图像的内容。

在上述第二种实施例中，通过对视频进行解码得到原始图像，为了将原始图像缩放至适应显示窗口最大化显示且不变形失真，先通过原始图像的宽高比与显示窗口的宽高比的比较，确定图像在显示窗口最大化显示时显示窗口留有空白的部位，再对原始图像进行缩放至其宽度或者高度之一与显示窗口相同，得到第一缩放图像；再通过分别调整第一缩放图像的宽度与高度得到第二缩放图像，调整后得到的第二缩放图像的宽度等于第一宽度比值与所述预设输出分辨率的宽度的乘积，第二缩放图像的高度等于所述第一高度比值与所述预设输出分辨率的高度的乘积；将第二缩放图像的像素数据储存至对应预设输出分辨率的内存空间中，根据所述内存空间得到输出图像。

将输出图像在显示窗口中进行显示时，由于输出图像将自动缩放到显示窗口的大小，由于第一缩放图像调整得到第二缩放图像时，保持了图像在调整前适应显示窗口时的宽度比值和高度比值，因此输出图像的自动缩放到显示窗口的大小相当于自动的将上述针对第一缩放图像的调整还原，从而使得输出图像中的第二缩放图像的部分变回了第一缩放图像，而第一缩放图像是原始图像保持其本身的宽高比缩放得到的，并且其宽度与高度正好是能够在显示窗口中最大化显示的宽度与高度，因此输出图像在显示窗口显示的效果就是原始图像保持真实宽高比在显示窗口的最大化显示的效果；并且，由于解码器接收到的输出图像的分辨率始终是预设的输出分辨率，因此解码器也不会重启，从而解决了在当信号源输出的视频图像的分辨率的发生变化时，视频图像无法正常显示的问题。

以上是对本申请提供的一种基于拼接墙的视频图像处理方法的第二种实施例的详细说明。

下面请参阅图3，图3为本申请提供的一种基于拼接墙的视频图像处理方法的第三种实施例的流程示意图。第三种实施例包括以下步骤：

步骤301：对视频码流进行解码得到原始图像。

该步骤与第一种实施例中的步骤101相同，详情可见前文，在此不再赘述。

步骤302：响应于显示窗口的宽度或高度的变化，更新显示窗口的宽度与高度。

原始图像的宽高比取决于信号源，拼墙的操作人员往往是不清楚信号源的分辨率的，因此开设的显示窗口可能与原始图像的宽高比不同，从而影响显示的效果，此时，拼墙的操作人员可能会对显示窗口进行进一步的调整，在显示窗口的宽度或者高度发生变化时，响应于此变化对显示窗口的宽度和高度数据进行更新，使得后续的图像能够适应调整后的显示窗口得到最好的显示效果。

可以理解的是，该步骤也可以在步骤301之前，只要在对原始图像进行第一次缩放之前进行，均能适用于本申请实施例提供的方法。

步骤303：若原始图像的第一宽高比小于显示窗口的第二宽高比，则按照第一宽高比缩放原始图像至原始图像的高度等于显示窗口的高度，得到第一缩放图像；否则，按照第一宽高比缩放原始图像至原始图像的宽度等于显示窗口的宽度，得到第一缩放图像。

该步骤与第二种实施例中的步骤202相同，详细说明可见前文，在此不再赘述。

步骤304：调整第一缩放图像的宽度等于上述第一宽度比值与预设输出分辨率的宽度的乘积；调整第一缩放图像的高度等于上述第一高度比值与预设输出分辨率的高度的乘积，得到第二缩放图像。

该步骤与第二种实施例中的步骤203相同，详细说明可见前文，在此不再赘述。

步骤305：将第二缩放图像的像素数据存储至内存空间的预置空间中，根据上述内存空间得到输出图像，以便于输出图像在显示窗口内显示；预置空间相对于内存空间的起始横坐标对应于预设输出分辨率的宽度与第二缩放图像的宽度的差值的一半，起始纵坐标对应于预设输出分辨率的高度与第二缩放图像的高度的差值的一半；预置空间储存的像素数据的宽度为第二缩放图像的宽度，高度为第二缩放图像的高度。

内存空间可以用于存储图像的像素数据，可以理解的是，可以通过在内存空间中预置一个空间，该预置空间应当是用于存储第二缩放图像的像素数据，因此预置空间储存的像素数据宽度以及高度对应于第二缩放图像，而预置空间相对于内存空间是有一个起始点的，可以是以内存空间的左上角为原点、宽度方向为X轴建立的坐标系，在该坐标系中可以通过使该起始点的起始横坐标对应于预设输出分辨率的宽度与原始图像的宽度的差值的一半，起始纵坐标对应于预设输出分辨率的高度与原始图像的高度的差值的一半，预置空间应当是相对于内存空间居中的，可以理解的是，第二缩放图像也是相对于输出图像居中，从而在显示时第二缩放图像的内容可以居中显示，因此有更好的显示效果；该步骤的其余部分可以参见本申请第二种实施例的步骤204，在此不再赘述。

以上是对本申请提供的一种基于拼接墙的视频图像处理方法的第三种实施例的详细说明。

下面请参阅图4，图4为本申请提供的与图1所示的方法相对应的一种基于拼接墙的视频图像处理装置的实施例的结构示意图，该装置400包括：

原始图像获取模块401，用于对视频码流进行解码得到原始图像；

第一缩放模块402，用于按照原始图像的第一宽高比，缩放原始图像至原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像；

第二缩放模块403，用于缩放第一缩放图像得到第二缩放图像，第二缩放图像与预设输出分辨率的第二宽度比值等于第一缩放图像与显示窗口的第一宽度比值，第二缩放图像与预设输出分辨率的第二高度比值等于第一缩放图像与显示窗口的第一高度比值；

输出图像生成模块404，用于将第二缩放图像置于与预设输出分辨率对应的空间中，根据上述空间得到输出图像，以便于输出图像在显示窗口内显示。

可选的，第一缩放模块402具体用于

若原始图像的第一宽高比小于显示窗口的第二宽高比，则按照第一宽高比缩放原始图像至原始图像的高度等于显示窗口的高度，得到第一缩放图像；否则，按照第一宽高比缩放原始图像至原始图像的宽度等于显示窗口的宽度，得到第一缩放图像。

可选的，所述第二缩放模块403具体用于

调整第一缩放图像的宽度等于上述第一宽度比值与预设输出分辨率的宽度的乘积；调整第一缩放图像的高度等于上述第一高度比值与预设输出分辨率的高度的乘积，得到第二缩放图像。

可选的，所述输出图像生成模块404具体用于

将第二缩放图像的像素数据储存至根据预设输出分辨率的宽度与高度分配的内存空间中，根据所述内存空间得到输出图像，以便于所述输出图像在所述显示窗口内显示。

可选的，所述输出图像生成模块404还可以用于

将第二缩放图像的像素数据存储至内存空间的预置空间中，根据所述内存空间得到输出图像，以便于所述输出图像在所述显示窗口内显示；预置空间相对于内存空间的起始横坐标对应于预设输出分辨率的宽度与第二缩放图像的宽度的差值的一半，起始纵坐标对应于预设输出分辨率的高度与第二缩放图像的高度的差值的一半；预置空间储存的像素数据的宽度为第二缩放图像的宽度，高度为第二缩放图像的高度。

可选的，所述装置400还包括：

窗口信息更新模块405，用于响应于所述显示窗口的宽度或高度的变化，更新所述显示窗口的宽度与高度。

在本申请实施例提供的一种基于拼接墙的视频图像处理装置中，原始图像获取模块401通过对视频进行解码得到原始图像，第一缩放模块402将原始图像按照其本身的第一宽高比进行缩放，缩放至该原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像；第二缩放模块403再将第一缩放图像进行二次缩放得到第二缩放图像，所述第二缩放图像与预设输出分辨率的第二宽度比值等于第一缩放图像与显示窗口的第一宽度比值，而第二高度比值等于第一缩放图像与显示窗口的第一高度比值；输出图像生成模块404将第二缩放图像置于与预设输出分辨率对应的空间中，根据所述空间得到输出图像。

将输出图像在显示窗口中进行显示时，由于输出图像将自动缩放到显示窗口的大小，由于第一缩放图像二次缩放为第二缩放图像时，保持了图像在二次缩放前适应显示窗口时的宽度比值和高度比值，因此输出图像的自动缩放到显示窗口的大小相当于自动的将上述的二次缩放进行了反缩放，从而使得输出图像中的第二缩放图像的部分变回了第一缩放图像，而第一缩放图像是原始图像保持其本身的宽高比缩放得到的，并且其宽度与高度正好是能够在显示窗口中最大化显示的宽度与高度，因此输出图像在显示窗口显示的效果是原始图像保持真实宽高比在显示窗口的最大化显示的效果；并且，由于解码器接收到的输出图像的分辨率始终是预设的输出分辨率，因此解码器也不会重启，从而解决了在当信号源输出的视频图像的分辨率的发生变化时，视频图像无法正常显示的问题。

下面请参阅图5，图5为本申请提供的一种基于拼接墙的视频图像处理***的实施例的架构图，该***包括：

信号源501、基于拼接墙的视频图像处理装置502、拼接处理器503以及拼接墙504；

所述基于拼接墙的视频图像处理装置502对所述信号源501发出的视频图像进行处理得到输出图像，将所述输出图像发送至所述拼接处理器503，所述拼接处理器将所述输出图像在所述拼接墙504上进行显示。

在本申请实施例提供的一种基于拼接墙的视频图像处理***中，基于拼接墙的视频图像处理装置通过对视频进行解码得到原始图像，将原始图像按照其本身的第一宽高比进行缩放，缩放至该原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像；再将第一缩放图像进行二次缩放得到第二缩放图像，所述第二缩放图像与预设输出分辨率的第二宽度比值等于第一缩放图像与显示窗口的第一宽度比值，而第二高度比值等于第一缩放图像与显示窗口的第一高度比值；将第二缩放图像置于与预设输出分辨率对应的空间中，根据所述空间得到输出图像。

将输出图像在显示窗口中进行显示时，由于输出图像将自动缩放到显示窗口的大小，由于第一缩放图像二次缩放为第二缩放图像时，保持了图像在二次缩放前适应显示窗口时的宽度比值和高度比值，因此输出图像的自动缩放到显示窗口的大小相当于自动的将上述的二次缩放进行了反缩放，从而使得输出图像中的第二缩放图像的部分变回了第一缩放图像，而第一缩放图像是原始图像保持其本身的宽高比缩放得到的，并且其宽度与高度正好是能够在显示窗口中最大化显示的宽度与高度，因此输出图像在显示窗口显示的效果是原始图像保持真实宽高比在显示窗口的最大化显示的效果；并且，由于解码器接收到的输出图像的分辨率始终是预设的输出分辨率，因此解码器也不会重启，从而解决了在当信号源输出的视频图像的分辨率的发生变化时，视频图像无法正常显示的问题。

下面请参阅图6，图6为本申请提供的一种基于拼接墙的视频图像处理设备的实施例的结构示意图，该设备600包括：

处理器601以及存储器602：

所述存储器602用于存储程序代码，并将所述程序代码传输给所述处理器；

所述处理器601用于根据所述程序代码中的指令执行本申请提供的第一种、第二种或第三种实施例任一种所述的基于拼接墙的视频图像处理方法。

在本申请实施例提供的一种基于拼接墙的视频图像处理设备中，处理器通过对视频进行解码得到原始图像，将原始图像按照其本身的第一宽高比进行缩放，缩放至该原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像；再将第一缩放图像进行二次缩放得到第二缩放图像，所述第二缩放图像与预设输出分辨率的第二宽度比值等于第一缩放图像与显示窗口的第一宽度比值，而第二高度比值等于第一缩放图像与显示窗口的第一高度比值；将第二缩放图像置于与预设输出分辨率对应的空间中，根据所述空间得到输出图像。

将输出图像在显示窗口中进行显示时，由于输出图像将自动缩放到显示窗口的大小，由于第一缩放图像二次缩放为第二缩放图像时，保持了图像在二次缩放前适应显示窗口时的宽度比值和高度比值，因此输出图像的自动缩放到显示窗口的大小相当于自动的将上述的二次缩放进行了反缩放，从而使得输出图像中的第二缩放图像的部分变回了第一缩放图像，而第一缩放图像是原始图像保持其本身的宽高比缩放得到的，并且其宽度与高度正好是能够在显示窗口中最大化显示的宽度与高度，因此输出图像在显示窗口显示的效果是原始图像保持真实宽高比在显示窗口的最大化显示的效果；并且，由于解码器接收到的输出图像的分辨率始终是预设的输出分辨率，因此解码器也不会重启，从而解决了在当信号源输出的视频图像的分辨率的发生变化时，视频图像无法正常显示的问题。

可以理解的是，在对图像处理的过程中，本申请中的第一次缩放与第二次缩放在实际操作中可以采用预先计算出结果后一次缩放到位的方式，下面以一个具体例子进行说明。

可以将显示窗口的宽度与宽度分别用W0与H0表示，预设输出分辨率的宽度与高度分别用W1与H1表示，原始图像的宽度与高度分别用W2与H2表示，则在第一次缩放中，首先是对显示窗口留白情况的判断，将W2/H2与W0/H0进行比较，假如W2/H2<W0/H0，则显示窗口的左右两边会留有空白，此时按照第一次缩放得到的第一缩放图像的宽度为W2*H0/H2，高度为H2，经过第二次缩放后得到的第二缩放图像的宽度为(W2*H0/H2)*(W1/W0)，高度为H1；显然，在实际的操作中，可以在进行显示窗口的留白情况判断后，通过公式一次计算到位，比如，可以设定最终缩放后的宽度为W3，高度为H3，则计算出的结果W3＝(W2*H0/H2)*(W1/W0)，高度H3＝H1，根据计算出来的结果，可以直接将原始图像直接缩放成W3与H3对应的尺寸，将两次缩放变为一次缩放到位，从而减少对CPU资源的消耗，以及减少图像的延时。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的***，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

本申请的说明书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、***、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

应当理解，在本申请中，“至少一个(项)”是指一个或者多个，“多个”是指两个或两个以上。“和/或”，用于描述关联对象的关联关系，表示可以存在三种关系，例如，“A和/或B”可以表示：只存在A，只存在B以及同时存在A和B三种情况，其中A，B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达，是指这些项中的任意组合，包括单项(个)或复数项(个)的任意组合。例如，a，b或c中的至少一项(个)，可以表示：a，b，c，“a和b”，“a和c”，“b和c”，或“a和b和c”，其中a，b，c可以是单个，也可以是多个。

在本申请所提供的几个实施例中，应该理解到，所揭露的***，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(英文全称：Read-OnlyMemory，英文缩写：ROM)、随机存取存储器(英文全称：Random Access Memory，英文缩写：RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (10)

1.一种基于拼接墙的视频图像处理方法，其特征在于，包括：

对视频码流进行解码得到原始图像；

按照所述原始图像的第一宽高比，缩放所述原始图像至所述原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像；

缩放所述第一缩放图像得到第二缩放图像，所述第二缩放图像与预设输出分辨率的第二宽度比值等于所述第一缩放图像与所述显示窗口的第一宽度比值，所述第二缩放图像与所述预设输出分辨率的第二高度比值等于所述第一缩放图像与所述显示窗口的第一高度比值；

将所述第二缩放图像置于与所述预设输出分辨率对应的空间中，根据所述空间得到输出图像，以便于所述输出图像在所述显示窗口内显示。

2.根据权利要求1所述的方法，其特征在于，所述按照所述原始图像的第一宽高比，缩放所述原始图像至所述原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像具体包括：

若所述原始图像的第一宽高比小于所述显示窗口的第二宽高比，则按照所述第一宽高比缩放所述原始图像至所述原始图像的高度等于所述显示窗口的高度，得到第一缩放图像；

否则，按照所述第一宽高比缩放所述原始图像至所述原始图像的宽度等于所述显示窗口的宽度，得到第一缩放图像。

3.根据权利要求1所述的方法，其特征在于，缩放所述第一缩放图像得到第二缩放图像，所述第二缩放图像与预设输出分辨率的第二宽度比值等于所述第一缩放图像与所述显示窗口的第一宽度比值，所述第二缩放图像与所述预设输出分辨率的第二高度比值等于所述第一缩放图像与所述显示窗口的第一高度比值具体包括：

调整所述第一缩放图像的宽度等于所述第一宽度比值与所述预设输出分辨率的宽度的乘积；

调整所述第一缩放图像的高度等于所述第一高度比值与所述预设输出分辨率的高度的乘积，得到第二缩放图像。

4.根据权利要求1所述的方法，其特征在于，所述将所述第二缩放图像置于与所述预设输出分辨率对应的空间中，根据所述空间得到输出图像具体包括：

将所述第二缩放图像的像素数据储存至根据所述预设输出分辨率的宽度与高度分配的内存空间中，根据所述内存空间得到输出图像。

5.根据权利要求4所述的方法，其特征在于，所述将所述第二缩放图像的像素数据储存至根据所述预设输出分辨率的宽度与高度分配的内存空间中具体包括：

将所述第二缩放图像的像素数据存储至所述内存空间的预置空间中；

所述预置空间相对于所述内存空间的起始横坐标对应于所述预设输出分辨率的宽度与所述第二缩放图像的宽度的差值的一半，起始纵坐标对应于所述预设输出分辨率的高度与所述第二缩放图像的高度的差值的一半；

所述预置空间储存的像素数据的宽度为所述第二缩放图像的宽度，高度为所述第二缩放图像的高度。

6.根据权利要求1所述的方法，其特征在于，所述按照所述原始图像的第一宽高比，缩放所述原始图像至所述原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像之前还包括：

响应于所述显示窗口的宽度或高度的变化，更新所述显示窗口的宽度与高度。

7.一种基于拼接墙的视频图像处理装置，其特征在于，包括：

原始图像获取模块，用于对视频码流进行解码得到原始图像；

第一缩放模块，用于按照所述原始图像的第一宽高比，缩放所述原始图像至所述原始图像在显示窗口内最大化显示相对应的宽度与高度，得到第一缩放图像；

第二缩放模块，用于缩放所述第一缩放图像得到第二缩放图像，所述第二缩放图像与预设输出分辨率的第二宽度比值等于所述第一缩放图像与所述显示窗口的第一宽度比值，所述第二缩放图像与所述预设输出分辨率的第二高度比值等于所述第一缩放图像与所述显示窗口的第一高度比值；

输出图像生成模块，用于将所述第二缩放图像置于与所述预设输出分辨率对应的空间中，根据所述空间得到输出图像，以便于所述输出图像在所述显示窗口内显示。

8.根据权利要求7所述的装置，其特征在于，还包括：

窗口信息更新模块，用于响应于所述显示窗口的宽度或高度的变化，更新所述显示窗口的宽度与高度。

9.一种基于拼接墙的视频图像处理***，其特征在于，包括：

信号源、权利要求7-8任一项所述的基于拼接墙的视频图像处理装置、拼接处理器以及拼接墙；

所述基于拼接墙的视频图像处理装置对所述信号源发出的视频图像进行处理得到输出图像，将所述输出图像发送至所述拼接处理器，所述拼接处理器将所述输出图像在所述拼接墙上进行显示。

10.一种基于拼接墙的视频图像处理设备，其特征在于，所述设备包括处理器以及存储器：

所述存储器用于存储程序代码，并将所述程序代码传输给所述处理器；

所述处理器用于根据所述程序代码中的指令执行权利要求1-6任一项所述的基于拼接墙的视频图像处理方法。