CN101807389B - 大屏拼接方法及*** - Google Patents

大屏拼接方法及*** Download PDF

Info

Publication number
CN101807389B
CN101807389B CN 201010128568 CN201010128568A CN101807389B CN 101807389 B CN101807389 B CN 101807389B CN 201010128568 CN201010128568 CN 201010128568 CN 201010128568 A CN201010128568 A CN 201010128568A CN 101807389 B CN101807389 B CN 101807389B
Authority
CN
China
Prior art keywords
video
decoding
image
terminal
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN 201010128568
Other languages
English (en)
Other versions
CN101807389A (zh
Inventor
余端
冯波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bocom Intelligent Network Technology Co. Ltd.
Original Assignee
SHANGHAI BOCOM INTELLIGENT NETWORK TECHNOLOGY CO LTD
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHANGHAI BOCOM INTELLIGENT NETWORK TECHNOLOGY CO LTD filed Critical SHANGHAI BOCOM INTELLIGENT NETWORK TECHNOLOGY CO LTD
Priority to CN 201010128568 priority Critical patent/CN101807389B/zh
Publication of CN101807389A publication Critical patent/CN101807389A/zh
Application granted granted Critical
Publication of CN101807389B publication Critical patent/CN101807389B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明揭示了一种大屏拼接方法及***,所述方法包括如下步骤:A、将同一视频流发送到通过网络连接的多台PC解码终端,通过UDP组播发送等方式保证数据同步发送;B、各个PC解码终端通过NTP时钟同步和帧时间戳延时调节来保证大屏拼接后的图像质量;C、各PC解码终端裁剪并显示部分图像,保证大屏拼接后图像的完整并且不重叠。本发明通过PC终端的可无限扩充实现了大屏拼接的可无限放大,通过PC解码终端的随意组合实现了大屏拼接尺寸和分辨率灵活变化,通过视频延时调节保证了大屏拼接后各部分图像的同步以及整个图像的均匀连续。

Description

大屏拼接方法及***
技术领域
本发明属于视频显示技术领域,涉及一种视频拼接方法,尤其涉及一种基于多PC的可无限放大的大屏拼接方法;同时,本发明还涉及上述大屏拼接方法的***。
背景技术
视频显示***中特别是高清视频显示***中,为了更好的展示视频图像的细节效果,常常将视频图像放大后播放。由于单台显示器的尺寸和分辨率有限,不能够满足实际的需求,而大屏拼接技术将多块显示器拼接成一整块大屏幕,屏幕的尺寸和分辨率都有了成倍的提高。使用拼接后的大屏来播放一路视频,其图像有了更高的放大倍数,细节效果的展示也更加清楚。
现有大屏拼接技术有如下缺点:
1、需要特定硬件设备的支持,大屏拼接更多用于集体展示不同的视频图像,播放同一路视频需要特定的硬件设备裁取不同部分解码后的视频图像再输入各个屏幕。
2、支持尺寸和分辨率固定,现有大屏拼接支持的尺寸和分辨率不能够灵活变化,只能支持特定的尺寸和分辨率。
3、支持的最大分辨率固定,当视频图像的分辨率更高时,则不能够满足需求。
4、大屏各部分图像的时间同步不容易控制。
发明内容
本发明所要解决的技术问题是:提供一种基于多PC的可无限放大的大屏拼接方法,可在现有大屏拼接技术上实现无限放大,能够灵活改变大屏拼接后的尺寸和分辨率,并解决了各部分图像的同步问题,保证拼接后的视频图像的质量。
此外,本发明还提供一种用于实现上述大屏拼接方法的***。
为解决上述技术问题,本发明采用如下技术方案:
一种大屏拼接方法,所述方法包括如下步骤:
A、将同一视频流发送到通过网络连接的多台PC解码终端,通过UDP组播发送等方式保证数据同步发送;
B、各个PC解码终端通过NTP时钟同步和帧时间戳延时调节来保证大屏拼接后的图像质量;
C、各PC解码终端裁剪并显示部分图像,保证大屏拼接后图像的完整并且不重叠。
上述步骤A中PC解码终端为普通PC机,每台PC终端负责控制拼接后大屏中一块或多块显示器的视频播放。使用多台PC解码终端是因为单台PC可以控制显示器的大小和分辨率有限,但由于多台PC解码终端之间可以随意组合和扩充,使大屏拼接的尺寸和分辨率可以灵活变化和无限放大,解决了现有大屏拼接技术支持尺寸和分辨率有限,最大分辨率固定的不足。
上述步骤A中的视频流由视频源发出,视频源应包括用于视频采集的摄像头,用于视频图像压缩编码的编码器。编码器编码产生的码流应该保留有各帧图像的采集时间,视频源应该具有将视频流发送给各PC终端的能力。
上述步骤A中各PC解码终端运行有一个或多个解码实例,每个解码实例控制与此PC终端相连接的一块或多块显示器的视频播放。每个解码实例包含的模块有网络接收模块、视频解码模块、时钟同步模块、视频裁剪模块、图像显示模块。
所述网络接收模块负责从网络中接收视频源发出的视频数据。
所述视频解码模块,与网络接收模块相连,将视频源发出压缩编码后的视频数据解码转换成可以直接显示到显示器上的数据,视频解码模块解码后应保留有每帧视频图像的采集时间等信息。
所述时钟同步模块,与视频解码模块相连,根据每帧视频图像的采集时间和延时信息,计算出该帧的显示时间并传递给下个模块,保证各个解码终端显示视频的连贯性及拼接后大屏各部分图像的同步性。
所述视频裁剪模块,与时钟同步模块相连,根据其控制的显示器和拼接后大屏的关系裁剪需要显示的部分视频图像。
所述图像显示模块,与视频裁剪模块相连,根据时钟同步模块计算出的图像显示时间,将解码裁剪后的图像缩放到控制显示器所需比例进行显示。
上述步骤A中,因为大屏拼接后显示的为同一路视频图像,即各PC解码终端接收到的视频流应由同一视频源发出,本发明将各个PC解码终端和视频源通过网络进行连接,视频源通过该该网络向各个PC终端发送视频流数据。为了保证整个视频图像的同步显示,首先应保证视频源同时向各PC终端发送视频流数据。本发明使用UDP组播或轮流循环发送的方式向各个PC发送,其中UDP组播是TCP/IP网络协议中的一种传输方式,轮流循环发送是视频源在收到数据后即使用循环的方式,将数据轮流发送到各PC终端,可以使用TCP协议传输,也可以使用UDP方式传输。但由于网络延时等原因,各PC终端并一定能够同时收到视频流数据,由此延时产生的不同步问题将在上述步骤B中解决。
上述步骤B由上述视频解码实例中的时钟同步模块实现。在经过编码、传输、解码等一系列处理之后,视频源采集的间隔均匀的视频数据,,在显示时并一定能够保证大屏图像的均匀和同步。一帧视频图像从摄像头采集到显示到大屏消耗的延时有编码延时、网络传输延时、解码延时等。
所述编码延时为编码器将摄像头采集的数据进行编码压缩所消耗的时间。由于每帧图像的复杂度不同,编码所消耗的时间也有所差别,所以每帧的编码延时也有所不同,但根据步骤A,由于视频数据是同步发送给各PC解码端,所以一帧数据的编码延时对于所有PC解码终端都应相同。
所述网络传输延时是由各PC解码终端完成数据接收的时间不同产生,由各PC解码终端到视频源的网络情况和每帧的数据长度决定。所以每帧视频数据对于每台PC终端的网络传输延时都有所不同。
所述解码延时为PC解码终端解码各帧视频数据所消耗的时间。由于每帧数据的编码复杂度和各PC解码终端的硬件配置不同,所以每帧视频数据对于各PC终端的解码延时也应有所不同。
根据上述延时,假设一帧视频图像的采集时间为D,显示时间为{P1,P2,P3,……},编码延时为e,网络传输延时为{t1,t2,t3,……},解码延时为{d1,d2,d3,……},其中下标表示各个PC终端。所以终端i最快的显示该帧的时间应为:
Pi=D+e+ti+di;
为了保证各个解码终端的同步显示。只需该帧在所有终端上在可能产生的最大延时后显示,假定该值为P,则有:
P=max{Pi};
因为采集时间D都相同,所以有
P=D+X;
其中X即为该帧在各PC终端的最大延时,即:
X=max{e+ti+di};
由于每帧的编码延时,网络传输及解码延时都不同,假设视频流中各帧图像的采集时间为{D1,D2,D3,……},显示时间为{P11,P12,P13,…,P21,P22,P23,…,P31,P32,P33,……},编码延时为{e1,e2,e3,……},网络传输延时为{t11,t12,t13,…,t21,t22,t23,…,t31,t32,t33,……},解码延时为{d11,d12,d13,…,d21,d22,d23,…,d31,d32,d33,……},其中第一个下标表示帧序号,第二个下标表示各解码终端。所以终端j显示视频流中的第i帧的时间应为
Pij=Di+ei+tij+dij;
为了保证各个解码终端各帧的同步显示,只需各帧在所有终端上可能产生的最大延时后显示,假设Pi即为帧i在各终端上的显示时间,即
Pi=max{Pij};
因为i帧的采集时间对于各终端都相同,所以有
Pi=Di+Xi;
其中Xi即为帧i在各PC终端的最大延时,即:
Xi=max{ei+tij+dij};
所以各PC终端在播放帧i时,只需帧i的采集时间Di上加上最大延时Xi,即可保证视频流中各帧图像显示的同步,即拼接后大屏各部分图像的同步。
上述方法保证了拼接后大屏各部分图像的同步,但由于各帧图像可能产生的最大延时可能有所不同,由此各帧图像之间的显示之间的时间间隔不相同,即视频流图像不均匀。为了保证视频图像的均匀播放,只需各帧播放时所加的最大延时相同即可,因此可以取各帧可能产生最大延时的最大值即可,即:
Pi=Di+X;
其中X为各帧在各终端可能产生的最大延时的最大值,即
X=max{Xi};
因为一帧视频图像的复杂度越高,视频流数据量也就也大,理论上其编码延时e,传输延时t及解码延时也就越高。所以上面的X的值可以近似表示成
X=max{ei}+max{tij}+max{dij};
上述的时钟同步方法需要知道各帧在各PC终端上可能产生的最大延时X,但该值不是一个确定值,并且可能随着时间段的不同有所该变。本发明通过迭代的方式来自动确定该值,并让该值随着时间段的改变而改变。视频源获取每帧图像的采集时间Di,并设定一个最大延时值X,并将这两个值保存在码流中发送到各PC解码终端。由于初始化时不知道最大延时值的精确值,可以设置一个经验估计值。PC解码终端在解码后根据采集时间和最大延时值确定一帧图像的显示时间Pi(Pi=Di+X),并和当前的***时间Si进行比较,保存其差值Ei(Ei=Pi-Si)。每隔一段时间,各PC终端即将该段时间内的差值最小值min(Ei)发送给视频源,视频源选择各PC终端发送的最大的一个差值来调整最大延时值X,如果差值小于0,说明当前设置的最大延时值X比实际小,并且至少需要增加差值的绝对值;如果差值大于0,说明各PC终端都需要等待一些时间才能显示,即当前设定的最大延时值X比实际大,需要减掉这个差值。通过这种方法,可以较为准确的获取最大延时值,并让其随着时间段的变化而自动调节。尽量减少了延时调节造成的误差,保证了大屏拼接后视频的均匀同步的显示。
根据上述延时处理方法,由于各PC终端是根据其当前***时间来确定视频图像的最终显示时间。因此各个PC终端的***时间之间的不同,也会造成拼接后大屏显示的不同步。本发明使用NTP时钟同步协议来解决此问题,在PC解码终端所在的网络中部署一台NTP服务器,可以将各个PC终端的***时间差保持在1ms之内。此NTP服务器并不需要是一***立的服务器,也可以使用其中的一台PC解码终端来替代。
上述步骤C由上述视频解码实例中的视频裁剪模块实现。视频源发送给各PC解码终端的数据都是完整的视频图像数据,而每个PC只需控制部分图像的显示。所以PC终端在解码后需要进行准确的剪裁,来保证拼接后的图像的完整并且没有重叠。裁剪中需要的参数有视频源图像的原始高度和宽度,裁剪的开始位置,裁剪后的高度和宽度。PC解码终端的裁剪参数可以通过配置文件来确定。
一种大屏拼接***,所述***包括视频源、若干台解码终端;所述视频源用以提供视频流;所述台解码终端与所述视频源连接,各解码终端通过网络连接;各解码终端运行有一个或多个解码单元,每个解码单元控制与对应解码终端相连接的一块或多块显示器的视频播放;每个解码单元包括:
网络接收模块,用以从网络中接收所述视频源发出的视频数据;
视频解码模块,与所述网络接收模块相连,用以将视频源发出压缩编码后的视频数据解码转换成可以直接显示到显示器上的数据,视频解码模块解码后保留有每帧视频图像的采集时间信息;
时钟同步模块,与视频解码模块相连,用以根据每帧视频图像的采集时间和延时信息,计算出该帧的显示时间并传递给下个模块,保证各个解码终端显示视频的连贯性及拼接后大屏各部分图像的同步性;
视频裁剪模块,与时钟同步模块相连,根据其控制的显示器和拼接后大屏的关系裁剪需要显示的部分视频图像;
图像显示模块,与视频裁剪模块相连,根据时钟同步模块计算出的图像显示时间,将解码裁剪后的图像缩放到控制显示器所需比例进行显示。
作为本发明的一种优选方案,所述***进一步包括一NTP服务器,连接各解码终端,用以统一各个解码终端的***时间。
作为本发明的一种优选方案,所述解码终端进一步包括数据剪裁模块,用以在解码后对解码后的数据进行剪裁,裁剪中需要的参数包括视频源图像的原始高度和宽度、裁剪的开始位置、裁剪后的高度和宽度;解码终端的裁剪参数通过配置文件来确定。
本发明的有益效果在于:本发明提出的基于多PC的可无限放大的大屏拼接方法,通过PC终端的可无限扩充实现了大屏拼接的可无限放大,通过PC解码终端的随意组合实现了大屏拼接尺寸和分辨率灵活变化,通过视频延时调节保证了大屏拼接后各部分图像的同步以及整个图像的均匀连续。
附图说明
图1为本发明***的总体框架示意图。
图2为本发明软解播放实例的模块结构图。
图3为本发明延时调节原理图
具体实施方式
下面结合附图详细说明本发明的优选实施例。
实施例一
本发明揭示了一种基于多PC的可无限放大的大屏拼接方法,该技术能在现有大屏拼接技术上实现无限放大,能够灵活改变大屏拼接后的尺寸和分辨率,并解决了各部分图像的同步问题,保证拼接后的视频图像的质量。
图1为本发明的基本框架,本发明揭示一种基于多PC的可无限放大的大屏拼接方法,所述方法包括如下步骤:
【步骤一】将同一视频流发送到通过网络连接的多台PC解码终端,通过UDP组播发送等方式保证数据同步发送。
将多台PC解码终端和视频源通过网络进行连接,每台PC终端控制一块或多块大屏中的显示器,在支持的尺寸和分辨率下,PC终端可以控制的显示器可以随意组合,每台PC终端控制的显示器的块数、尺寸和分辨率都可以不同。选择一台PC终端或一***立的服务器做为NTP服务器。设置视频源中的编码器,码流发送各PC终端。为了尽可能使PC同时收到数据,发送时也应该尽可能同时将数据发送出去,所以发送方式应使用UDP组播或轮流发送方式,轮流发送时为了避免每次发送过程消耗过长时间,应该一有数据就发送,而不应等到一帧数据完整才发送出去。
在各PC终端中部署一个或多个软解播放实例(解码单元)来控制视频图像在显示器上的显示。因为是大屏拼接,所以每个PC终端控制的显示器都应该全屏进行播放。有的PC终端支持一个应用程序控制多个显示器,则只需部署一个软解播放实例,否则在控制多块显示器的情况下,应部署对应个软解播放实例。
图2展示了软解播放实例的模块结构。其中网络接收模块和视频源通过网络连接,负责接收视频数据,接收到数据即传递给视频解码模块。视频解码模块进行解码,转换成可以直接显示到显示器上RGB或YUV数据。时钟同步模块用于各PC模块的时间同步,保证拼接后大屏图像的连贯性和同步。视频裁剪模块用于大屏拼接的图像拼接,防止出现图像遗漏或重叠。图像显示用于将视频图像显示到显示器上。
【步骤二】各个PC解码终端通过NTP时钟同步和帧时间戳延时调节来保证大屏拼接后的图像质量。
该步骤由PC终端软解播放实例中的时钟同步模块完成。由于视频图像从采集到显示到大屏上,需要经过若干个阶段的处理,每个阶段的处理过程都需消耗一定的时间,不仅每帧图像消耗的时间不同,而且各PC解码终端消耗的时间也可能会有所不同,因此保证大屏拼接后图像的质量,需要对图像进行同步处理。
由于视频播放的时间戳控制是根据视频源的采集时间和PC终端的当前***时间来确定,因此为了保证大屏拼接后各部分图像的同步,首先要保证各PC终端和视频源的***时间的同步。在启动软解播放实例前,先启用NTP服务器进行PC终端和视频源之间的时间同步。
图3展示了本发明对视频图像同步处理的原理图,其中每一个圆点都表示一帧视频图像在不同处理阶段所在的时间点。从图中可以看出每帧图像在每个处理阶段所消耗的时间都可能有所不同。在视频采集阶段,摄像头均匀的采集视频并传递给编码器进行编码,由于每帧图像的复杂度不同,因此编码所消耗的时间也有所差异,图中的ei即表示编码器产生的编码器延时。从视频源发送到PC解码终端产生的延时由ti表示,di则表示解码所产生的延时,所以第i帧图像从采集到解码完成所消耗的时间为Xi=ei+ti+di,假设第i帧图像的采集时间为Di,则该帧图像能够显示在屏幕上最早时间应为Di+Xi。由于各帧图像消耗的延时时间不同,如果在解码完成后就直接将该帧图像显示在屏幕上,则会使视频图像出现播放不均匀的情况。为了解决上述情况,保证视频图像的均匀播放,观察图3中各帧产生的延时Xi,Xi+1,Xi+2,Xi+3,其中第i+2帧产生的延时Xi+2最大,如果我们将各帧以采集时间为基准,都延时Xi+2后显示,即延时可能产生的最大延时Xmax后显示,即可保证视频图像的均匀播放。
上述方法解决了在单台PC解码终端上视频播放均匀性的问题。由于大屏拼接的视频图像是由多台PC终端拼接而成,由于各PC终端可能产生的最大延时Xmax有所不同,拼接后的视频可能出现各部分图像播放不同步的问题,影响了大屏拼接的质量。由于各部分图像的不同步也是由于延时时间的不同而产生,因此也可以解决均匀性的方法来处理,即将各帧图像延后各PC终端可能产生的最大延时后显示,即可保证大屏拼接后的视频同步均匀的显示,并且由于视图图像的显示时间和采集时间差是一个固定值,可以保证大屏拼接后的延时始终为固定值,不会随着播放时间的增加而越来越大。
上述解决大屏拼接后视频图像同步均匀的方法中,需要知道各帧在各PC终端所消耗延时的最大值,但是此值是一个不易获取的值,不能通过人工手段获取,并且肯随着时间段的变化而变化,本发明通过各帧的采集时间和各PC解码终端的解码完成时间来自动确定。首先视频源采集一帧视频图像后,将采集时间Di保存在码流中发送出去,码流中还应包含当前的最大延时时间Xmax,初始化时不知道最大延时时间Xmax的大小,可以设置一个可能的经验值。各PC解码终端在接收到数据并解码完成后,根据视频数据终端采集时间Di和最大延时时间Xmax,计算出该帧的显示时间Pi=Di+Xmax,并获取当前的***时间Si,如果Si大于或等于显示时间Pi,则在裁剪图像后直接显示在大屏上。如果Si小于显示Pi,则等待Pi-Si段时间后再显示,并将Pi-Si的值发送给视频源。视频源中的编码器接收到各PC终端返回的Pi-Si值后,选出其中的最小值Xmin。如果该值为正数,表示每个PC终端都需等待一段时间才能显示图像,即当前设置的最大延时时间Xmax的过大,应该把Xmax减小,减小后的值为Xmax-Xmin,相反的,如果该值为负数,则表示Xmax的值太小,应该把Xmax加大,加大后的值应为Xmax+|Xmin|。为了避免每次PC终端解码终端解码一帧都向视频源发送一个时间差,造成最大延时时间的值频繁变化并且不能反应一段时间内的具体情况,将解码终端发送设置一个时间间隔,发送的Pi-Si值也是该段时间的最大值,则可以更准确反应此段时间内的最大延时值。
【步骤三】各PC解码终端裁剪并显示部分图像,保证大屏拼接后图像的完整并且不重叠。
该步骤由PC终端软解播放实例中的视频裁剪模块完成。由于每个PC解码终端都是获取的完整的视频图像,而其实际显示的只是其中的部分图像。为了避免整个拼接后的大屏图像出现重叠或者遗漏,各PC终端应该进行准确的裁剪。裁剪的数据为解码后可以直接显示到显示器上的数据,裁剪的位置由该PC终端控制的显示器和大屏的关系来确定。因此裁剪的参数应该包括原始视频图像的高度和宽度,裁剪的开始位置以及裁剪后的视频图像的高度和宽度。每台PC的裁剪参数可以不同,但在其使用过程中,其参数固定,因此本发明使用配置文件的形式将这些参数设置软解播放实例,软解播放实例在初始化时即确定各参数的值,并且在运行过程中不改变这些参数的值。
以上揭示了本发明的大屏拼接方法,本发明在揭示上述大屏拼接方法的同时,还揭示了一种大屏拼接***,所述***包括视频源、若干台解码终端。所述视频源用以提供视频流;所述台解码终端与所述视频源连接,各解码终端通过网络连接。
各解码终端运行有一个或多个解码单元,每个解码单元控制与对应解码终端相连接的一块或多块显示器的视频播放;每个解码单元包括:
网络接收模块,用以从网络中接收所述视频源发出的视频数据;
视频解码模块,与所述网络接收模块相连,用以将视频源发出压缩编码后的视频数据解码转换成可以直接显示到显示器上的数据,视频解码模块解码后保留有每帧视频图像的采集时间信息;
时钟同步模块,与视频解码模块相连,用以根据每帧视频图像的采集时间和延时信息,计算出该帧的显示时间并传递给下个模块,保证各个解码终端显示视频的连贯性及拼接后大屏各部分图像的同步性;
视频裁剪模块,与时钟同步模块相连,根据其控制的显示器和拼接后大屏的关系裁剪需要显示的部分视频图像;
图像显示模块,与视频裁剪模块相连,根据时钟同步模块计算出的图像显示时间,将解码裁剪后的图像缩放到控制显示器所需比例进行显示;
数据剪裁模块,用以在解码后对解码后的数据进行剪裁,裁剪中需要的参数包括视频源图像的原始高度和宽度、裁剪的开始位置、裁剪后的高度和宽度;解码终端的裁剪参数通过配置文件来确定。
综上所述,本发明提出的基于多PC的可无限放大的大屏拼接方法,通过PC终端的可无限扩充实现了大屏拼接的可无限放大,通过PC解码终端的随意组合实现了大屏拼接尺寸和分辨率灵活变化,通过视频延时调节保证了大屏拼接后各部分图像的同步以及整个图像的均匀连续。
这里本发明的描述和应用是说明性的,并非想将本发明的范围限制在上述实施例中。这里所披露的实施例的变形和改变是可能的,对于那些本领域的普通技术人员来说实施例的替换和等效的各种部件是公知的。本领域技术人员应该清楚的是,在不脱离本发明的精神或本质特征的情况下,本发明可以以其它形式、结构、布置、比例,以及用其它组件、材料和部件来实现。在不脱离本发明范围和精神的情况下,可以对这里所披露的实施例进行其它变形和改变。

Claims (9)

1.一种大屏拼接方法,其特征在于,所述方法包括如下步骤:
A、将同一视频流发送到通过网络连接的若干台解码终端;
B、各个解码终端通过NTP时钟同步和帧时间戳延时调节来保证大屏拼接后的图像质量;
C、各解码终端裁剪并显示部分图像,保证大屏拼接后图像的完整并且不重叠;
所述步骤A中,各解码终端运行有一个或多个解码单元,每个解码单元控制与对应解码终端相连接的一块或多块显示器的视频播放;每个解码单元包括:
网络接收模块,负责从网络中接收视频源发出的视频数据;
视频解码模块,与网络接收模块相连,将视频源发出压缩编码后的视频数据解码转换成可以直接显示到显示器上的数据,视频解码模块解码后保留有每帧视频图像的采集时间信息;
时钟同步模块,与视频解码模块相连,根据每帧视频图像的采集时间和延时信息,计算出该帧的显示时间并传递给下个模块,保证各个解码终端显示视频的连贯性及拼接后大屏各部分图像的同步性;
视频裁剪模块,与时钟同步模块相连,根据其控制的显示器和拼接后大屏的关系裁剪需要显示的部分视频图像;
图像显示模块,与视频裁剪模块相连,根据时钟同步模块计算出的图像显示时间,将解码裁剪后的图像缩放到控制显示器所需比例进行显示。
2.根据权利要求1所述的大屏拼接方法,其特征在于:
所述步骤A中,解码终端为PC机,每台PC机负责控制拼接后大屏中一块或多块显示器的视频播放;
其中,将同一视频流通过UDP组播发送方式发送到若干台解码终端,保证数据同步发送;
所述视频流由视频源发出,视频源包括用于视频采集的摄像头、用于视频图像压缩编码的编码器;
所述编码器编码产生的码流应该保留有各帧图像的采集时间,视频源具有将视频流发送给各解码终端的通讯单元。
3.根据权利要求1所述的大屏拼接方法,其特征在于:
所述步骤B通过一时钟同步模块实现;在经过编码、传输、解码处理之后,视频源采集的间隔均匀的视频数据,在显示时保证大屏图像的均匀和同步。
4.根据权利要求1所述的大屏拼接方法,其特征在于:
所述步骤B包括消除解码延时的步骤:
视频流中各帧图像的采集时间为{D1,D2,D3,...,Dn},
显示时间为{P11,P12,P13,...,P1m,P21,P22,P23,...,P2m,P31,P32,P33,...,P3m,...,Pnm},
编码延时为{e1,e2,e3,...,em},
网络传输延时为{t11,t12,t13,...t1m,t21,t22,t23,...,t2m,t31,t32,t33,...,t 3m,...,tnm},
解码延时为{d11,d12,d13,...,d1m,d21,d22,d23,...,d2m,d31,d32,d33,...,d3m,...,dnm},
其中,n为帧的数目,m为解码终端的数目;
所以终端j显示视频流中的第i帧的时间Pij=Di+ei+tij+dij;其中,1≤i≤n,1≤j≤m;
取Pi=max{Pij},Pi为帧i在各终端上的显示时间。
5.根据权利要求1所述的大屏拼接方法,其特征在于:
设置一NTP服务器,连接各解码终端,用以统一各个解码终端的***时间。
6.根据权利要求1所述的大屏拼接方法,其特征在于:
所述步骤C中,所述解码终端在解码后对解码后的数据进行剪裁,裁剪中需要的参数包括视频源图像的原始高度和宽度、裁剪的开始位置、裁剪后的高度和宽度;解码终端的裁剪参数通过配置文件来确定。
7.一种大屏拼接***,其特征在于,所述***包括视频源、若干台解码终端;
所述视频源用以提供视频流;
所述若干台解码终端与所述视频源连接,各解码终端通过网络连接;各解码终端运行有一个或多个解码单元,每个解码单元控制与对应解码终端相连接的一块或多块显示器的视频播放;每个解码单元包括:
网络接收模块,用以从网络中接收所述视频源发出的视频数据;
视频解码模块,与所述网络接收模块相连,用以将视频源发出压缩编码后的视频数据解码转换成可以直接显示到显示器上的数据,视频解码模块解码后保留有每帧视频图像的采集时间信息;
时钟同步模块,与视频解码模块相连,用以根据每帧视频图像的采集时间和延时信息,计算出该帧的显示时间并传递给下个模块,保证各个解码终端显示视频的连贯性及拼接后大屏各部分图像的同步性;
视频裁剪模块,与时钟同步模块相连,根据其控制的显示器和拼接后大屏的关系裁剪需要显示的部分视频图像;
图像显示模块,与视频裁剪模块相连,根据时钟同步模块计算出的图像显示时间,将解码裁剪后的图像缩放到控制显示器所需比例进行显示。
8.根据权利要求7所述的大屏拼接***,其特征在于:
所述***进一步包括一NTP服务器,连接各解码终端,用以统一各个解码终端的***时间。
9.根据权利要求7所述的大屏拼接***,其特征在于:
所述解码终端进一步包括数据剪裁模块,用以在解码后对解码后的数据进行剪裁,裁剪中需要的参数包括视频源图像的原始高度和宽度、裁剪的开始位置、裁剪后的高度和宽度;解码终端的裁剪参数通过配置文件来确定。
CN 201010128568 2010-03-19 2010-03-19 大屏拼接方法及*** Active CN101807389B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201010128568 CN101807389B (zh) 2010-03-19 2010-03-19 大屏拼接方法及***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201010128568 CN101807389B (zh) 2010-03-19 2010-03-19 大屏拼接方法及***

Publications (2)

Publication Number Publication Date
CN101807389A CN101807389A (zh) 2010-08-18
CN101807389B true CN101807389B (zh) 2011-11-23

Family

ID=42609158

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201010128568 Active CN101807389B (zh) 2010-03-19 2010-03-19 大屏拼接方法及***

Country Status (1)

Country Link
CN (1) CN101807389B (zh)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101968730B (zh) * 2010-10-27 2012-02-22 广东威创视讯科技股份有限公司 多处理器级联信号传输数据交互同步处理方法及其***
CN102226943B (zh) * 2011-04-29 2013-04-17 杭州海康威视数字技术股份有限公司 一种实现屏幕拼接的***及方法
MX336819B (es) * 2012-02-21 2016-02-02 Ericsson Telefon Ab L M Control, dependiente del tiempo de procesamiento, de transmision de bloques de datos.
KR101917174B1 (ko) 2012-02-24 2018-11-09 삼성전자주식회사 전자 장치 사이의 스트림 전송 방법 및 그 방법을 처리하는 전자 장치
CN102883209A (zh) * 2012-09-21 2013-01-16 广东威创视讯科技股份有限公司 一种拼接墙的osd处理方法及装置
CN103813129A (zh) * 2012-11-07 2014-05-21 浙江大华技术股份有限公司 图像采集时间控制方法、装置、***及视频处理服务器
CN103079088B (zh) * 2012-12-14 2016-06-29 广东威创视讯科技股份有限公司 多屏视频预处理与同步播放方法和***
CN103065610B (zh) * 2013-01-08 2015-02-18 北京淳中视讯科技有限公司 一种拼接屏同步处理方法和一种拼接屏同步处理装置
CN104284098B (zh) * 2013-07-01 2017-11-14 杭州海康威视数字技术股份有限公司 视频数据的处理方法及***
CN103581570A (zh) * 2013-07-30 2014-02-12 中国电子科技集团公司第二十八研究所 一种基于多媒体通信的大屏拼接***及拼接方法
CN103402140B (zh) * 2013-08-01 2016-12-28 深圳英飞拓科技股份有限公司 一种分布式ip视频解码器同步拼接上墙的方法和***
CN104426624B (zh) * 2013-08-26 2016-08-24 浙江大华技术股份有限公司 一种图像同步显示方法及装置
CN103500068B (zh) * 2013-10-08 2017-03-22 惠州Tcl移动通信有限公司 图像显示方法和主移动设备
CN104639796B (zh) * 2013-11-08 2017-11-21 浙江大华技术股份有限公司 一种监控服务器及其控制视频源设备时间同步的方法
CN104660916B (zh) * 2013-11-18 2018-09-18 杭州海康威视数字技术股份有限公司 屏幕拼接***和视频数据流的处理方法
CN103716549A (zh) * 2013-12-31 2014-04-09 成都有尔科技有限公司 高清同步播放***及其实现方法
CN103795979B (zh) * 2014-01-23 2017-04-19 浙江宇视科技有限公司 一种分布式图像拼接同步的方法和装置
CN103763556B (zh) * 2014-01-29 2018-03-06 广东威创视讯科技股份有限公司 视频图像编解码装置及其方法、传输***及其方法
CN104216671B (zh) * 2014-08-19 2017-03-22 宁波Gqy视讯股份有限公司 一种在多套拼接显示屏上实现同步协同显示的方法
TWI622042B (zh) * 2014-10-13 2018-04-21 緯創資通股份有限公司 矩陣式螢幕、顯示裝置與其相關之顯示方法
CN104602095A (zh) * 2014-12-26 2015-05-06 广东威创视讯科技股份有限公司 一种组合桌面采集与同步显示方法及***
CN104918137B (zh) * 2015-06-03 2018-04-13 宁波Gqy视讯股份有限公司 一种拼接屏***播放视频的方法
CN105187689A (zh) * 2015-10-12 2015-12-23 国家电网公司 一种多终端共同播放超高清视频的同步方法
CN106055292B (zh) * 2016-05-23 2019-06-04 青岛海信电器股份有限公司 图像拼接方法、装置及显示设备
CN106412633A (zh) * 2016-10-12 2017-02-15 北京蓝拓扑电子技术有限公司 分布式多画面拼控器屏幕映射方法及显示时钟同步控制方法及***
CN106454010A (zh) * 2016-10-21 2017-02-22 青岛海信电器股份有限公司 多屏拼接显示***同步显示校准方法、显示器及***
CN106982346A (zh) * 2017-04-07 2017-07-25 上海良讯科技股份有限公司 多屏远程呈现***及方法
CN108881955A (zh) * 2017-05-08 2018-11-23 Tcl新技术(惠州)有限公司 一种实现分布式节点设备视频同步输出的方法及***
CN107509006B (zh) * 2017-08-11 2019-11-01 北京小鸟科技股份有限公司 多组拼接屏的视频同步装置及显示设备
CN108540866A (zh) * 2018-04-13 2018-09-14 北京显约科技有限公司 一种视频拼接显示下的视频多路输出***及方法
CN110691231A (zh) * 2018-07-05 2020-01-14 深圳多哚新技术有限责任公司 一种虚拟现实播放***及其同步播放方法
CN110012240A (zh) * 2019-05-14 2019-07-12 威创集团股份有限公司 一种信号源切换方法、***、存储介质及控制主机
CN112243105A (zh) * 2019-07-17 2021-01-19 杭州海康威视数字技术股份有限公司 分布式拼接显示***、方法、装置及电子设备
CN112788421B (zh) * 2019-11-08 2023-05-26 京东方科技集团股份有限公司 多媒体播放方法、主控板、多媒体播放设备和***
CN111107411B (zh) * 2019-12-30 2022-03-18 威创集团股份有限公司 一种分布式跨节点视频同步方法及***
CN111208965B (zh) * 2020-01-15 2023-09-22 宁波Gqy视讯股份有限公司 拼接显示***及其显示方法
CN111405201B (zh) * 2020-04-13 2022-08-19 北京小鸟科技股份有限公司 多时间处理及显示***、处理装置、显示设备
CN111752513A (zh) * 2020-05-29 2020-10-09 西安万像电子科技有限公司 图像处理方法及装置
CN112040284B (zh) * 2020-06-24 2022-05-27 苏州科达科技股份有限公司 多显示屏的同步显示控制方法、装置及存储介质
CN112637444A (zh) * 2020-11-19 2021-04-09 合肥市卓迩无人机科技服务有限责任公司 多路4k拼接***NTP毫秒时钟同步算法
CN113365127B (zh) * 2021-06-02 2021-12-24 众立智能科技(深圳)有限公司 局域网多屏显示同步方法及装置
CN116156233A (zh) * 2021-11-22 2023-05-23 华为终端有限公司 一种显示画面同步方法、***及电子设备
CN115866333B (zh) * 2022-11-30 2024-06-11 天地阳光通信科技(北京)有限公司 非标异形屏视频同步漫游***及方法
CN116913178B (zh) * 2023-09-13 2023-11-28 奥视(天津)科技有限公司 一种拼接屏联动***及视频拼接方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62163481A (ja) * 1986-01-13 1987-07-20 Sony Corp ビデオテツクスのマルチデイスプレイ装置
JP2793805B2 (ja) * 1987-02-24 1998-09-03 松下電工株式会社 書籍印刷状態検査装置
CN2509797Y (zh) * 2001-09-29 2002-09-04 张健 具有画面分割功能的图像编码器
CN101493739A (zh) * 2009-03-03 2009-07-29 广东威创视讯科技股份有限公司 一种拼接墙定位***及拼接墙定位方法

Also Published As

Publication number Publication date
CN101807389A (zh) 2010-08-18

Similar Documents

Publication Publication Date Title
CN101807389B (zh) 大屏拼接方法及***
CN114390298B (zh) ***体内容捕获以进行实况视频广播制作***和方法
US11316912B2 (en) System and method for synchronizing transmission of media content using timestamps
US20090293093A1 (en) Content server, information processing apparatus, network device, content distribution method, information processing method, and content distribution system
US10397633B2 (en) Receiver apparatus and synchronization processing method thereof
KR100902013B1 (ko) 타일드 디스플레이 시스템 및 상기 시스템에서의 동기화방법
KR101640148B1 (ko) 대화형 마크를 스트리밍 콘텐츠에 동기화시키기 위한 디바이스 및 방법
RU2627040C2 (ru) Приемное устройство и способ синхронизационной обработки изображений в этом устройстве
CN101127917B (zh) 一种互联网流媒体格式音视频同步的方法及其***
CN101179484A (zh) 一种不同媒体流间的同步方法及***
TW200630843A (en) System and method of broadcasting full-screen video
CN101710997A (zh) 基于mpeg-2***实现视、音频同步的方法及***
CN114286149B (zh) 一种跨设备和***的音视频同步渲染的方法及***
US11503385B2 (en) Live broadcast IP latency compensation
Ubik et al. Ultra-low-latency video transmissions for delay sensitive collaboration
Shirai et al. Real time switching and streaming transmission of uncompressed 4K motion pictures
EP1855402A1 (en) Transmission, reception and synchronisation of two data streams
US8387105B1 (en) Method and a system for transmitting video streams
WO2012068898A1 (zh) 移动多媒体广播中分级业务同步的方法、设备和***
JP2012019456A (ja) メディア同期再生システム
Calverley Time-compensated remote production over IP
JP2015046708A (ja) 通信システム、通信方法、送信側同期信号配信装置、送信側同期制御装置、受信側同期信号配信装置、受信側同期制御装置及びプログラム
JP2012142798A (ja) ストリーム切替方法およびデジタル放送送出システム
JP2008244869A (ja) ライブ配信システム、Webサーバ、エンコーダ及びライブ配信システムにおける配信管理方法
JP2005198105A (ja) 同期信号発生装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C56 Change in the name or address of the patentee
CP03 Change of name, title or address

Address after: 201209 Chuansha Road, Shanghai, No. 221, room 11, building 955

Patentee after: BOCOM Smart Network Technologies Inc.

Address before: Room 11, building 955, No. 221, Chuansha Road, Shanghai, Pudong New Area

Patentee before: Shanghai Bocom Intelligent Network Technology Co.,Ltd.

CP01 Change in the name or title of a patent holder

Address after: 201209 Chuansha Road, Shanghai, No. 221, room 11, building 955

Patentee after: Bocom Intelligent Network Technology Co. Ltd.

Address before: 201209 Chuansha Road, Shanghai, No. 221, room 11, building 955

Patentee before: BOCOM Smart Network Technologies Inc.

CP01 Change in the name or title of a patent holder