KR102025157B1 - 복수의 촬영 영상 전송을 위한 시스템 및 그 제어방법 - Google Patents
복수의 촬영 영상 전송을 위한 시스템 및 그 제어방법 Download PDFInfo
- Publication number
- KR102025157B1 KR102025157B1 KR1020180001907A KR20180001907A KR102025157B1 KR 102025157 B1 KR102025157 B1 KR 102025157B1 KR 1020180001907 A KR1020180001907 A KR 1020180001907A KR 20180001907 A KR20180001907 A KR 20180001907A KR 102025157 B1 KR102025157 B1 KR 102025157B1
- Authority
- KR
- South Korea
- Prior art keywords
- image
- camera
- captured image
- video signal
- cameras
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2365—Multiplexing of several video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
본 발명은 복수의 촬영 영상 전송을 위한 시스템 및 그 제어방법에 관한 것이다. 본 발명에 따른 촬영 영상 전송 시스템의 제어방법은,
또, 상기한 목적을 달성하기 위해 본 발명에 따른 촬영 영상 전송 시스템의 제어방법은, 복수의 카메라로부터 각각의 촬영 영상 신호를 수신하는 단계와; 상기 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별 영상이 재생되도록 하는 단계와; 상기 단계에서 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 단계와; 상기 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 단계와; 상기 단계에서 생성된 통합 영상 신호를 수신 단말기로 전송하는 단계를 포함하는 것을 특징으로 한다.
또, 상기한 목적을 달성하기 위해 본 발명에 따른 촬영 영상 전송 시스템의 제어방법은, 복수의 카메라로부터 각각의 촬영 영상 신호를 수신하는 단계와; 상기 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별 영상이 재생되도록 하는 단계와; 상기 단계에서 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 단계와; 상기 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 단계와; 상기 단계에서 생성된 통합 영상 신호를 수신 단말기로 전송하는 단계를 포함하는 것을 특징으로 한다.
Description
본 발명은 영상 전송을 위한 시스템 및 그 제어방법에 관한 것으로, 보다 상세하게는 복수의 카메라에 의해 촬영되는 영상들을 전송하기 위한 시스템 및 그 제어방법에 관한 것이다.
최근 아날로그 방송에 국한되지 않고 다양한 방식의 방송 콘텐츠 서비스가 이루어지고 있다.
그런데 종래에는 방송국에서 하나의 카메라에 의해 촬영된 영상만을 송출함에 따라 시청자는 다양한 각도 또는 다양한 위치에서 촬영된 영상을 동시에 시청할 수 없는 문제점이 있었다.
특히 다중의 플레이어가 참여하는 스포츠의 경우 다양한 위치에 있는 플레이어의 모습을 확인 및 시청하고자 하는 시청자들의 요구가 있음에도 불구하고 종래에는 이러한 서비스가 제공되지 못하고 있는 실정이다.
예를 들어 야구 경기의 경우, 시청자들 중에는 투수가 투구하는 모습과 1루나 3루 주자의 모습을 동시에 확인하고픈 사람들이 있는데, 종래에는 특정 카메라의 각도가 투수와 주자를 동시에 촬영하는 위치에 있는 경우 또는 투수와 주자를 동시에 촬영하는 화각인 경우에 한하여 투수와 주자를 동시에 보여줄 수 있는데, 이 경우에는 카메라 각도 또는 화각이 상술한 조건을 만족하는 상황이어서 투수의 얼굴이나 주자의 얼굴을 크게 클로즈업하여 보여줄 수 없는 문제가 있어서, 여전히 시청자들의 니즈를 충족시키기에는 부족하다.
물론 방송국 자체에서 복수의 카메라로 촬영한 영상을 하나의 영상으로 편집하여 전송할 수는 있지만, 이 경우 시청 단말기 상에서 편집 영상에 포함된 일부 영상을 확대하거나 하는 등 별도로 제어할 수 없는 문제가 있다.
즉, 텔레비전 화면을 구분하여 여러 개의 방송 채널을 각각 구분된 영역에 표시되도록 하는 PIP 기술은 이용되고 있지만, 상술한 바와 같이 하나의 채널 내에서 별도로 구분된 다양한 종류의 영상이 동시에 표시되도록 하는 서비스가 제공되고 있지 못하므로, 이에 대한 개선이 필요한 상황이다.
본 발명은 상기한 종래의 문제점을 해결하기 위해 안출된 것으로서, 그 목적은 스포츠 경기를 시청하는 경우 경기장 내의 다양한 위치를 동시에 시청할 수 있도록 하는 시스템 및 그 제어방법을 제공하는 것이다.
상기한 목적을 달성하기 위해 본 발명에 따른 촬영 영상 전송 시스템은, 복수의 카메라로부터 각각의 촬영 영상 신호를 수신하는 영상 수신부와; 상기 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별 영상이 재생되도록 하는 재생 처리부와; 상기 재생 처리부에 의해 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 동기화 처리부와; 상기 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 통합 영상 생성부와; 상기 통합 영상 생성부에서 생성된 통합 영상 신호를 수신 단말기로 전송하는 전송부를 포함하여 구성된다.
또, 상기한 목적을 달성하기 위해 본 발명에 따른 촬영 영상 전송 시스템의 제어방법은, 복수의 카메라로부터 각각의 촬영 영상 신호를 수신하는 단계와; 상기 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별 영상이 재생되도록 하는 단계와; 상기 단계에서 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 단계와; 상기 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 단계와; 상기 단계에서 생성된 통합 영상 신호를 수신 단말기로 전송하는 단계를 포함하여 이루어진다.
이상 설명한 바와 같이 본 발명에 따르면, 스포츠 경기 방송 시청자는 하나의 방송 채널에서 다양한 위치의 선수들, 또는 다양한 위치의 경기 상황을 동시에 시청할 수 있다.
특히, 서로 다른 피사체를 촬영한 복수 개의 카메라 영상을 하나의 방송 채널(콘텐츠 수신 채널)을 통해 전송하므로, 서로 다른 채널을 통해 전송하는 경우와 비교할 때 시청 단말이 복수 개의 카메라 영상을 수신하여 재생하데까지 걸리는 시간을 단축시킬 수 있다.
예를 들어 서로 다른 통신 채널을 통해 각각의 카메라 영상을 전송하는 경우 각 카메라 영상이 각각 패킷으로 나뉜 후 서로 다른 경로를 통해 전송되므로 시청자 단말기까지 모든 카메라 영상이 도달하는데 상당한 시간 지연이 발생할 수 있으나, 본 발명과 같이 동일한 통신 채널을 통해 복수의 카메라 영상 패킷을 전송하는 경우 이러한 시간 지연 문제를 상당히 해소할 수 있다.
특히, 촬영 영상 전송 시스템은 동기화된 정보가 포함된 통합 영상 신호를 전송하므로, 이를 이용하는 시청자 단말기에서는 동시에 표시되는 영상들간에 시간 동기화가 이루어지도록 할 수 있어, 각 영상들간의 시간 차이로 인한 시청자들의 불편을 최소화시킬 수 있다.
또한, 촬영 영상 전송 시스템은 복수 개의 카메라로부터 수신되는 촬영 영상들에 대해 동기화를 수행하기 위해 각 촬영 영상에 포함된 현재 시각 이미지를 이용하므로 별도의 동기화를 위한 통신 프로토콜을 변경시키거나 과도하게 비싼 동기화용 장치가 필요 없을 뿐만 아니라, 정교한 동기화 처리가 가능하다.
도 1은 본 발명의 일 실시예에 따른 촬영 영상 전송 시스템을 포함하는 전체 통신 시스템의 개략 구성도이고,
도 2는 도 1의 촬영 영상 전송 시스템의 기능 블록도이고,
도 3은 본 발명의 제1 실시예에 따른 촬영 영상 전송 시스템을 포함하는 전체 통신 시스템의 제어 흐름도이고,
도 4는 도 3에서 촬영 영상 전송 시스템이 각 카메라별 영상이 재생되는 상태를 나타낸 도면이고,
도 5는 본 발명의 제2 실시예에 따른 촬영 영상 전송 시스템을 포함하는 전체 통신 시스템의 제어 흐름도이다.
도 2는 도 1의 촬영 영상 전송 시스템의 기능 블록도이고,
도 3은 본 발명의 제1 실시예에 따른 촬영 영상 전송 시스템을 포함하는 전체 통신 시스템의 제어 흐름도이고,
도 4는 도 3에서 촬영 영상 전송 시스템이 각 카메라별 영상이 재생되는 상태를 나타낸 도면이고,
도 5는 본 발명의 제2 실시예에 따른 촬영 영상 전송 시스템을 포함하는 전체 통신 시스템의 제어 흐름도이다.
이하에서는 첨부도면을 참조하여 본 발명에 대해 상세히 설명한다.
이하 본 발명에 따른 각 실시예는 본 발명의 이해를 돕기 위한 하나의 예에 불과하고, 본 발명이 이러한 실시예에 한정되는 것은 아니다. 특히 본 발명은 각 실시예에 포함되는 개별 구성, 개별 기능, 또는 개별 단계 중 적어도 어느 하나 이상의 조합으로 구성될 수 있다.
특히, 편의상 청구 범위의 일부 청구항에는 '(a)'와 같은 알파벳을 포함시켰으나, 이러한 알파벳이 각 단계의 순서를 규정하는 것은 아니다.
또한 이하 본 발명에 따른 각 실시예에서 언급하는 각 신호는 한 번의 연결 등에 의해 전송되는 하나의 신호를 의미할 수도 있지만, 후술하는 특정 기능 수행을 목적으로 전송되는 일련의 신호 그룹을 의미할 수도 있다. 즉, 각 실시예에서는 소정의 시간 간격을 두고 전송되거나 상대 장치로부터의 응답 신호를 수신한 이후에 전송되는 복수 개의 신호들이 편의상 하나의 신호명으로 표현될 수 있는 것이다.
본 발명의 일 실시예에 따른 복수의 촬영 영상을 시청자 단말기(400)로 전송하는 촬영 영상 전송 시스템(100)을 포함하는 전체 통신 시스템의 개략 구성은 도 1에 도시된 바와 같다.
동 도면에서 각각의 카메라(210,220,230)는 영상을 촬영하여 전송하는 것으로서, 본 실시예에서는 동일한 장소(예를 들어 스포츠 경기장)에 설치되어 촬영을 하는 카메라(210,220,230)일 수 있다.
본 실시예에서는 각 카메라(210,220,230)가 야구 경기의 중계를 위해 야구 경기장의 곳곳에 설치된 것을 일 예로 한다.
이러한 각 카메라(210,220,230)는 촬영 영상 신호를 촬영 영상 전송 시스템(100)에 전송하는데, 이처럼 각 카메라(210,220,230)가 전송하는 촬영 영상 신호는 아날로그 신호 또는 디지털 신호일 수 있고, 이러한 촬영 영상 신호에는 당연히 비디오 신호와 사운드 신호가 포함될 수 있다.
현재 시각 표시기(310,320,330)는 현재 시각을 나타내는 것으로서, 예를 들어 LED(Light Emitting Diode), LCD(Liquid Crystal Display)와 같은 디지털 시계에 해당하거나 또는 아날로그 시계에 해당할 수 있는데, 후술하는 바와 같이 각 카메라(210,220,230)의 촬영 영상을 동기화하기 위해 필요한 것이므로, 정밀한 초 이하의 단위까지 표시가 가능한 디지털 시계로 구성됨이 바람직하다.
즉, 각 카메라(210,220,230)는 예를 들어 야구 경기를 촬영함에 있어서 그 각 카메라(210,220,230) 근처에 놓인 현재 시각 표시기(310,320,330)를 함께 촬영하여 전송함으로써, 후술하는 바와 같이 관리자의 선택을 통해 또는 이미지 자동 분석을 통해 각 카메라(210,220,230)의 촬영 영상 신호가 동기화되도록 할 수 있는데, 이에 대한 보다 구체적인 설명은 후술토록 한다.
한편, 시청자 단말기(400)는 촬영 영상 전송 시스템(100)으로부터 영상 콘텐츠를 수신하여 표시하는 것으로서, 도 1에 도시된 바와 같이 셋탑박스(410)와 텔레비전(420)으로 이루어진 것일 수도 있고, 또는 스마트폰과 같은 휴대용 무선 통신 단말기에 해당할 수도 있다.
이처럼 시청자 단말기(400)는 촬영 영상 전송 시스템(100)이 전송하는 영상 콘텐츠 즉, 후술하는 통합 영상 신호를 수신하여 재생 및 표시하는 기능을 포함하는 모든 종류의 단말기에 해당할 수 있다.
촬영 영상 전송 시스템(100)은 앞서 설명한 각각의 카메라(210,220,230)로부터 촬영 영상 신호를 수신하여 그 각각의 촬영 영상 신호에 대한 동기화 처리를 수행한 후에 통합하여 시청자 단말기(400)로 전송하는 기능을 수행한다.
이러한 촬영 영상 전송 시스템(100)의 구체적인 기능 블록의 일 예는 도 2에 도시된 바와 같다.
동 도면에 도시된 바와 같이 촬영 영상 전송 시스템(100)은 영상 수신부(110), 재생 처리부(120), 동기화 처리부(130), 통합 영상 생성부(140), 전송부(150)를 포함하여 구성될 수 있다.
영상 수신부(110)는 복수의 카메라(210,220,230)로부터 각각의 촬영 영상 신호를 수신하는 기능을 수행한다.
즉, 도 1을 참조하면 영상 수신부(110)는 1번 카메라(210), 2번 카메라(220), 3번 카메라(230)로부터 각각 촬영 영상 신호를 수신하는 것이다.
재생 처리부(120)는 복수의 카메라(210,220,230)로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별(210,220,230) 영상이 재생되도록 하는 기능을 수행한다.
예를 들어 재생 처리부(120)는 각 카메라(210,220,230)로부터 수신된 각각의 촬영 영상 신호를 관리자가 조작하는 별도의 디스플레이 장치(미 도시함, 이하 '관리자 단말기'라 함)로 전송하여 표시되도록 할 수도 있다.
이때 재생 처리부(120)는 관리자 단말기에서 지원하는 해상도나 인코딩 포맷 등을 고려하여 각 카메라(210,220,230)로부터 수신된 각각의 촬영 영상 신호에 대해 트랜스코딩을 수행한 후 관리자 단말기로 전송할 수도 있다.
이때 관리자 단말기에는 각 카메라(210,220,230)에 의해 촬영된 영상이 카메라별(210,220,230)로 동시에 표시될 수 있다.
물론 관리자 단말기가 별도로 구성되지 않고 본 발명에 따른 촬영 영상 전송 시스템 내에 디스플레이부(미 도시함)가 구비된 경우 재생 처리부(120)는 해당 디스플레이부에 각 카메라별(210,220,230) 영상이 재생/표시되도록 할 수도 있음은 물론이다.
동기화 처리부(130)는 재생 처리부(120)에 의해 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 기능을 수행한다.
예를 들어 동기화 처리부(130)는 재생 중인 각 카메라별 영상에 대해 관리자의 선택에 따라 기 설정된 프레임 간격만큼 전/후 이동이 이루어지도록 하거나, 마찬가지로 재생 중인 각 카메라별 영상이 특정 영상 프레임에서 일시 정지 되도록 재생 처리부(120)를 제어할 수 있는데, 이러한 관리자의 각 카메라별 영상에 대한 조작이 완료되는 시점에 각 카메라의 촬영 영상 신호를 서로 동기화시킬 수 있다.
일 예로, 상술한 바와 같이 카메라(210,220,230)에 의해 촬영되는 영상에는 현재 시각 표시기(310,320,330)가 함께 촬영되므로, 관리자가 각 카메라별 영상을 시청하면서 각 영상에 포함되어 있는 현재 시각 표시기(310,320,330)의 현재 시각이 서로 일치하는 위치에서 각 카메라별 영상을 일시 정지를 한 후 완료 버튼을 누르는 경우, 동기화 처리부(130)는 그 일시 정지된 각 카메라별 영상 프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시킬 수 있다.
즉, 동기화 처리부(130)는 관리자가 재생/일시 정지/전후 이동 등 각 영상에 대한 조작을 완료한 시점에 재생되고 있던 또는 일시 정지된 각 카메라별 영상 프레임을 기준 영상 프레임으로 선정하고, 그 선정된 각 카메라별 기준 영상 프레임을 기초로 각 카메라(210,220,230)의 촬영 영상 신호를 서로 동기화시킬 수 있는 것이다.
이를 위해 동기화 처리부(130)는 관리자의 조작 또는 선택 등을 감지할 수 있어야 하는데, 관리자 단말기가 외부에 구비된 경우에는 관리자 단말기로부터 통신 라인을 통해 수신되는 입력 신호를 기초로 관리자의 조작 또는 선택을 감지하면 되고, 별도의 입력부(미 도시함)가 구비된 경우라면 해당 입력부를 통해 관리자의 조작 또는 선택을 감지하면 된다.
각 카메라(210,220,230)의 촬영 영상 신호를 동기화시키는 한 방법으로, 동기화 처리부(130)는 각 카메라별 기준 영상 프레임에 동일한 시간 정보(즉, 동기화용 시간 정보)를 매칭시킨 각각의 동기화 영상 신호를 생성할 수 있다. 동기화용 시간 정보는 시청자 단말기(400)에서 동 시점에 촬영된 영상들을 동시에 재생할 수 있도록 하는 것으로서, 이에 대한 보다 상세한 설명은 후술토록 한다.
여기서 동기화 영상 신호는 아날로그 신호일 수도 있지만, 디지털 신호로 처리되는 경우에는 예를 들어 MPEG 트랜스포트 스트림(즉, MPEG transport stream, 줄여서 TS) 포맷으로 이루어진 것(이하 'TS 파일'이라 함)일 수 있다. MPEG 트랜스포트 스트림은 헤더와 페이로드를 포함하는 패킷을 그 기본 데이터 단위로 하는 것으로서, 그 구조 자체는 공지된 기술에 해당하므로 보다 상세한 설명은 생략한다.
이 경우 동기화 처리부(130)는 각 촬영 영상 신호에 대응되는 TS 파일을 생성함과 아울러 그 TS 파일 내(바람직하게는 TS 파일의 프레임별 패킷마다)에 시간 정보 즉, 상술한 동기화용 시간 정보를 포함시킬 수 있다.
즉, 이처럼 특정 동기화용 시간 정보를 각 촬영 영상 신호에 대응되는 TS 파일의 특정 프레임별 패킷에 포함시키는 과정이 본 실시예에 언급하는 동기화 처리에 해당할 수 있다.
보다 구체적인 예를 든다면, 관리자가 각 카메라(210,220,230)의 촬영 영상 재생 화면을 보던 중 1번 카메라(210)에서 수신되는 촬영 영상 신호의 프레임 중 네 번째 영상 프레임에서 일시 정지를 하고, 2번 카메라(220)에서 수신되는 촬영 영상 신호의 프레임 중 여섯 번째 영상 프레임에서 일시 정지를 하여 완료한 경우, 동기화 처리부(130)는 그 1번 카메라(210)의 촬영 영상 신호의 프레임 중 네 번째 영상 프레임을 포함하는 TS 패킷과 2번 카메라(220)의 촬영 영상 신호의 프레임 중 여섯 번째 영상 프레임을 포함하는 TS 패킷에 각각 '1'이라는 동기화 시간 정보를 포함시킬 수 있다.
다른 예로써, 관리자가 1번 카메라(210)에서 수신되는 촬영 영상 신호의 프레임 중 여섯 번째 영상 프레임에서 일시 정지를 하고, 2번 카메라(220)에서 수신되는 촬영 영상 신호의 프레임 중 여덟 번째 프레임에서 일시 정지를 하여 완료한 경우, 동기화 처리부(130)는 그 1번 카메라(210)의 여섯 번째 영상 프레임과 2번 카메라(220)의 여덟 번째 영상 프레임을 각각 기준 영상 프레임으로 선정하고, 그 선정된 기준 영상 프레임을 기초로 동기화 처리를 수행할 수 있는데, 구체적으로 1번 카메라(210)의 여섯 번째 영상 프레임을 포함하는 TS 패킷과 2번 카메라(220)의 여덟 번째 영상 프레임을 포함하는 TS 패킷에 각각 '1'이라는 동일한 동기화 시간 정보를 포함시킬 수 있는 것이다.
이렇게 특정 시간 정보와 각 카메라(210,220,230)의 기준 영상 프레임이 매칭된 경우, 동기화 처리부(130)는 그 이후의 영상프레임에 대해서는 증가된 동기화 시간 정보를 순서대로 매칭시킬 수 있다.
예를 들어 바로 앞 예에서와 같이 1번 카메라(210)의 촬영 영상 신호의 프레임 중 여섯 번째 프레임을 포함하는 TS 패킷과 2번 카메라(220)의 촬영 영상 신호의 프레임 중 여덟 번째 프레임을 포함하는 TS 패킷에 '1'이라는 동기화 시간 정보를 포함된 경우, 그 이후의 촬영 영상 신호의 프레임, 즉, 1번 카메라(210)의 촬영 영상 신호의 프레임 중 일곱 번째 프레임을 포함하는 TS 패킷과 2번 카메라(220)의 촬영 영상 신호의 프레임 중 아홉 번째 프레임을 포함하는 TS 패킷에는 '2'라는 동기화 시간 정보를 포함시키게 되는 것이고, 이러한 과정은 지속적으로 반복될 수 있다.
지금까지는 영상프레임 각 카메라(210,220,230)에서 촬영된 영상의 비교를 관리자가 수동으로 수행하는 것을 일 예로 하였으나, 이러한 영상프레임들간의 동시점 비교가 자동으로 이루어질 수도 있음은 물론이다.
즉, 동기화 처리부(130)는 재생 처리부(120)에 자체적으로 재생(예를 들어 외부로 표시됨이 없이 내부 메모리 상에서 디코딩되는 것을 포함함)이 이루어지는 경우, 그 재생 중인 각 카메라별 영상으로부터 현재 시각 이미지를 추출하고, 그 추출된 현재 시각 이미지를 분석하여 동일한 현재 시각에 대응되는 각 카메라별 영상 프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시킬 수 있다. 즉, 동기화 처리부(130)는 동일한 현재 시각에 대응되는 각 카메라별 영상 프레임에 동일한 시간 정보를 매칭시킨 동기화 영상 신호를 각 카메라별로 생성할 수 있는 것이다.
여기서 현재 시각 이미지는 앞서 설명한 바와 같이 각 카메라(210,220,230)가 촬영시 함께 촬영한 현재 시각 표시기(310,320,330)의 이미지에 해당한다.
즉, 동기화 처리부(130)는 각 카메라 영상에서 현재 시각 표시기에 대응되는 현재 시각 이미지를 추출하고, 그 추출한 현재 시각 이미지를 분석하여 각 카메라의 영상프레임별 현재 시각을 판단한 후, 동일한 현재 시각에 대응되는 각 카메라의 영상프레임을 기준 영상 프레임으로 선정할 수도 있는 것이다. 물론 현재 시각 이미지가 반드시 현재 시각 표시기 촬영 이미지에 국한되는 것은 아니다.
현재 시각 이미지를 추출함에 있어서 동기화 처리부(130)는 기 설정된 영역을 기준으로 삼을 수 있다.
즉, 동기화 처리부(130)는 재생 처리부(120)에 의해 재생 중인 각 카메라별 영상의 각 영상 프레임에서 기 설정된 영역을 기준으로 현재 시각 이미지를 추출할 수 있다.
예를 들어 각 카메라(210, 220,230)가 촬영을 함에 있어서 그 대응되는 현재 시각 표시기(310,320,330)가 촬영 영역 중 좌측 하단의 특정 영역에서 찍히도록 촬영한다고 가정하면, 동기화 처리부(130)는 각 카메라(210,220,230)의 재생 영상 프레임들의 좌측 하단의 특정 영역을 기준으로 현재 시각 이미지로 추출한 후, 그 추출한 현재 시각 이미지를 분석하여 각 카메라(210,220,230)의 영상프레임별 현재 시각을 판단할 수 있는 것이다.
또는 각 현재 시각 표시기(310,320,330)가 동일한 형상을 갖는 경우, 동기화 처리부(130)는 기 등록되어 있는 현재 시각 표시기(310,320,330) 형상 정보를 이용하여 각 영상프레임으로부터 현재 시각 이미지를 추출할 수도 있다.
또한, 동기화 처리부(130)는 동기화 영상 신호를 생성함에 있어서 이러한 현재 시각 이미지를 미리 제거할 수도 있다.
즉, 동기화 처리부(130)는 각 카메라별 영상 프레임에서 현재 시각 표시기(310,320,330)에 대응되는 현재 시각 이미지를 제거한 후 동일한 시간 정보를 매칭시킨 동기화 영상 신호를 각 카메라별로 생성할 수 있다.
즉, 동기화 처리부(130)는 복수의 카메라(210,220,230)로부터 수신되는 각각의 촬영 영상 신호의 영상프레임에 현재 시각 이미지(현재 시각 표시기(310,320,330)에 대응되는 이미지)가 포함되어 있는 경우, 그 각각의 영상프레임에 포함된 현재 시각 이미지를 제거한 후 그 현재 시각 이미지가 제거된 촬영 영상 신호와 상술한 동기화용 시간 정보를 모두 포함하는 동기화 영상 신호를 카메라(210,220,230)별로 생성할 수 있는 것이다.
이에 따라 현재 시각 이미지는 동기화용 시간 정보를 결정하는 데만 이용되고, 시청자 단말기(400)에서 해당 영상을 시청할 때는 출력되지 않게 된다.
동기화 처리부(130)는 현재 시각 이미지를 제거함에 있어서 보다 광범위한 영역을 함께 제거할 수도 있다.
예를 들어 각 현재 시각 이미지가 각 영상프레임의 좌측 하단에 배치되어 있는 경우 영상프레임의 특정 크기의 하단이 모두 제거되도록 할 수도 있는 것이고, 이 경우 이미지 제거 프로세스가 간단하여 현재 시각 이미지 제거를 위한 시스템 처리 로드를 최소화할 수 있다.
이처럼 각 영상 프레임에서 현재 시각 이미지를 제거하기 위해서는 영상 디코딩/트랜스코딩은 물론이고 영상 크롭(자르기) 기능 등이 필요할 수 있는데, 이러한 기능들 그 자체는 공지된 기술에 불과하므로 보다 상세한 설명을 생략한다.
한편, 통합 영상 생성부(140)는 동기화 처리부(130)에 의해 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 기능을 수행한다.
여기서 통합 영상 신호는 아날로그 신호일 수도 있지만, 본 실시예에서는 디지털 처리가 이루어지는 영상 데이터인 것을 일 예로 한다.
예를 들어 동기화 처리부(130)가 각 동기화용 시간 정보와 각각의 촬영 영상 신호('영상 프레임'에 해당할 수 있음)를 매칭시킨 각각의 동기화 영상 신호를 생성한 경우, 통합 영상 생성부(140)는 그 각각의 동기화 영상 신호를 다중화시켜 하나의 통합 영상 신호로 생성하는 것이다.
이때 특정 통합 영상 신호 패킷에는 반드시 동일한 동기화용 시간 정보에 대응되는 동기화 영상 신호 패킷들만 포함될 수 있는 것은 아니고, 각기 다른 동기화용 시간 정보에 대응되는 동기화 영상 신호 패킷들이 포함될 수도 있다.
이 경우 시청자 단말기(400)는 그 수신된 통합 영상 신호 패킷들을 각 카메라별 동기화 영상 신호 패킷들로 구분한 후, 동일한 동기화용 시간 정보를 포함하는 패킷들을 동시에 재생하면 되고, 그 결과 시청자 단말기(400) 사용자는 하나의 방송 채널을 통해 수신한 복수 개의 촬영 영상 중 시간 동기화된 영상들을 동시에 시청할 수 있게 되는 것이다.
즉, 서버단에서 동일한 동기화용 시간 정보를 포함하는 패킷들로 그루핑하는 경우에는 그 처리 과정에 따른 딜레이가 발생할 수 있지만, 본 실시예와 같이 서버단(즉, 촬영 영상 전송 시스템(100))에서는 각 패킷별로 동기화용 시간 정보를 포함시키기만 하고, 실제 동 시점에 촬영된 영상들을 동시에 표시하는 것은 시청자 단말기(400)에서 이루어지도록 함으로써 불필요한 지연을 방지할 수 있게 된다.
여기서 통합 영상 생성부(140)에서 생성되는 하나의 통합 영상 신호는 하나의 시청 채널에서 시청할 수 있는 영상 신호에 해당할 수 있다.
즉, 앞서 언급한 바와 같이 동기화 영상 신호가 일종의 TS 포맷의 파일이라 한다면, 통합 영상 신호는 이러한 각각의 TS 파일들의 조합으로 이루어진 통합 파일이라 할 수 있는데, 이러한 통합 TS 파일은 하나의 방송 채널을 통해 스트리밍 방식으로 전송될 수 있는 것이다.
여기서 '파일'이라는 것이 반드시 영상의 시작부터 마지막까지 모두 포함하는 것을 의미하는 것은 아니고, 각 카메라(210,220,230)로부터 수신되는 촬영 영상 신호에 의해 실시간 생성되는 구간별 파일일 수 있다.
전송부(150)는 통합 영상 생성부(140)에 의해 생성된 통합 영상 신호를 수신 단말기로 전송하는 기능을 수행한다.
예를 들어 전송부(150)는 시청자 단말기(400)와 상호 통신이 가능한 통신 채널을 연결한 후 통합 영상 신호를 전송할 수도 있고, 또는 시청자 단말기(400)와 상호 통신 채널을 연결하지 않고 종래의 일 방향 방송국과 같이 무선 전파로 송출하는 방식으로 통합 영상 신호를 전송할 수도 있다.
이처럼 통합 영상 생성부(140)에 의해 생성된 후 전송부(150)에 의해 시청자 단말기(400)에 전송되는 통합 TS 파일 헤더와 페이로드를 포함하는 패킷 단위로 연이어서 전송되는데, 이때 세션 연결을 위한 최초의 헤더 내에 특정 정보를 포함시켜 시청자 단말기(400)로 하여금 복수의 TS 파일을 전송하는 스트림임을 알려 줄 수 있다.
예를 들어 세션 연결을 위한 헤더에 PID(패킷 아이디)가 0인 경우 시청자 단말기(400)는 그 다음의 페이로드에 몇 개의 TS 파일(즉, 몇 개의 프로그램)을 전송하는지를 지정한 값이 포함되어 있음을 알 수 있다.
예를 들어 세션 연결을 위한 최초의 통합 TS 파일 스트림의 헤더 및 페이로드를 통해 3 개의 프로그램이 해당 통합 TS 파일에 포함되어 있다고 지정되는 경우, 촬영 영상 전송 시스템(100)은 그 이후의 패킷(헤더+페이로드)에 3 개의 각각의 TS 파일(프로그램)을 순차적으로 이어서 보내게 되고, 이러한 과정은 반복될 수 있다.
즉, 촬영 영상 전송 시스템(100)은 1번 카메라(210)에 대응되는 1번 TS 패킷, 2번 카메라(220)에 대응되는 2번 TS 패킷, 3번 카메라(330)에 대응되는 3번 TS 패킷 이후에 다시 1번 TS 패킷, 2번 TS 패킷, 3번 TS 패킷과 같은 방식으로 전송할 수 있다.
첨언하면 상술한 통합 영상 생성부(140)가 통합 TS 파일을 생성한다는 것은 이처럼 몇 개의 TS 파일을 포함시켰는지에 대한 정보를 세선용 패킷(헤더 및 페이로드)에 포함시키는 과정과, 그 이후 각각의 개별 TS 파일을 순차적으로 이어서 붙이는 과정을 포함할 수 있다.
이하에서는 도 3을 참조하여 본 발명의 제1 실시예에 따른 촬영 영상 전송 시스템(100)을 포함하는 전체적인 제어 흐름을 설명한다.
우선, 각 카메라(210,220,230)는 영상을 촬영하고(단계 S1), 그에 대응되는 촬영 영상 신호를 촬영 영상 전송 시스템(100)에 전송한다(단계 S3).
이에 촬영 영상 전송 시스템(100)은 각 카메라(210,220,230)로부터 수신되는 촬영 영상 신호를 기초로 각 영상이 재생되도록 한다(단계 S5).
이렇게 각 카메라(210,220,230)에 대응되는 각 영상이 소정의 디스플레이 장치(미 도시함)에 동시에 재생 표시된 상태가 도 4에 도시되었다.
동 도면을 살펴보면 제1 카메라(210)에 대응되는 재생 영상(501) 및 제어 버튼(511), 제2 카메라(220)에 대응되는 재생 영상(502) 및 제어 버튼(512), 제3 카메라(230)에 대응되는 재생 영상(503) 및 제어 버튼(513)이 도시되어 있다.
이후, 관리자는 각 제어 버튼(511,512,513)을 이용하여 각 카메라(210,220,230)의 영상을 재생, 일시 중지, 기 설정된 프레임 또는 시간 간격만큼 전/후 이동이 이루어지도록 할 수 있는데, 이러한 관리자의 조작 완료 선택이 감지된 경우(단계 S7) 촬영 영상 전송 시스템(100)은 그 선택된 영상프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시킨다(단계 S9).
예를 들어 촬영 영상 전송 시스템(100)은 관리자에 의해 일시 정지 선택된 각 카메라별 특정 영상프레임에 동일한 동기화용 시간 정보를 매칭시켜서 각 카메라의 프레임별 동기화 영상 신호를 생성하는 것이다.
즉, 동기화 처리는 관리자에 의해 일시 정지 선택된 영상프레임 각 카메라의 영상 프레임에 각각 동일한 동기화용 시간 정보를 매칭시키는 것을 의미할 수 있다.
이러한 단계 S9의 동기화 처리 과정(즉, 특정 영상 프레임에 동기화용 시간 정보를 매칭시키는 과정)은 기 설정된 시간 마다, 예를 들어 주기적인 시간 간격마다 반복 처리될 수도 있다.
즉, 촬영 영상 전송 시스템(100)은 각 카메라로부터 촬영 영상 신호가 수신되는 최초에만 시간 동기화 처리 과정을 수행하는 것이 아니라, 주기적으로 반복하여 시간 동기화 처리 과정을 수행할 수 있는 것이다.
이어서 촬영 영상 전송 시스템(100)은 각 카메라(210,220,230)로부터 수신된 촬영 영상 신호를 이용하여 전송을 위한 별도 포맷의 파일(일 예로 TS 파일)을 생성하는데, 상술한 바와 같이 동기화용 시간 정보를 매칭시킨 경우에는 각 TS 파일에 그 매칭된 동기화용 시간 정보가 포함될 수 있다(단계 S11).
이후, 촬영 영상 전송 시스템(100)은 각각의 TS 파일을 다중화 처리한 통합 TS 파일을 생성한다(단계 S13).
여기서 TS 파일은 물론이고 통합 TS 파일은 실시간으로 생성되는 콘텐츠 스트림에 해당할 수 있다.
이어서 촬영 영상 전송 시스템(100)은 생성한 통합 TS 파일을 한 개의 방송 채널을 통해 시청자 단말기(400)에 전송할 수 있다(단계 S15).
예를 들어 시청자 단말기(400)가 방송 채널 번호 5번을 선택하여 야구 중계 경기를 시청하고자 하는 경우, 촬영 영상 전송 시스템(100)은 그 5번 방송 채널을 통해 상술한 복수의 카메라(210,220,230)에 의해 촬영된 촬영 영상은 물론이고 동기화를 위한 시간 정보를 각각 포함하는 복수 개의 TS 파일을 통합된 형태(통합 TS 파일)로 전송할 수 있는 것이다.
즉, 촬영 영상 전송 시스템(100)은 동일한 아이피:포트를 통해 시청자 단말기(400)에 상술한 통합 TS 파일을 전송하는 것이다.
이에 따라 시청자 단말기(400)에서는 촬영 영상 전송 시스템(100)이 전송한 통합 TS 파일에 포함된 개별 TS 파일을 각각 추출하여 디스플레이 할 수 있게 된다.
예를 들어 시청자 단말기(400)는 하나의 화면에 투수가 투구하는 영상을 주된 영상으로 표시함과 아울러 1루 주자의 영상 또는 외야수의 영상, 감독을 촬영한 영상 등을 동시에 표시할 수 있다.
특히, 각 개별 TS 파일에는 동기화용 시간 정보가 포함되어 있으므로 시청자 단말기(400)는 동시에 표시하는 영상들에 대해 같은 시간으로 동기화시킬 수 있다.
예를 들어 시청자 단말기(400)는 촬영 영상 전송 시스템(100)으로부터 1번 카메라(210)에 대응되는 TS 파일과 2번 카메라(220)에 대응되는 TS 파일 및, 3번 카메라(230)에 대응되는 TS 파일을 포함하는 통합 TS 파일을 스트리밍 방식으로 수신하여 그 각각의 카메라(210,220,230)에서 촬영된 영상을 동시에 화면상에 표시하는 경우, 그 수신되는 통합 TS 파일로부터 추출되는 TS 파일 내에 포함된 동기화용 시간 정보를 이용하여 같은 시간에 촬영된 영상들이 동시에 표시되도록 할 수 있다.
즉, 각 카메라(210,220,230)마다 촬영 영상을 전송하는 시간이 다를 수도 있고, 또는 네트워크 상황상 각 카메라(210,220,230)가 전송한 촬영 영상 신호 중 일부가 지연 처리될 수도 있는데, 상술한 바와 같이 촬영 영상 전송 시스템(100)이 각 촬영 영상 신호를 기초로 관리자의 선택에 따른 동기화용 시간 정보를 각 TS 파일에 포함시킴으로써, 시청자 단말기(400)는 각 통합 TS 파일에 포함된 각 TS 파일의 동기화용 시간 정보를 이용하여 동일한 시점에 촬영된 영상들을 동시에 표시할 수 있는 것이다.
이하에서는 도 5를 참조하여 본 발명의 제2 실시예에 따른 촬영 영상 전송 시스템(100)을 포함하는 전체적인 제어 흐름을 설명한다.
도 5는 도 4와 비교할 때 각 카메라가 촬영한 영상 프레임에 대한 동시점을 판단하는 것이 관리자가 아닌 촬영 영상 전송 시스템(100) 자체에서 영상 분석을 통해 자동 처리된다는 점에 차이가 있다.
촬영 영상 전송 시스템(100)은 각 카메라(210,220,230)로부터 수신되는(단계 S23) 촬영 영상 신호를 기초로 각 카메라별 영상을 재생하고(단계 S25), 그 재생되는 각 영상프레임으로부터 현재 시각 이미지를 추출한다(단계 S27).
이어서 촬영 영상 전송 시스템(100)은 추출된 현재 시각 이미지를 분석하여 각 카메라의 영상프레임에 대응되는 현재 시각을 판단한 후(단계 S29), 동일한 현재 시각(예를 들어 동일한 특정 현재 시각)에 대응되는 각 카메라의 영상프레임을 기준 영상 프레임으로 선정한다(단계 S31).
여기서 기준 영상 프레임으로 선정한다는 것은 동일한 현재 시각으로 매칭시킬 대상으로 선정한다는 것을 의미할 수 있다.
이후, 촬영 영상 전송 시스템(100)은 선정된 각 카메라별 기준 영상 프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시킨다(단계 S33).
예를 들어 촬영 영상 전송 시스템(100)은 각 카메라별 기준 영상 프레임에 동일한 동기화용 시간 정보를 매칭시켜서 각 카메라의 프레임별 동기화 영상 신호를 생성하는 것이다.
이어서 촬영 영상 전송 시스템(100)은 각 카메라(210,220,230)로부터 수신된 촬영 영상 신호를 이용하여 전송을 위한 별도 포맷의 파일(일 예로 TS 파일)을 생성하는데(단계 S35), 상술한 바와 같이 동기화용 시간 정보를 매칭시킨 경우에는 각 TS 파일에 그 매칭된 동기화용 시간 정보를 포함시킬 수 있다.
이후, 촬영 영상 전송 시스템(100)은 각각의 TS 파일을 다중화 처리한 통합 TS 파일을 생성한다(단계 S37).
여기서 TS 파일은 물론이고 통합 TS 파일은 실시간으로 생성되는 콘텐츠 스트림에 해당할 수 있다.
이어서 촬영 영상 전송 시스템(100)은 생성한 통합 TS 파일을 한 개의 방송 채널을 통해 시청자 단말기(400)에 전송할 수 있다(단계 S39).
한편, 상술한 각 실시예를 수행하는 과정은 소정의 기록 매체(예를 들어 컴퓨터로 판독 가능한)에 저장된 프로그램 또는 애플리케이션에 의해 이루어질 수 있음은 물론이다. 여기서 기록 매체는 RAM(Random Access Memory)과 같은 전자적 기록 매체, 하드 디스크와 같은 자기적 기록 매체, CD(Compact Disk)와 같은 광학적 기록 매체 등을 모두 포함한다.
이때, 기록 매체에 저장된 프로그램은 컴퓨터나 스마트폰 등과 같은 하드웨어 상에서 실행되어 상술한 각 실시예를 수행할 수 있다. 특히, 상술한 본 발명에 따른 의 기능 블록 중 적어도 어느 하나는 이러한 프로그램 또는 애플리케이션에 의해 구현될 수 있다.
또한, 본 발명은 상기한 특정 실시예에 한정되는 것이 아니라 본 발명의 요지를 벗어나지 않는 범위 내에서 여러 가지로 변형 및 수정하여 실시할 수 있는 것이다.
특히, 상술한 실시예에서는 영상 신호를 동기화하여 다중화 처리하여 전송하는 것을 일 예로 하였으나, 음성 콘텐츠에도 이러한 기술이 적용될 수 있다.
또한, 동기화 처리까지는 영상을 기초로 이루어지고 전송하는 패킷만 음성 패킷으로 이루어질 수도 있다. 예를 들어 상술한 촬영 영상 전송 시스템 대신에 음성 전송 시스템으로 구현될 수 있고, 이 경우, 음성 전송 시스템은 복수의 카메라로부터 각각의 음성 신호를 포함하는 촬영 영상 신호를 수신하고, 그 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별로 영상프레임 스틸컷 이미지를 생성하며, 생성된 각각의 영상프레임 스틸컷 이미지를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키고, 동기화된 각각의 촬영 영상 신호에 대응되는 음성 신호를 다중화시켜 하나의 통합 음성 신호를 생성한 후, 수신 단말기로 전송할 수 있는 것이다.
이러한 변형 및 수정이 첨부되는 특허청구범위에 속한다면 본 발명에 포함된다는 것은 자명할 것이다.
100 : 촬영 영상 전송 시스템 210,220,230 : 카메라
310,320,330 : 현재 시각 표시기 400 : 시청자 단말기
110 : 영상 수신부 120 : 재생 처리부
130 : 동기화 처리부 140 : 통합 영상 생성부
150 : 전송부
310,320,330 : 현재 시각 표시기 400 : 시청자 단말기
110 : 영상 수신부 120 : 재생 처리부
130 : 동기화 처리부 140 : 통합 영상 생성부
150 : 전송부
Claims (16)
- (a) 복수의 카메라로부터 각각의 촬영 영상 신호를 수신하는 단계와;
(b) 상기 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별 영상이 재생되도록 하는 단계와;
(c) 상기 (b) 단계에서 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 단계와;
(d) 상기 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 단계와;
(e) 상기 (d) 단계에서 생성된 통합 영상 신호를 수신 단말기로 전송하는 단계를 포함하고,
상기 (c) 단계는,
(c1) 상기 (b) 단계에서 재생 중인 각 카메라별 영상에 대해 관리자의 선택에 따라 기 설정된 프레임 간격만큼 전/후 이동을 수행한 후 특정 영상 프레임에서 일시 정지를 수행하는 단계와;
(c2) 상기 일시 정지된 각 카메라별 영상 프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 단계를 포함하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템의 제어방법. - 삭제
- (a) 복수의 카메라로부터 각각의 촬영 영상 신호를 수신하는 단계와;
(b) 상기 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별 영상이 재생되도록 하는 단계와;
(c) 상기 (b) 단계에서 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 단계와;
(d) 상기 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 단계와;
(e) 상기 (d) 단계에서 생성된 통합 영상 신호를 수신 단말기로 전송하는 단계를 포함하고
상기 (c) 단계는,
(c1) 상기 (b) 단계에서 재생 중인 각 카메라별 영상의 영상 프레임에서 현재 시각 이미지를 추출하는 단계와;
(c2) 상기 (c1) 단계에서 추출된 현재 시각 이미지를 분석하여 동일한 현재 시각에 대응되는 각 카메라별 영상 프레임에 동일한 시간 정보를 매칭시킨 동기화 영상 신호를 각 카메라별로 생성하되, 각 카메라별 영상 프레임에서 상기 현재 시각 이미지를 제거한 후 상기 각 카메라별 동기화 영상 신호를 생성하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템의 제어방법. - 삭제
- 삭제
- 제3항에 있어서,
상기 (c1) 단계에서는, 상기 (b) 단계에서 재생 중인 각 카메라별 영상의 각 영상 프레임에서 기 설정된 영역을 기초로 현재 시각 이미지를 추출하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템의 제어방법. - 제1항 또는 제3항에 있어서,
상기 (d) 단계에서 생성되는 하나의 통합 영상 신호는 하나의 시청 채널에서 시청할 수 있는 영상 신호인 것을 특징으로 하는 복수의 촬영 영상 전송 시스템의 제어방법. - 제1항 또는 제3항의 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터 판독 가능 기록 매체.
- 하드웨어와 결합되어 제1항 또는 제3항의 방법을 실행시키기 위하여 컴퓨터 판독 가능 기록 매체에 저장된 응용 프로그램.
- 복수의 카메라로부터 각각의 촬영 영상 신호를 수신하는 영상 수신부와;
상기 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별 영상이 재생되도록 하는 재생 처리부와;
상기 재생 처리부에 의해 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 동기화 처리부와;
상기 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 통합 영상 생성부와;
상기 통합 영상 생성부에서 생성된 통합 영상 신호를 수신 단말기로 전송하는 전송부를 포함하고,
상기 동기화 처리부는 상기 재생 처리부에 의해 재생 중인 각 카메라별 영상에 대해 관리자의 선택에 따라 기 설정된 프레임 간격만큼 전/후 이동을 수행한 후 특정 영상 프레임에서 일시 정지를 수행하고, 그 일시 정지된 각 카메라별 영상 프레임을 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템. - 삭제
- 복수의 카메라로부터 각각의 촬영 영상 신호를 수신하는 영상 수신부와;
상기 복수의 카메라로부터 수신된 각각의 촬영 영상 신호를 이용하여 각 카메라별 영상이 재생되도록 하는 재생 처리부와;
상기 재생 처리부에 의해 재생되는 각 카메라별 영상에 대한 기 설정된 알고리즘에 따른 분석과 관리자 선택 중 적어도 어느 하나를 기초로 각 카메라의 촬영 영상 신호를 서로 동기화시키는 동기화 처리부와;
상기 동기화된 각각의 촬영 영상 신호를 다중화시켜 하나의 통합 영상 신호를 생성하는 통합 영상 생성부와;
상기 통합 영상 생성부에서 생성된 통합 영상 신호를 수신 단말기로 전송하는 전송부를 포함하고,
상기 동기화 처리부는 상기 재생 처리부에 의해 재생 중인 각 카메라별 영상의 영상 프레임에서 현재 시각 이미지를 추출하고, 그 추출된 현재 시각 이미지를 분석하여 동일한 현재 시각에 대응되는 각 카메라별 영상 프레임에 동일한 시간 정보를 매칭시킨 동기화 영상 신호를 각 카메라별로 생성하되, 각 카메라별 영상 프레임에서 상기 현재 시각 이미지를 제거한 후 상기 각 카메라별 동기화 영상 신호를 생성하는 것을 특징으로 하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템. - 삭제
- 삭제
- 제12항에 있어서,
상기 동기화 처리부는 상기 재생 처리부에 의해 재생 중인 각 카메라별 영상의 각 영상 프레임에서 기 설정된 영역을 기준으로 현재 시각 이미지를 추출하는 것을 특징으로 하는 복수의 촬영 영상 전송 시스템. - 제10항 또는 제12항에 있어서,
상기 통합 영상 생성부에서 생성되는 하나의 통합 영상 신호는 하나의 시청 채널에서 시청할 수 있는 영상 신호인 것을 특징으로 하는 복수의 촬영 영상 전송 시스템.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180001907A KR102025157B1 (ko) | 2018-01-05 | 2018-01-05 | 복수의 촬영 영상 전송을 위한 시스템 및 그 제어방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180001907A KR102025157B1 (ko) | 2018-01-05 | 2018-01-05 | 복수의 촬영 영상 전송을 위한 시스템 및 그 제어방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20190083906A KR20190083906A (ko) | 2019-07-15 |
KR102025157B1 true KR102025157B1 (ko) | 2019-09-25 |
Family
ID=67257639
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020180001907A KR102025157B1 (ko) | 2018-01-05 | 2018-01-05 | 복수의 촬영 영상 전송을 위한 시스템 및 그 제어방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102025157B1 (ko) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102273439B1 (ko) * | 2019-12-31 | 2021-07-06 | 씨제이포디플렉스 주식회사 | 다면 영상 재생 시스템 및 실시간 중계 서비스 제공 방법 |
KR102590136B1 (ko) * | 2021-03-19 | 2023-10-16 | 주식회사 엘지유플러스 | 라이브 영상의 모니터링을 위한 클라우드 서버 및 그 동작방법 |
CN114142985B (zh) * | 2021-11-17 | 2023-09-19 | 中国船舶重工集团公司第七一九研究所 | 一种实现物理隔离信息***时间同步的光学***及方法 |
KR102614561B1 (ko) * | 2021-12-22 | 2023-12-19 | 주식회사 티빙 | 멀티뷰 서비스 제공 방법 및 이를 위한 장치 |
KR102630621B1 (ko) * | 2023-07-21 | 2024-01-29 | 이단우 | 멀티 스트리밍을 위한 타임 코드 동기화 시스템 및그 방법 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001069492A (ja) * | 1999-08-30 | 2001-03-16 | Matsushita Electric Ind Co Ltd | 映像伝送装置 |
JP2004173083A (ja) * | 2002-11-21 | 2004-06-17 | Atsushi Matsushita | 同時複数映像の蓄積・再生方法及び蓄積・再生装置 |
US20130209059A1 (en) * | 2012-02-03 | 2013-08-15 | Todd Curry Zaegel Scheele | Video frame marking |
JP2014064135A (ja) * | 2012-09-20 | 2014-04-10 | Casio Comput Co Ltd | 撮像制御装置、撮像制御方法、再生制御装置、再生制御方法及びプログラム |
KR101703808B1 (ko) * | 2015-11-13 | 2017-02-08 | 경북대학교 산학협력단 | 다중화 기법을 이용한 cctv 영상처리시스템 및 그 방법 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100974638B1 (ko) | 2009-06-23 | 2010-08-10 | 송지을 | 야구 경기 중계방송 시스템 및 방법 |
-
2018
- 2018-01-05 KR KR1020180001907A patent/KR102025157B1/ko active IP Right Grant
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001069492A (ja) * | 1999-08-30 | 2001-03-16 | Matsushita Electric Ind Co Ltd | 映像伝送装置 |
JP2004173083A (ja) * | 2002-11-21 | 2004-06-17 | Atsushi Matsushita | 同時複数映像の蓄積・再生方法及び蓄積・再生装置 |
US20130209059A1 (en) * | 2012-02-03 | 2013-08-15 | Todd Curry Zaegel Scheele | Video frame marking |
JP2014064135A (ja) * | 2012-09-20 | 2014-04-10 | Casio Comput Co Ltd | 撮像制御装置、撮像制御方法、再生制御装置、再生制御方法及びプログラム |
KR101703808B1 (ko) * | 2015-11-13 | 2017-02-08 | 경북대학교 산학협력단 | 다중화 기법을 이용한 cctv 영상처리시스템 및 그 방법 |
Also Published As
Publication number | Publication date |
---|---|
KR20190083906A (ko) | 2019-07-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102025157B1 (ko) | 복수의 촬영 영상 전송을 위한 시스템 및 그 제어방법 | |
US20200053414A1 (en) | Broadcast management system | |
CN106713945B (zh) | 客户端连麦直播处理方法和装置、直播服务器及直播*** | |
CN105245977B (zh) | 一种多组摄像头同步直播的方法 | |
US10531158B2 (en) | Multi-source video navigation | |
CN111355966A (zh) | 环绕自由视角直播方法及*** | |
KR101472013B1 (ko) | 부가 데이터를 포함하는 음원 스트리밍을 제공하는 서버 및 방법, 그리고 디바이스 | |
KR101841313B1 (ko) | 멀티미디어 흐름 처리 방법 및 대응하는 장치 | |
US20200213631A1 (en) | Transmission system for multi-channel image, control method therefor, and multi-channel image playback method and apparatus | |
CN105142003B (zh) | 电视节目播放方法及装置 | |
KR20090115344A (ko) | 사용자 선택 방송국 카메라 촬상 영상 제공 시스템 및 그방법 | |
KR102026454B1 (ko) | 복수의 촬영 영상 전송을 위한 시스템 및 그 제어방법 | |
KR102024437B1 (ko) | 복수의 촬영 영상 전송을 위한 시스템 및 그 제어방법 | |
KR20120035286A (ko) | 방송 영상의 선택 시청 기능을 제공하는 iptv 방송 시스템 및 방법 | |
JP2003283450A (ja) | コンテンツ送受信システム、受信装置、コンテンツ送信システム、プログラム及びプログラムの記録媒体 | |
KR101307531B1 (ko) | 방송 채널의 이미지를 포함한 실시간 방송 편성표 제공 장치 및 방법 | |
CN108737844A (zh) | 信息传输方法及装置、存储介质、电子装置 | |
KR20150030889A (ko) | 멀티앵글영상서비스 제공 방법 및 시스템 | |
KR102012580B1 (ko) | 멀티미디어 콘텐츠 처리를 위한 장치 및 그 제어방법 | |
KR20120027587A (ko) | 다화면 정지영상 방송 장치 및 방법 | |
KR20200053178A (ko) | 미디어 서비스 채널 전환 방법 및 장치 | |
CN109275010A (zh) | 一种4k全景超融合视频终端适配方法及装置 | |
US10264241B2 (en) | Complimentary video content | |
KR200219043Y1 (ko) | 축구 경기 시청용 텔레비젼 수상기 | |
KR20150027532A (ko) | 여러대의 액션캠 영상 동기화 제공방법 및 제공단말기 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |