KR101812612B1 - 3ｄ 비디오 신호를 생성하는 방법 - Google Patents

3ｄ 비디오 신호를 생성하는 방법 Download PDF

Info

Publication number
KR101812612B1
KR101812612B1 KR1020127018102A KR20127018102A KR101812612B1 KR 101812612 B1 KR101812612 B1 KR 101812612B1 KR 1020127018102 A KR1020127018102 A KR 1020127018102A KR 20127018102 A KR20127018102 A KR 20127018102A KR 101812612 B1 KR101812612 B1 KR 101812612B1
Authority
KR
South Korea
Prior art keywords
video signal
signal
stream
auxiliary
video
Prior art date
Application number
KR1020127018102A
Other languages
English (en)
Other versions
KR20120114300A (ko
Inventor
필립 스티븐 뉴톤
하안 위브 드
데니스 다니엘 로버트 죠제프 볼리오
Original Assignee
코닌클리케 필립스 엔.브이.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 코닌클리케 필립스 엔.브이. filed Critical 코닌클리케 필립스 엔.브이.
Publication of KR20120114300A publication Critical patent/KR20120114300A/ko
Application granted granted Critical
Publication of KR101812612B1 publication Critical patent/KR101812612B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/156—Mixing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Human Computer Interaction (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

본 발명은 3D 디스플레이 상에서 3D 1차 비디오 신호 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위해 3-차원(3D) 비디오 신호를 생성하기 위한 방법에 관한 것으로, 상기 3D 1차 비디오 신호는 베이스 비디오 신호 및 3D 디스플레이를 가능하게 하는 보조 신호를 포함하며, 상기 방법은 상기 2차 비디오 신호로서 2-차원(2D) 2차 비디오 신호를 제공하는 단계; 및 상기 3D 비디오 신호를 생성하기 위해 상기 베이스 비디오 신호, 상기 보조 신호 및 상기 2D 2차 비디오 신호를 포맷팅하는 단계를 포함한다.

Description

3Ｄ 비디오 신호를 생성하는 방법{GENERATING A 3D VIDEO SIGNAL}
본 발명은 3-차원(3D) 디스플레이 상에서 1차 비디오 신호 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위한 3D 비디오 신호를 생성하는 것에 관한 것이다. 본 발명은 또한 상기 3D 비디오 신호를 처리하는 것에 관한 것이다.
영화들이 점차 3D로 기록되고 3D 디스플레이들이 시장에 출현한 이래로 소비자들에 의한 3D 비디오의 재생을 가능하게 하는 3D 비디오 신호 포맷을 표준화하는 것이 바람직해지고 있다. 그러므로, 표준화를 위한 다양한 노력들이 일어나고 있다. 예를 들면, 블루-레이 디스크 협회가 3D를 상기 블루-레이 디스크 포맷으로 통합하기 위한 계획들을 발표하고 있으며, MPEG은 3D 비디오 신호들의 인코딩, 디코딩, 전송, 및 저장을 위한 표준들을 개발하고 있다.
더욱이, 현재 수년 동안, PiP(picture-in-picture) 기능이 두 개 이상의 비디오 신호들의 동시 디스플레이 또는 재생을 가능하게 하기 위한 디스플레이 및 재생 디바이스들에 포함되어 왔다. 예를 들면, 텔레비전은 두 개의 비디오 신호들을 동시에 수신하고, 상기 PiP 기능을 사용하여, 상기 비디오 신호들 중 하나를 디스플레이하는 인세트 윈도우(inset window)를 제공할 수 있으며, 그에 의해 상기 윈도우는 다른 비디오 신호를 디스플레이하는 그외 풀-스크린 윈도우의 일부를 커버한다. 유사하게, 셋-탑 박스는 두 개의 비디오 신호들을 동시에 수신할 수 있으며, 텔레비전상에 디스플레이를 위한 상기 인세트 윈도우를 포함한 출력 비디오 신호를 생성할 수 있다.
상기 PiP 기능은 텔레비전 시청자들로 하여금 둘 이상의 비디오 신호들을 동시에 볼 수 있도록 허용한다. 예를 들면, 시청자는 또 다른 채널을 일시적으로 보면서 하나의 채널 상에서 중간 광고의 끝을 모니터링하고 싶어할 수 있다. 비디오 신호들 둘 모두의 콘텐트들은 또한 서로 관련될 수 있다. 예를 들면, 상기 풀-스크린 윈도우는 축구 경기의 제 1 카메라 관점을 디스플레이할 수 있고, 상기 인세트 윈도우는 동일한 축구 경기의 제 2 카메라 관점을 디스플레이할 수 있다. 사실상, 본 발명은 구체적으로 서로 관련되는 비디오 신호들을 동시에 보여주는 것에 관련한다.
PiP에 의해 제공된 상기 인세트 윈도우 다음으로, 다양한 다른 공간적 구성들이 둘 이상의 비디오 신호들의 동시 디스플레이를 가능하게 하기 위해 알려져 있다. 예를 들면, 그 외 PAP 또는 P&P(Picture-and-Picture)로 알려져 있는, 두 개의 비디오 신호들이 나란히 디스플레이될 수 있거나, 4개의 비디오 신호들이 4등분 화상 모드로 디스플레이될 수 있다. 본 발명의 설명을 용이하게 하기 위해, 그래도, 둘 이상의 관련된 비디오 신호들을 동시에 디스플레이하기 위한 임의의 공간적 구성이 이후로 PiP로서 불리어질 것이다.
상기 PiP 기능은 또한 예로서, 블루-레이 디스크 상에 포함된 비디오 스트림과 같이, 적절한 비디오 스트림에 의해 제공될 수 있다. 영화의 제작자는 예로서, 감독 또는 배우의 비디오 해설을 포함한 인세트 윈도우를 제공하기 위해 상기 PiP 기능을 사용할 수 있다. 시청자는 이러한 비디오 해설이 상기 풀-스크린 윈도우에 디스플레이되는 영화의 배경 정보에 대해 학습하게 할 수 있다. 이와 같이, 상기 영화 및 해설, 즉 1차 및 2차 비디오 신호는 상기 디스크 상에 저장된 상기 비디오 스트림에 포함된다.
특히, 소비자들이 PiP 기능을 가진 2-차원(2D) 비디오 신호들에 익숙해지고 있기 때문에, PiP 기능을 가진 3D 비디오 신호를 제공하는 것이 바람직하다.
상기 3D 비디오 신호에서 PiP 기능을 제공하기 위한 알려진 방법은 3D 1차 비디오 신호 다음으로, 3D 2차 비디오 신호를 부가적으로 제공하는 것이다. 보다 상세하게는, WO 2008/038205는 3D 디스플레이 상에 동시 프리젠테이션을 위한 3D 이미지 정보 및 2차 3D 이미지 정보를 수신하는 시스템을 개시하며, 상기 이미지 정보는 예로서, 광 레코드 캐리어 또는 인터넷으로부터 수신된다. 그러므로 수신되는 상기 3D 비디오 신호는 상기 3D 1차 비디오 신호 다음으로 상기 3D 2차 비디오 신호를 제공함으로써 PiP 기능을 제공한다.
상기 3D 비디오 신호의 문제는 그것의 비트 레이트가 비교적 높다는 것이다. 상기 3D 비디오 신호의 비교적 높은 비트 레이트의 결과로서, 상기 3D 비디오 신호를 전송하기 위해 요구된 대역폭이 또한 비교적 높다. 유사하게는, 상기 3D 비디오 신호를 저장하기 위해 요구된 저장 용량이 비교적 높다. 마지막으로, 상기 3D 비디오 신호를 인코딩하고 디코딩하는 것은 통상적으로 비교적 많은 컴퓨팅 리소스들을 요구한다.
본 발명의 목적은 보다 낮은 비트 레이트를 가진 3D 비디오 신호를 제공하는 것이며, 상기 3D 비디오 신호는 3D 디스플레이 상에서 1차 비디오 신호 및 2차 비디오 신호의 동시 디스플레이를 가능하게 한다.
본 발명의 제 1 양태에서, 이러한 목적은 방법이 3D 디스플레이 상에서 3D 1차 비디오 신호 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위한 3D 비디오 신호를 생성하기 위해 제공되며, 상기 3D 1차 비디오 신호는 베이스 비디오 신호 및 3D 디스플레이를 가능하게 하는 보조 신호를 포함하고, 상기 3D 비디오 신호는 다중화된 형태의 비디오 스트림이며, 상기 방법은 상기 2차 비디오 신호로서 2D 2차 비디오 신호를 제공하는 단계, 베이스 비디오 스트림을 생성하기 위해 상기 베이스 비디오 신호를 포맷팅하는 단계, 보조 스트림을 생성하기 위해 상기 보조 신호를 포맷팅하는 단계, 상기 비디오 스트림을 생성하기 위해 상기 보조 스트림과 상기 베이스 비디오 스트림을 다중화하는 단계, 및 상기 2D 2차 비디오 신호를 상기 비디오 스트림에 포함시키는 단계를 포함한다는 점에서 실현된다.
본 발명의 추가 양태에 있어서, 방법은 3D 디스플레이 상에서 3D 1차 비디오 신호 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위해, 상기 방법에 의해 생성될 수 있는 3D 비디오 신호를 처리하기 위해 제공되며, 상기 3D 1차 비디오 신호는 베이스 비디오 신호 및 3D 디스플레이를 가능하게 하는 보조 신호를 포함하고, 상기 3D 비디오 신호는 상기 2차 비디오 신호로서 2D 2차 비디오 신호를 포함하고, 상기 3D 비디오 신호는 다중화된 형태의 비디오 스트림이며, 상기 비디오 스트림은 상기 2D 2차 비디오 신호를 포함하고 보조 스트림과 다중화된 베이스 비디오 스트림을 포함하고, 상기 베이스 비디오 스트림은 포맷팅된 형태로, 상기 베이스 비디오 신호를 포함하고, 상기 보조 스트림은, 포맷팅된 형태로 상기 보조 신호를 포함하며, 상기 방법은, 상기 비디오 스트림으로부터 상기 2D 2차 비디오 신호를 추출하는 단계, 상기 비디오 스트림으로부터 상기 베이스 비디오 스트림 및 상기 보조 스트림을 역다중화시키는 단계, 상기 베이스 비디오 스트림으로부터 상기 베이스 비디오 신호를 디-포맷팅하는 단계, 상기 보조 스트림으로부터 상기 보조 신호를 디-포맷팅하는 단계, 및 상기 3D 디스플레이 상에서의 디스플레이 깊이에서 상기 2D 2차 비디오 신호의 디스플레이를 위한 3D 디스플레이 신호를 제공하기 위해 상기 베이스 비디오 신호 및 상기 보조 신호와 상기 2D 2차 비디오 신호를 합치는 단계를 포함한다.
본 발명의 추가 양태에서, 프로세서 시스템이 상기 방법들 중 하나를 수행하게 하기 위한 명령들을 포함하는 컴퓨터 프로그램 제품이 제공된다.
본 발명의 추가 양태에서, 3D 비디오 신호가 3D 디스플레이 상에서 3D 1차 비디오 신호 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위해 제공되며, 상기 3D 1차 비디오 신호는 베이스 비디오 신호 및 3D 디스플레이를 가능하게 하는 보조 신호를 포함하고, 상기 3D 비디오 신호는 상기 2차 비디오 신호로서 2D 2차 비디오 신호를 포함하고, 상기 3D 비디오 신호는 다중화된 형태의 비디오 스트림이며, 상기 비디오 스트림은 상기 2D 2차 비디오 신호를 포함하고 보조 스트림과 다중화된 베이스 비디오 스트림을 포함하고, 상기 베이스 비디오 스트림은 포맷팅된 형태로 상기 베이스 비디오 신호를 포함하며, 상기 보조 스트림은 포맷팅된 형태로 상기 보조 신호를 포함한다.
본 발명의 추가 양태에서, 상기 3D 비디오 신호를 포함하는 정보 캐리어가 제공된다.
본 발명의 추가 양태에서, 신호 생성 디바이스가 3D 디스플레이 상에서 3D 1차 비디오 신호 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위한 3D 비디오 신호를 생성하기 위해 제공되며, 상기 3D 1차 비디오 신호는 베이스 비디오 신호 및 3D 디스플레이를 가능하게 하는 보조 신호를 포함하고, 상기 3D 비디오 신호는 다중화된 형태의 비디오 스트림이며, 상기 디바이스는 상기 2차 비디오 신호로서 2D 2차 비디오 신호를 제공하기 위한 제공 수단, 및 베이스 비디오 스트림을 생성하기 위해 상기 베이스 비디오 신호를 포맷팅하고, 보조 스트림을 생성하기 위해 상기 보조 신호를 포맷팅하고, 상기 비디오 스트림을 생성하기 위해 상기 보조 스트림과 상기 베이스 비디오 스트림을 다중화하며, 상기 2D 2차 비디오 신호를 상기 비디오 스트림에 포함시키기 위한 포맷팅 유닛을 포함한다.
본 발명의 추가 양태에서, 신호 처리 디바이스가 3D 디스플레이 상에서 3D 1차 비디오 신호 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위해, 상기 신호 생성 디바이스에 의해 생성될 수 있는, 3D 비디오 신호를 처리하기 위해 제공되며, 상기 3D 1차 비디오 신호는 베이스 비디오 신호 및 3D 디스플레이를 가능하게 하는 보조 신호를 포함하고, 상기 3D 비디오 신호는 상기 2차 비디오 신호로서 2D 2차 비디오 신호를 포함하고, 상기 3D 비디오 신호는 다중화된 형태의 비디오 스트림이며, 상기 비디오 스트림은 상기 2D 2차 비디오 신호를 포함하고 보조 스트림과 다중화된 베이스 비디오 스트림을 포함하고, 상기 베이스 비디오 스트림은 포맷팅된 형태로 상기 베이스 비디오 신호를 포함하고, 상기 보조 스트림은 포맷팅된 형태로 상기 보조 신호를 포함하며, 상기 디바이스는 상기 비디오 스트림으로부터 상기 베이스 비디오 스트림 및 상기 보조 스트림을 역다중화하기 위한 역다중화 유닛, 상기 베이스 비디오 스트림으로부터 상기 베이스 비디오 신호를 디-포맷팅하고, 상기 보조 스트림으로부터 상기 보조 신호를 디-포맷팅하며, 상기 비디오 스트림으로부터 상기 2D 2차 비디오 신호를 추출하기 위한 디-포맷팅 유닛; 및 상기 3D 디스플레이 상에서의 디스플레이 깊이에서 상기 2D 2차 비디오 신호의 디스플레이를 위한 3D 디스플레이 신호를 제공하기 위해 상기 베이스 비디오 신호 및 상기 보조 신호와 상기 2D 2차 비디오 신호를 병합하기 위한 병합 유닛을 포함한다.
본 발명에 따른 방법들은 1차 비디오 신호 다음으로, 상기 3D 비디오 신호의 상기 PiP 기능을 제공하기 위한 2차 비디오 신호를 포함하는 3D 비디오 신호를 제공한다. 상기 3D 비디오 신호에서, 상기 1차 비디오 신호는 3D 1차 비디오 신호이지만, 상기 2차 비디오 신호는 구체적으로 2D 2차 비디오 신호로서 제공된다. 상기 3D 1차 비디오 신호는 상기 보조 신호를 갖고 베이스 비디오 신호 및 보조 신호를 포함하고, 3D 디스플레이를 가능하게 하기 위해 요구된 정보를 포함한다. 예를 들면, 상기 3D 1차 비디오 신호는 좌+우(스테레오) 비디오 신호일 수 있고, 상기 베이스 비디오 신호는 좌측 비디오 신호이며 상기 보조 신호는 우측 비디오 신호이다. 상기 3D 1차 비디오 신호는 또한 2D+깊이 비디오 신호일 수 있고, 상기 베이스 비디오 신호는 상기 2D 비디오 신호이며 상기 보조 신호는 상기 깊이 신호이다. 상기 베이스 비디오 신호, 상기 보조 신호 및 상기 2D 2차 비디오 신호가 그 후 상기 3D 비디오 신호를 생성하기 위해 스트림 포맷으로 변환된다.
유리하게는, 상기 2D 2차 비디오 신호를 포함하는 상기 3D 비디오 신호는 3D 2차 비디오 신호를 포함한 3D 비디오 신호보다 낮은 비트 레이트를 가진다. 상기 보다 낮은 비트 레이트에 대한 이유는 3D 2차 비디오 신호가 2차 베이스 비디오 신호 다음으로, 부가적인 2차 보조 신호를 포함하고, 상기 2차 보조 신호는 3D 디스플레이를 가능하게 한다는 것이다. 3D 2차 비디오 신호 대신에 2D 2차 비디오 신호를 제공함으로써, 상기 2차 보조 신호는 생략되며 그러므로 상기 2차 비디오 신호의 비트 레이트는 저하된다.
본 발명은 또한 3D 2차 비디오 신호를 제공하는 것이 2D 2차 비디오 신호를 제공하는 것에 비해 상기 PiP 기능의 시청자 감상에 대한 상당히 제한된 효과를 가진다. PiP의 시청자의 감상에 대한 3D 2차 비디오 신호의 제한된 효과에 대한 이유는 두 부분으로 되며; 첫 번째로, 상기 시청자는 시간의 대부분이 상기 3D 1차 비디오 신호에 초점이 맞춰지지만 2차 비디오 신호에 대해서는 그렇지 않고, 두 번째로, 상기 2차 비디오 신호는 통상적으로 3D 2차 비디오의 깊이를 주목하기에 비교적 어렵게 만드는, 풀 디스플레이 스크린에 대해 작은 윈도우에서 디스플레이된다. 그러므로, 실제로, 상기 시청자는 상기 2차 비디오 신호가 3D 대신에 2D에서 제공됨을 거의 주목하지 않을 것이다.
그러므로, 상기 방법들은 상기 생성된 3D 비디오 신호가 3D 2차 비디오 신호를 포함한 3D 비디오 신호보다 낮은 비트 레이트를 가지는 효과를 가진다. 그 결과, 보다 적은 대역폭이 상기 3D 비디오 신호를 전송하기 위해 요구되며, 보다 작은 저장 용량이 상기 3D 비디오 신호를 저장하기 위해 요구된다. 마지막으로, 상기 3D 비디오 신호를 인코딩하고 디코딩하는 것은 통상적으로 보다 적은 컴퓨팅 리소스들을 요구한다. 유리하게는, 상기 3D 비디오 신호를 인코딩하고, 디코딩하고, 전송하거나 또는 저장하는 디바이스의 비용이 낮아진다.
본 발명에 따른 상기 방법들은 상기 3D 비디오 신호로서 다중화된 형태의 비디오 스트림을 제공한다. 상기 비디오 스트림은 그것이 상기 보조 스트림과 다중화된 상기 베이스 비디오 스트림을 포함하기 때문에 다중화된 형태에 있다. 상기 베이스 비디오 스트림은 스트림 포맷으로 변환된 상기 베이스 비디오 신호를 포함하며, 상기 보조 스트림은 스트림 포맷으로 변환된 상기 보조 신호를 포함한다. 상기 베이스 비디오 스트림 및 상기 보조 스트림은 상기 스트림들을 역다중화함으로써 상기 비디오 스트림으로부터 획득된다. 상기 베이스 비디오 신호는 스트림 포맷으로의 상기 베이스 비디오 신호의 변환을 역전시킴으로써 획득되고, 상기 보조 신호는 스트림 포맷으로의 상기 보조 신호의 변환을 역전시킴으로써 획득되며, 상기 2D 2차 비디오 신호는 상기 비디오 스트림으로부터 그것을 추출함으로써 획득된다.
상기 방법들은 상기 3D 비디오 신호가 단일 비디오 스트림이라는 효과를 가진다. 단일 비디오 스트림은 단지 전달을 위한 단일 통신 매체, 단지 동시에 PiP 및 3D 기능 둘 모두를 제공하면서 기록 등을 위한 단일 기록 유닛만을 요구한다. 상기 비디오 스트림 자체는 두 개의 개별 스트림들, 즉 상기 베이스 비디오 스트림 및 보조 스트림을 포함하며, 상기 3D 1차 비디오 신호는 상기 베이스 비디오 신호 및 상기 종손 신호를 개별적으로 포맷팅함으로써 두 개의 스트림들에 걸쳐 분리된다. 유리하게는, 상기 두 개의 스트림들에 대해 상기 3D 1차 비디오 신호를 분리함으로서, 각각의 개별 스트림의 비트 레이트는 상기 3D 1차 비디오 신호를 포함한 단일 비디오 스트림의 비트 레이트보다 낮다.
스트림을 디-포맷팅하는 것은 특히 상기 디-포맷팅이 압축 해제를 포함한다면, 계산 집중적이다. 반대로, 역-다중화는 덜 계산 집중적이다. 그러므로, 상기 단일 비디오 스트림을 디-포맷팅하는 것은 상기 단일 비디오 스트림을 역다중화하는 것 및 단지 상기 두 개의 스트림들 중 하나를 디-포맷팅하는 것보다 더 계산 집중적이다.
그 결과, 두 개의 스트림들 중 하나를 디-포맷팅하기 위해 사용된 디-포맷팅 유닛은 상기 단일 비디오 스트림을 디-포맷팅하기 위해 사용된 디-포맷팅 유닛보다 낮은 계산 성능을 갖고 충분할 수 있다. 유사하게는, 단지 보통의 계산 성능을 가진 디-포맷팅 유닛이 단일 비디오 스트림을 디-포맷팅할 수 없지만, 상기 두 개의 개별 스트림들 중 하나를 디-포맷팅할 수 있다. 특히, 단일 처리 디바이스는 상기 단일 비디오 스트림을 디-포맷팅하기 위해 충분히 높은 계산 성능의 디-포맷팅 유닛을 갖추지 않을 수 있지만, 특정 표준들과 호환하기 위해, 보통의 성능의 두 개의 디-포맷팅 유닛들을 포함한다. 그러므로, 상기 디바이스는 상기 단일 비디오 스트림을 디-포맷팅할 수 없을지라도, 상기 두 개의 별개의 스트림들을 디-포맷팅할 수 있다.
더욱이, 단지 하나의 보통의 계산 성능의 디-포맷팅 유닛을 구비한 신호 처리 디바이스는 상기 베이스 비디오 신호를 제공하기 위해 상기 베이스 비디오 스트림을 디-포맷팅할 수 있다. 상기 베이스 비디오 신호는 상기 3D 1차 비디오 신호의 역호환성을 고려하여, 보통 2D 1차 비디오 신호이다. 그러므로, 상기 신호 처리 디바이스는 상기 2D 1차 비디오 신호를 디-포맷팅할 수 있다. 상기 3D 1차 비디오 신호가 단일 비디오 스트림으로 포맷팅된다면, 이러한 디바이스는 1차 비디오 신호를 전혀 제공할 수 없다.
그러므로, 상기 3D 비디오 신호는 2D 비디오 신호들을 위한 단지 하나의 디-포맷팅 유닛을 가진 신호 처리 디바이스, 예로서 이전의 2D 신호 처리 디바이스와 역 호환성이 가능해지고, 동시에 다수의 디-포맷팅 유닛들을 가진 신호 처리 디바이스들 상에서 PiP 및 3D의 기능을 제공할 수 있다. 유리하게는, 2D 신호 처리 디바이스를 가진 소비자는 3D 비디오 신호의 적어도 2D 기능을 즐길 수 있다. 부가적으로, 생산자는 2D 신호 처리 디바이스들을 가진 소비자들이 비디오 콘텐트를 전혀 재생할 수 없음을 걱정하지 않고 상기 3D 비디오 신호 포맷으로 상기 비디오 콘텐트를 제공함으로써 PiP 및 3D 기능을 가진 비디오 콘텐트를 생산하고 분배하는 비용을 감소시킬 수 있다.
본 발명의 다음 실시예들은 상기 3D 비디오 신호가 단지 하나의 디-포맷팅 유닛을 가진 신호 처리 디바이스로 하여금 PiP 기능과 함께 상기 베이스 비디오 신호를 제공할 수 있게 하는 효과를 달성한다.
본 발명의 일 실시예에서, 방법은 3D 비디오 신호를 생성하기 위한 방법이 제공되며, 상기 베이스 비디오 신호를 포맷팅하는 단계는 상기 베이스 비디오 스트림에 상기 2D 2차 비디오 신호를 포함하기 위해 상기 2D 2차 비디오 신호를 갖고 상기 베이스 비디오 신호를 다중화하는 단계를 포함한다.
본 발명의 일 실시예에서, 신호 처리 디바이스는 3D 비디오 신호를 처리하기 위해 제공되며, 상기 베이스 비디오 스트림은, 포맷팅된 형태로, 상기 2D 2차 비디오 신호와 다중화된 상기 베이스 비디오 신호를 포함하며, 상기 디-포맷팅 유닛은 또한 상기 베이스 비디오 스트림으로부터 상기 베이스 비디오 신호 및 상기 2D 2차 비디오 신호를 역-다중화하도록 배열된다.
본 발명에 따른 상기 방법들은 부가적으로 상기 2D 2차 비디오 신호를 포함한 베이스 비디오 스트림을 제공한다. 상기 베이스 비디오 스트림은 상기 베이스 비디오 신호 및 상기 2D 2차 비디오 신호를 다중화하고 스트림 포맷으로 변환함으로써 생성된다. 그러므로, 상기 베이스 비디오 신호 및 상기 2D 2차 비디오 신호는 스트림 포맷으로의 변환을 역전시키고 상기 신호들을 다중화함으로써 상기 베이스 비디오 스트림으로부터 획득된다.
상기 방법들은 상기 2D 2차 비디오 신호가 구체적으로 상기 베이스 비디오 스트림에서 포함되는 효과를 가진다. 그러므로, 상기 베이스 비디오 스트림을 디-포맷팅하는 디-포맷팅 유닛은 상기 베이스 비디오 신호 및 상기 2D 2차 비디오 신호 둘 모두를 획득한다. 특히, 단지 하나의 디-포맷팅 유닛을 가진 신호 처리 디바이스는 2D 1차 비디오 신호 및 2D 2차 비디오 신호를 제공하고, 그에 의해 PiP 기능을 제공하기 위해 상기 베이스 비디오 스트림을 디-포맷팅할 수 있다. 그러므로, 상기 3D 비디오 신호는 단지 하나의 디-포맷팅 유닛을 가진 신호 처리 디바이스가 PiP 기능과 함께 상기 2D 1차 비디오 신호를 제공할 수 있게 한다.
본 발명의 다음 실시예들은 상기 비디오 스트림의 비트 레이트가 상기 3D 비디오 신호에서 PiP 기능을 제공하는 결과로서 증가되지 않는다는 효과를 달성한다.
본 발명의 일 실시예에서, 방법은 3D 비디오 신호를 생성하기 위해 제공되며, 상기 보조 신호를 포맷팅하는 단계는 상기 보조 스트림에 상기 2D 2차 비디오 신호를 포함하기 위해 상기 2D 2차 비디오 신호를 갖고 상기 보조 신호를 다중화하는 단계를 포함한다.
본 발명의 일 실시예에서, 신호 처리 디바이스가 3D 비디오 신호를 처리하기 위해 제공되며, 상기 보조 스트림은, 포맷팅된 형태로 상기 2D 2차 비디오 신호와 다중화된 상기 보조 신호를 포함하며, 상기 디-포맷팅 유닛은 또한 상기 보조 스트림으로부터 상기 보조 신호 및 상기 2D 2차 비디오 신호를 역-다중화하기 위해 배열된다.
본 발명에 따른 상기 방법들은 2D 2차 비디오 신호를 부가적으로 포함하는 보조 스트림을 제공한다. 상기 보조 스트림은 상기 보조 신호 및 상기 2D 2차 비디오 신호를 다중화하고 스트림 포맷으로 변환함으로써 생성된다. 그러므로, 상기 종속 시호 및 상기 2D 2차 비디오 신호는 스트림 포맷으로의 상기 변환을 역전시키고 상기 신호들을 다중화함으로써 상기 보조 스트림으로부터 획득된다.
상기 방법들은 상기 2D 2차 비디오 신호가 구체적으로 상기 보조 스트림에 포함되고, 그러므로 상기 베이스 비디오 스트림이 PiP 기능을 갖지 않는 3D 비디오 신호의 베이스 비디오 스트림과 동일하다는 효과를 가진다. 그러므로, 상기 베이스 비디오 스트림의 비트 레이트는 상기 3D 비디오 신호에 PiP 기능을 제공하는 결과로서 증가되지 않는다. 오히려, 상기 보조 스트림의 비트 레이트가 증가된다. 기존의 디-포맷팅 유닛들뿐만 아니라 표준들과의 호환성을 이유로, 스트림의 비트-레이트는 특정 최대치로 제한된다.
포맷팅된 보조 신호의 비트 레이트는 통상적으로 포맷팅된 베이스 비디오 신호의 것보다 낮다. 예를 들면, 상기 3D 비디오 신호가 2D+깊이 비디오 신호라면, 상기 깊이 정보는 각각의 픽셀에 대한 하나의 깊이 값을 포함하는 반면, 상기 베이스 비디오 신호는 각각의 화소에 대한 3개의 컬러 값들, 예로서, R, G, 및 B를 포함한다. 그러므로, 상기 베이스 비디오 스트림에서라기보다는 상기 보조 스트림에 상기 2D 2차 비디오 신호를 포함함으로써, 양쪽 스트림들 모두의 비트 레이트의 최대치가 저하되며, 즉 전체 비디오 스트림의 비트-레이트는 상기 베이스 비디오 스트림 및 보조 스트림 사이에서 더 균등하게 분배된다. 유리하게는, 상기 베이스 비디오 신호의 보다 양호한 화상 품질이 단지 상기 베이스 비디오 신호에 대한 표준에서 특정된 전체 이용가능한 비트 레이트를 할당함으로써 획득된다.
본 발명의 다음 실시예들은 상기 베이스 비디오 스트림 및 상기 보조 스트림이 PiP 기능을 갖지 않는 3D 비디오 신호의 각각의 스트림들과 동일한 비트 레이트를 가진다는 효과를 달성한다.
본 발명의 일 실시예에서, 방법은 3D 비디오 신호를 생성하기 위해 제공되고, 상기 방법은 2D 2차 비디오 스트림을 생성하기 위해 상기 2D 2차 비디오 신호를 포맷팅하는 단계를 더 포함하며, 다중화 단계는 상기 비디오 스트림에 상기 2D 2차 비디오 신호를 포함시키는 단계를 위해 상기 베이스 비디오 스트림 및 상기 보조 스트림과 상기 2D 2차 비디오 스트림을 다중화하는 단계를 포함한다.
본 발명의 일 실시예에서, 신호 처리 디바이스가 3D 비디오 신호를 처리하기 위해 제공되며, 상기 비디오 스트림은 상기 베이스 비디오 스트림 및 상기 보조 스트림과 다중화된 2D 2차 비디오 신호를 포함하고, 상기 2D 2차 비디오 스트림은 포맷팅된 형태로 상기 2D 2차 비디오 신호를 포함하고, 상기 역다중화 유닛은 또한 상기 2D 2차 비디오 스트림을 역다중화하도록 구성되며, 상기 디-포맷팅 유닛은 또한 상기 2D 2차 비디오 스트림으로부터 상기 2D 2차 비디오 신호를 디-포맷팅하도록 구성된다.
본 발명에 따른 상기 방법들은 상기 2D 2차 비디오 신호를 포함한 2D 2차 비디오 스트림을 제공한다. 상기 2D 2차 비디오 스트림은 상기 2D 2차 비디오 신호를 스트림 포맷으로 변환함으로써 생성되며, 상기 베이스 비디오 스트림 및 상기 보조 스트림과 상기 2D 2차 비디오 스트림을 다중화함으로써 상기 비디오 스트림에 포함된다. 그러므로, 상기 2D 2차 비디오 신호는 상기 스트림들을 역다중화함으로써, 및 스트림 포맷으로의 상기 2D 2차 비디오 신호의 변환을 전환시킴으로써 상기 비디오 스트림으로부터 획득된다.
상기 방법들은 상기 2D 2차 비디오 신호가 별개의 2D 2차 비디오 스트림에 포함되지만, 상기 베이스 비디오 스트림 및 상기 보조 스트림 모두에는 포함되지 않는 효과를 가진다. 그러므로, 상기 베이스 비디오 스트림 및 상기 보조 스트림은 PiP 기능을 갖지 않는 3D 비디오 신호의 각각의 스트림들과 동일한 비트 레이트를 가진다. 그러므로, 상기 3D 비디오 신호는 PiP 기능을 갖지 않는 3D 비디오 신호를 디-포맷팅하기 위한 컴퓨팅 리소스들만을 가진 두 개의 디-포맷팅 유닛들을 가진 신호 처리 디바이스와 호환가능하다. 이러한 디바이스는 PiP 기능을 제공할 수 없지만, 상기 3D 1차 비디오 신호는 여전히 디-포맷팅될 수 있다. 그러나, 동일한 3D 비디오 신호는 상기 2D 2차 비디오 스트림을 위한 부가적인 디-포맷팅 유닛을 가진 디바이스 상에서 PiP 기능을 제공한다. 더욱이, 두 개의 디-포맷팅 유닛들을 가진 이러한 신호 처리 디바이스의 사용자는 3D 기능이 선호되는지 또는 PiP 기능이 선호되는지를 선택할 수 있다. 첫 번째 경우에는, 상기 베이스 비디오 스트림 및 상기 보조 스트림이 디-포맷팅되며, 후자의 경우에는, 상기 베이스 비디오 스트림 및 상기 2D 2차 비디오 스트림이 디-포맷팅된다. 그러므로, 상기 3D 비디오 신호는 유리하게는 개인 선호도에 따라 3D 기능 및 PiP 기능 사이에서 선택하도록 사용자에게 가능성을 제공한다.
본 발명의 일 실시예에서, 3D 비디오 신호가 제공되며, 여기서 상기 3D 비디오 신호는 1차 신호 성분 및 2차 신호 성분을 포함하고, 상기 1차 신호 성분은 상기 1차 신호 성분을 개별적으로 전송하기 위해 포맷팅된 상기 베이스 비디오 신호를 포함하며, 상기 2차 신호 성분은 상기 2차 신호 성분을 개별적으로 전송하기 위해 포맷팅된 상기 2D 2차 비디오 신호를 포함한다.
본 발명에 따른 상기 방법들은 2D 1차 비디오 신호를 제공하기 위한 1차 신호 성분 및 2D 2차 비디오 신호를 제공하기 위한 2차 신호 성분을 포함하는 3D 비디오 신호를 제공한다. 상기 비디오 신호들은 신호 성분들 모두의 개별적 전송을 가능하게 하기 위해 포맷팅된다. 그러므로, 상기 방법들은 상기 3D 비디오 신호의 두 개의 신호 성분들이 별개의 전송 채널들을 통해 전송 또는 수신될 수 있거나 또는 별개의 정보 캐리어들 상에 저장될 수 있다는 효과를 가진다. 그러므로, 상기 3D 비디오 신호의 보다 낮은 비트 레이트들이 상기 2D 2차 비디오 신호를 포함하는 상기 3D 비디오 신호의 2차 신호 성분에서 실현된다.
유리하게는, 소비자는 인터넷으로부터 상기 2차 신호 성분을 다운로드함으로써 이미 상기 소비자가 보유한 1차 비디오 신호의 PiP 기능을 편리하게 획득할 수 있고, 상기 1차 비디오 신호의 생산자는 상기 소비자에 의한 구매를 위해 상기 2차 신호 성분을 이용가능하게 함으로써 부가적인 수입을 얻을 수 있다.
본 발명의 다음 실시예들은 상기 3D 디스플레이 신호에서 상기 2D 2차 비디오 신호의 디스플레이 깊이가 상기 3D 비디오 신호에 포함된 오프셋 값을 사용하여 제어될 수 있다는 효과를 달성한다.
본 발명의 일 실시예에서, 방법이 3D 비디오 신호를 생성하기 위해 제공되며, 상기 방법은 상기 3D 비디오 신호에서 오프셋 값을 포함하는 단계를 더 포함하고, 상기 오프셋 값은 상기 3D 디스플레이 상에서 상기 2D 2차 비디오 신호의 디스플레이 깊이를 나타낸다.
본 발명의 일 실시예에서, 신호 처리 디바이스가 3D 비디오 신호를 처리하기 위해 제공되며, 상기 3D 비디오 신호는 상기 3D 디스플레이 상에서 상기 2D 2차 비디오 신호의 디스플레이 깊이를 나타내는 오프셋 값을 더 포함하고, 상기 병합 유닛은 또한, 상기 오프셋 값에 의존하여, 상기 베이스 비디오 신호 및 상기 보조 신호와 상기 2D 2차 비디오 신호를 병합하도록 배열된다.
본 발명에 따른 상기 방법들은 상기 3D 비디오 신호에 포함되는 오프셋 값, 및 상기 오프셋 값에 의해 표시된 디스플레이 깊이에서 3D 디스플레이 신호에 상기 2D 2차 비디오 신호를 위치시키기 위한 상기 오프셋 값을 사용한 상기 병합 유닛을 제공한다. 그러므로, 상기 방법들은 상기 3D 디스플레이 신호에서의 상기 2D 2차 비디오 신호의 디스플레이 깊이가 상기 오프셋 값을 사용하여 제어되 수 있는 효과를 가진다. 그러므로, 상기 3D 비디오 신호의 생산자는 상기 2D 2차 비디오 신호의 디스플레이 깊이를 사전 결정하고 상기 오프셋 값에 의해 상기 3D 비디오 신호에 상기 디스플레이 깊이를 포함시킬 수 있다.
유리하게는, 상기 오프셋 값은 상기 시청자의 임의의 혼동 또는 해석의 어려움들을 방지하기 위해 상기 3D 1차 비디오 신호의 디스플레이 깊이로부터 명확하게 분리되는 상기 2D 2차 비디오 신호의 디스플레이 깊이를 제공할 수 있게 한다.
2007년 5월 1일, IEEE, 2007, 3D 회의의, 현 리 등에 의한 "지상파 DMB 시스템에 기초한 2D/3D 믹싱 서비스의 구조(A Structure for 2D/3D Mixed Service Based on Terrestrial DMB System)"라는 제목의 발행물이 2D/3D 믹싱 서비스를 위한 전송 아키텍처를 개시하며, 여기서 3D 이미지 서비스 및 2D 비디오 서비스는 하나의 비디오 전송 신호에 결합된다. 상기 발행물의 도 7은 상기 2D/3D 믹싱 서비스의 형태인 것으로 언급되는 PiP의 일 예를 도시한다. 이러한 도면에서, 상기 PiP는 2D 이미지이고 그것의 배경은 3D 이미지이다. 도 1 및 그것의 대응 설명은 상기 비디오 전송 신호가 3D 데이터 파일들의 패킷들뿐만 아니라 2D 비디오 데이터 스트림을 생성하고, 그 둘 모두를 다중화함으로써 생성된다.
그러나, 상기 발행물은 베이스 비디오 스트림 및 보조 스트림으로서 포맷팅되는 3D 1차 비디오 신호를 개시하지 않는다. 그것은 또한 상기 비디오 스트림이 상기 베이스 비디오 스트림 및 상기 보조 스트림을 다중화함으로써 생성된다는 것을 개시하지 않는다. 사실상, 그것은 3D 비디오 신호가 비디오 스트림으로서 생성되는 것을 개시하지 않는다. 대신에, 도 1 및 그것의 대응하는 설명은 멀티미디어 오브젝트 전송(multimedia object transfer; MOT) 패키지들로서 전송되는 3D 이미지 서비스를 도시하며, 상기 패키지들은 패킷 모드 데이터 경로를 통해 상기 비디오 전송 신호에 포함된다.
본 발명에 따르면, 3D 비디오 신호가 단지 하나의 디-포맷팅 유닛을 가진 신호 처리 디바이스가 PiP 기능과 함께 상기 베이스 비디오 신호를 제공할 수 있게 하고, 상기 베이스 비디오 스트림 및 상기 보조 스트림이 PiP 기능을 갖지 않는 3D 비디오 신호의 각각의 스트림들과 동일한 비트 레이트를 가진다는 효과를 달성하며, 상기 3D 디스플레이 신호에서 상기 2D 2차 비디오 신호의 디스플레이 깊이가 상기 3D 비디오 신호에 포함된 오프셋 값을 사용하여 제어될 수 있게 한다.
도 1은 3D 비디오 신호를 생성하기 위한 방법을 도시한 도면.
도 2는 비디오 스트림을 생성하기 위한 방법을 도시한 도면.
도 3은 2D 2차 비디오 스트림을 포함한 비디오 스트림을 생성하기 위한 방법을 도시한 도면.
도 4는 오프셋 값을 포함한 3D 비디오 신호를 생성하기 위한 방법을 도시한 도면.
도 5는 3D 비디오 신호를 처리하기 위한 방법을 도시한 도면.
도 6은 3D 비디오 신호를 도시한 도면.
도 7은 비디오 스트림을 도시한 도면.
도 8은 2D 2차 비디오 스트림을 포함한 비디오 스트림을 도시한 도면.
도 9는 3D 비디오 신호를 포함한 정보 캐리어를 도시한 도면.
도 10은 3D 비디오 신호를 생성하기 위한 신호 생성 디바이스를 도시한 도면.
도 11은 3D 비디오 신호를 처리하기 위한 신호 처리 디바이스를 도시한 도면.
도 12는 비디오 스트림을 처리하기 위한 신호 처리 디바이스를 도시한 도면.
도 13은 2D 2차 비디오 스트림을 포함한 비디오 스트림을 처리하기 위한 신호 처리 디바이스를 도시한 도면.
도 14는 오프셋 값을 포함한 3D 비디오 신호를 도시한 도면.
도 15는 오프셋 값을 사용하도록 구성된 신호 처리 디바이스를 도시한 도면.
도 16은 3D 디스플레이, 방송 수신기, 인터넷 수신기 및 판독기를 포함한 신호 처리 디바이스를 도시한 도면.
도 1은 도 6에 도시된 바와 같이, 3D 디스플레이 상에서 3D 1차 비디오 신호(301) 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위해 3D 비디오 신호(300)를 생성하기 위한 방법(100)의 흐름도이다. 상기 3D 1차 비디오 신호(301)는 임의의 현재 알려진 3D 비디오 신호, 뿐만 아니라 추가 개발된 3D 비디오 신호일 수 있다. 그러나, 상기 현재 알려진 3D 비디오 신호들은 그것들이 베이스 비디오 신호(302) 및 보조 신호(303)를 포함한다는 공통점을 가지며, 상기 보조 신호는 3D 디스플레이를 가능하게 한다.
예를 들면, 상기 3D 1차 비디오(301) 신호는 좌+우 (스테레오) 비디오 신호일 수 있으며, 상기 베이스 비디오 신호(302)는 좌측 비디오 신호이고 상기 보조 신호(303)는 우측 비디오 신호이며, 그 역 또한 마찬가지이다. 상기 3D 1차 비디오 신호(301)는 또한 2D+깊이 비디오 신호일 수 있으며, 상기 베이스 비디오 신호(302)는 상기 2D 비디오 신호 및 상기 깊이 신호인 보조 신호(303)이다. 상기 보조 신호(303)는 또한 예로서 여기에 참조로서 포함되는, 스테레오스코픽 디스플레이들 및 애플리케이션들 XX(2009)에 대한 회보들, B. Barenbrug에 의한 '디클립스 2: 실현가능한 투명성을 가진 다층 이미지-및-깊이(Declipse 2: Multilayer Image-and-Depth with Transparency Made Practical)'에 설명된 바와 같이, 단지 깊이보다 많은 정보를 포함할 수 있다. 또한, 상기 3D 1차 비디오 신호(301)는 다수의 베이스 비디오 신호들 및 3D 디스플레이를 가능하게 하는 대응하는 다수의 보조 신호들을 포함하는 다중-뷰+깊이 비디오 신호일 수 있다.
상기 3D 디스플레이는 3D 비디오 신호를 도시하기에 적합한 임의의 현재 알려지거나 또는 미래에 개발된 3D 디스플레이일 수 있다. 예를 들면, 상기 3D 디스플레이는 스테레오스코픽 3D 텔레비전 또는 오토-스테레오스코픽 렌즈 기반 다중-뷰 3D 디스플레이일 수 있다.
상기 방법(100)은 "2D 2차 비디오신호를 제공하는 단계"(단계 101)에서 상기 2차 비디오 신호로서 2D 2차 비디오 신호(304)를 제공하는 단계를 포함한다. 이 단계에서, 상기 2차 비디오 신호는 구체적으로는 2D 2차 비디오 신호(304)로서 제공된다. 상기 단계는 상기 2D 2차 비디오 신호(304)를 직접 수신하거나 또는 획득하는 단계를 포함할 수 있거나, 또는 3D 2차 비디오 신호를 먼저 수신하거나 또는 획득하는 단계를 포함할 수 있다. 후자의 경우에, 상기 단계는 부가적으로 상기 3D 2차 비디오 신호를 상기 2D 2차 비디오 신호(304)로 변환하는 단계를 포함한다. 상기 3D 2차 비디오 신호가 2D 2차 베이스 비디오 신호 및 2차 보조 신호를 포함한다면, 상기 변환은 상기 2차 보조 신호를 생략하는 단계 및 2D 2차 비디오 신호(304)로서 상기 2D 2차 베이스 비디오 신호를 사용하는 단계를 수반할 수 있다. 그러나, 3D에서 2D로의 보다 복잡한 변환이 동일하게 가능하다.
상기 방법(100)은 "상기 3D 비디오 신호를 생성하는 단계" (단계 102)에서 상기 3D 비디오 신호(300)를 생성하기 위해 상기 베이스 비디오 신호(302), 상기 보조 신호(303) 및 상기 2D 2차 비디오 신호(304)를 포맷팅하는 단계를 더 포함한다. 이 단계에서, 상기 베이스 비디오 신호(302), 상기 보조 신호(303) 및 상기 2D 2차 비디오 신호(304)는 그에 의해 상기 3D 비디오 신호(300)를 생성하기 위해 구조화된 포맷으로 변환된다. 결과적인 3D 비디오 신호(300)는 통상적으로 단일 정보 캐리어 상에 위치되거나 또는 단일 전송 매체를 통해 전송되지만, 또한 신호 성분들로 분리될 수 있고, 상기 신호 성분들은 상이한 정보 캐리어들 상에 위치되거나 또는 상이한 전송 미디어를 통해 전송된다.
도 2는 3D 비디오 신호를 생성하기 위한 방법(110)의 흐름도이며, 여기서 상기 3D 비디오 신호는 다중화된 형태의 비디오 스트림(310)이다. 상기 비디오 스트림(310)은 정보 유닛들의 연쇄(series), 예로서, 비트들 또는 바이트들이며, 상기 정보 유닛들은 이러한 특정 경우에서 비디오 데이터를 표현한다. 상기 비디오 스트림(310)이 전송 매체를 통해 전송되거나 또는 수신된다면, 상기 연쇄는 시간 연쇄적이다. 그러나, 상기 비디오 스트림(310)은 또한 정보 캐리어 상에 저장될 수 있으며, 이러한 경우에, 상기 비디오 스트림(310)은 위치에서의 정보 유닛들의 연쇄이다. 상기 위치에서의 연쇄는 엄격하게는 위치에서 순차적일 수 있으며, 즉 각각의 정보 유닛은 단지 물리적 이웃들로서 이전 및 다음 정보를 가진다. 그러나, 보다 통상적으로, 상기 정보 캐리어는 기본적인 구조, 예로서 상기 비디오 스트림(310)의 직렬 특성을 어렵게 하는 파일 시스템을 가진다. 이러한 경우에, 상기 상기 비디오 스트림(310)의 직렬 특성은 상기 비디오 스트림(310)이 시간적으로 연쇄 정보 유닛들인 동안, 상기 비디오 스트림(310)의 저장 및 검색의 단계들에서 도시한다.
상기 방법(110)은 "베이스 비디오 스트림을 생성하는 단계" (단계 111)에서 상기 베이스 비디오 스트림(311)을 생성하기 위해 상기 베이스 비디오 신호(302)를 포맷팅하는 단계, 및 "보조 스트림을 생성하는 단계" (단계 112)에서 상기 보조 스트림(312)을 생성하기 위해 상기 보조 신호(303)를 포맷팅하는 단계를 포함한다. 신호를 포맷팅하는 것은 스트림을 생성하기 위해 신호를 구조화된 포맷으로 변환하는 것을 포함한다. 사실상, 상기 스트림은 상기 스트림이 생성되는 신호를 위한 컨테이너가 된다. 스트림은 사실상 직렬이지만, 신호가 반드시 그런 것은 아니다. 오히려, 비디오 신호는 통상적으로 사실상 2D 또는 3D이다. 그러므로, 2D 비디오 신호를 포맷팅하는 단계는 시간적으로 일련의 픽셀들을 생성하기 위해 픽셀 단위로 상기 2D 비디오 신호를 통해 스캐닝함으로써 상기 2D 비디오 신호를 비디오 스트림으로 변환하는 단계를 수반할 수 있다.
이에 대하여, 비디오 스트림을 설명하는데 형용사 '2D'는 단지 상기 스트림이 생성되는 상기 신호가 구체적으로 2D 비디오 신호라는 분류로서 의도된다는 것이 주의되어야 한다. 그러므로, 상기 스트림이 사실상 '2D'임을 나타내지 않는다.
스트림을 생성하기 위해 신호를 포맷팅하는 것은 부가적으로 상기 스트림에 보조 정보(auxiliary information), 예로서, 메타데이터, 헤더 정보, 에러 정정 정보, 동기화 정보 등을 부가하는 단계를 포함할 수 있다. 이와 같이, 합의된 표준, 예로서, MPEG 기본 스트림 또는 MPEG 수송 스트림에 부합하는 스트림이 생성될 수 있다. 상기 포맷팅은 또한 보다 낮은 비트 레이트를 가진 비디오 스트림을 생성하기 위해 상기 신호를 압축하는 단계를 포함할 수 있다. 이러한 목적을 위해, 그 외에 요구되는 것보다 적은 정보 유닛들을 포함하는 스트림에서의 신호를 변환하기 위해, 예를 들면, MPEG-2 또는 H264 표준들에 의해 표준화된 바와 같이, 광범위한 데이터 압축 기술들이 사용될 수 있다. 특정 예로서, 상기 보조 신호(303)는 블루-레이 디스크 상에 상기 스트림을 포함하기 위한 기본적인 스트림으로 포맷팅될 수 있다.
상기 방법(110)은 "상기 스트림들을 다중화하는 단계" (단계 113)에서 상기 비디오 스트림(310)을 생성하기 위해 상기 보조 스트림(312)을 갖고 상기 베이스 비디오 스트림(311)을 다중화하는 단계를 더 포함한다. 다중화는 다수의 신호들을 하나의 단일 신호로 결합하거나, 또는 이 경우에, 다수의 스트림들을 하나의 단일 스트림으로 결합하는 단계이다. 다중화의 공통 형태는 시분할 다중화이며, 여기서 상기 다수의 스트림들은 상기 단일 비디오 스트림을 생성하기 위해 시간적으로 인터리빙된다. 그러므로, 상기 보조 스트림(312)과 상기 베이스 비디오 스트림(311)을 다중화함으로써, 다중화된 형태로 두 스트림들을 포함하는 단일 비디오 스트림(310)이 생성된다.
마지막으로, 상기 방법(110)은 "상기 2D 2차 비디오 신호를 포함시키는 단계" (단계 114)에서 상기 비디오 스트림(310)에 상기 2D 2차 비디오 신호(304)를 포함시키는 단계를 포함한다. 상기 2D 2차 비디오 신호(304)는 다양한 방식들로 상기 비디오 스트림(310)에 포함될 수 있다. 예를 들면, 상기 2D 2차 비디오 신호(304)는 2D 2차 비디오 스트림(313)을 생성하기 위해 포맷팅될 수 있으며, 상기 스트림은 부가적으로 상기 비디오 스트림(315)을 생성하기 위해 다중화될 수 있거나 또는 상기 비디오 스트림(310)의 시작 또는 끝에 포함될 수 있다. 또한, 상기 2D 2차 비디오 신호(304)는 상기 2D 2차 비디오 신호(304)와 상기 베이스 비디오 신호(302)를 다중화하고, 상기 베이스 비디오 스트림(311)을 생성하기 위해 결과적인 신호를 포맷팅함으로써 상기 비디오 스트림(310)에 포함될 수 있다. 유사하게는, 상기 2D 2차 비디오 신호(304)는 상기 2D 2차 비디오 신호(304)와 상기 보조 신호(303)를 다중화하고 상기 보조 스트림(312)을 생성하기 위해 결과적인 신호를 포맷팅함으로써 상기 비디오 스트림(310)에 포함될 수 있다. 또한, 상기 2D 2차 비디오 신호(304)는 상기 베이스 비디오 스트림(311) 또는 상기 보조 스트림(312)으로 직접 다중화될 수 있다.
도 3은 2D 2차 비디오 스트림(313)을 포함한 비디오 스트림(315)를 생성하기 위한 방법(120)의 흐름도이다. 상기 방법(120)은 "상기 베이스 비디오 스트림을 생성하는 단계" (단계 111)에서 상기 베이스 비디오 스트림(311)을 생성하기 위해 상기 베이스 비디오 신호(302)를 포맷팅하는 단계, 및 "상기 보조 스트림을 생성하는 단계" (단계 112)에서 상기 보조 스트림(312)을 생성하기 위해 상기 보조 신호(303)를 포맷팅하는 단계를 포함한다. 더욱이, 상기 방법(120)은 "상기 2D 2차 비디오 스트림을 생성하는 단계" (단계 123)에서 2D 2차 비디오 스트림(313)을 생성하기 위해 상기 2D 2차 비디오 신호(304)를 포맷팅하는 단계를 포함한다. 더욱이, "상기 스트림들을 다중화하는 단계"(단계(124))는 상기 베이스 비디오 스트림(311) 및 상기 보조 스트림(312)과 상기 2D 2차 비디오 스트림(313)을 다중화하고, 그에 의해 상기 비디오 스트림(315)에 상기 2D 2차 비디오 신호(304)를 포함시키는 단계를 포함한다.
도 4는 오프셋 값(501)을 포함한 3D 비디오 신호(500)를 생성하기 위한 방법(130)의 흐름도이다. 상기 방법(130)의 제 1 단계(131)는 도 1의 단계(101)인, "상기 2D 2차 비디오 신호를 제공하는" 단계와 동일하며, 상기 제 2 단계(132)는 도 1의 단계(102)인, "상기 3D 비디오 신호를 생성하는 단계"와 동일하다. 상기 방법(130)은 "상기 오프셋 값을 포함하는 단계" (단계 134)에서 상기 3D 비디오 신호(500)에 오프셋 값(501)을 포함시키는 단계를 포함하고, 상기 오프셋 값(501)은 상기 3D 디스플레이 상에 상기 2D 2차 비디오 신호(304)의 디스플레이 깊이를 나타낸다.
상기 오프셋 값(501)을 포함시키는 단계(134)를 추가 설명하기 위해, 3D 디스플레이가 본질적으로 특정 디스플레이 깊이로 정보를 디스플레이한다는 것을 이해할 필요가 있다. 상기 디스플레이 깊이는 대개 3D 비디오 신호에 의해 제공된다. 이것은 예를 들면, 간접적으로 좌+우(스테레오) 비디오 신호의 좌측 및 우측 비디오 신호 사이의 디스패리티(disparity)에 의해, 또는 직접적으로 예를 들면 2D+깊이 비디오 신호의 깊이 신호에 의한 것일 수 있다. 재생 디바이스 또는 3D 디스플레이는 그 후 예로서 상기 제공된 깊이를 추가로 증폭시키거나 또는 감소시킴으로써, 상기 디스플레이 깊이를 생성하기 위해 상기 제공된 깊이를 추가로 변경할 수 있다.
3D 디스플레이는 통상적으로 깊이 착시(depth illusion)가 생성되지 않는 '디폴트(default)' 디스플레이 깊이를 가진다. 이것은 예로서, 스테레오스코픽 디스플레이의 뷰들(views) 모두가 동일한 정보를 제공하는 경우이다. 이러한 디폴트 디스플레이 깊이는 통상적으로 상기 시청자에 의해 상기 디스플레이 그 자체의 깊이로, 즉 상기 3D 디스플레이 "밖으로 돌출되는(protruding outside)"(즉, 상기 디스플레이 평면보다 상기 시청자에게 더 가까운 것으로 인식된 깊이를 제공받고) 또는 그것의 "안쪽으로 들어가는(carving inside)"(상기 디스플레이 평면보다 상기 시청자로부터 더 먼 것으로 인식된 깊이를 제공받는) 것이 아닌, 디스플레이되는 정보로서 해석된다.
다수의 이유들로, 상기 시청자의 임의의 혼동 또는 해석의 어려움들을 방지하는 것과 같이, 그것은 상기 3D 디스플레이 상에서 상기 2D 2차 비디오 신호(304)의 디스플레이 깊이를 제어하는 것이 바람직할 수 있다. 이를 위해, 상기 방법(130)은 그러므로 상기 3D 디스플레이 상에 상기 2D 2차 비디오 신호(304)의 디스플레이 깊이의 제어를 나타내고 그에 따라 허용하기 위해 상기 3D 비디오 신호(500)에 상기 오프셋 값(501)을 포함시키는 단계(134)를 포함한다.
상기 방법(130)은 3D 2차 비디오 신호로부터 도출되는 상기 2D 2차 비디오 신호(304), 및 "상기 오프셋 값을 결정하는 단계" (단계 133)에서 상기 3D 2차 비디오 신호의 깊이에 의존하여 상기 오프셋 값(501)을 결정하는 단계를 더 포함한다. 상기 2D 2차 비디오 신호(304)가 3D 2차 비디오 신호로부터 도출된다면, 상기 3D 2차 비디오 신호의 깊이는 상기 3D 디스플레이 상에서 상기 2D 2차 비디오 신호(304)의 디스플레이 깊이를 나타내기 위해 사용될 수 있다. 예를 들면, 상기 3D 2차 비디오 신호의 깊이가 3D 디스플레이의 밖으로 평균하여 강한 돌출을 나타낸다면, 유사한 효과가 상기 3D 디스플레이의 밖으로 강하게 돌출된 상기 전체 2D 2차 비디오 신호(304)를 가짐으로써 달성될 수 있다. 또한, 장면 인식은 유사한 효과를 달성하기 위해 사용될 수 있다; 상기 3D 2차 비디오 신호가 평탄한 풍경을 포함한다면, 상기 디스플레이 깊이 및 그에 따른 상기 오프셋 값(501)은 2D 2차 비디오 신호(304)가 상기 시청자로부터 가능한 멀리 떨어져 위치되도록, 즉 상기 3D 디스플레이의 내부로 들어가도록 선택될 수 있다.
도 5는 3D 디스플레이 상에 3D 1차 비디오 신호(301) 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위해 3D 비디오 신호(300)를 처리하기 위한 방법(200)의 흐름도이며, 상기 3D 비디오 신호(300)는 상기 2차 비디오 신호로서 2D 2차 비디오 신호(304)를 포함한다. 상기 방법(200)은 "디-포맷팅 단계" (단계 201)에서 상기 3D 비디오 신호(300)로부터 상기 베이스 비디오 신호(302), 상기 보조 신호(303) 및 상기 2D 2차 비디오 신호(304)를 디-포맷팅하는 단계를 포함한다. 상기 디-포맷팅은 본질적으로 포맷팅의 단계를 역전시키는 단계, 즉 스트림을 생성하기 위해 신호의 변환을 역전시키는 단계를 수반한다. 본질적으로, 상기 신호는 상기 스트림이 구성하는 상기 콘테이너로부터 추출된다. 디-포맷팅은 부가적으로 상기 스트림의 상기 신호로부터의 보조 정보, 예로서, 메타데이터, 헤더 정보, 에러 정정 정보, 동기화 정보 등을 사용하거나 또는 제거하는 단계를 포함할 수 있다. 상기 디-포맷팅은 또한 상기 스트림으로부터 상기 신호를 압축해제하는 단계를 포함할 수 있다. 이를 위해, 예로서, 상기 MPEG-2 또는 H264 표준들에 의해 표준화된 것과 같이, 광범위한 데이터 압축 해제 기술들이 사용될 수 있다.
상기 방법(200)은 상기 3D 디스플레이 상에서 디스플레이 깊이로 상기 2D 2차 비디오 신호(304)의 디스플레이를 위한 3D 디스플레이 신호를 제공하기 위해 "병합 단계" (단계 202)에서 상기 베이스 비디오 신호(302) 및 상기 보조 신호(303)와 상기 2D 2차 비디오 신호(304)를 병합하는 단계를 더 포함한다. 3D 디스플레이는 본질적으로 입력으로서 단일 3D 디스플레이 신호를 요구한다. 상기 병합 단계는 상기 2D 2차 비디오 신호(304)와 상기 3D 1차 비디오 신호(301)를 병합함으로써 상기 3D 디스플레이 신호를 제공한다.
상기 병합 단계는 상기 3D 1차 비디오 신호의 포맷에 크게 의존하여, 다양한 방식들로 발생할 수 있다. 예를 들면, 상기 3D 1차 비디오 신호(301)가 좌+우(스테레오) 비디오 신호이면, 병합의 가능한 방식은 상기 베이스 비디오 신호(302) 및 상기 보조 신호(303)의 픽셀 데이터를 상기 2D 1차 비디오 신호(304)의 픽셀 데이터로 교체함으로써 상기 베이스 비디오 신호(302) 및 상기 보조 신호(303) 모두에 상기 2D 1차 비디오 신호(304)를 병합하는 것이다.
상기 3D 1차 비디오 신호(301)가 2D+깊이 비디오 신호이면, 병합의 가능한 방식은 상기 베이스 비디오 신호(302)에 상기 2D 2차 비디오 신호(304)를 병합하는 것이며, 상기 2D 2차 비디오 신호(304)가 상기 베이스 비디오 신호(302)로 병합되는 위치들에서 미리 정해진 깊이 값으로 상기 보조 신호(303)를 설정하는 것이다. 유사하게는, 상기 3D 1차 비디오 신호(301)가 다중-뷰+깊이 비디오 신호이면, 상기 프로세스는 상기 2D 2차 비디오 신호(304)를 각각의 뷰로 병합하기 위해 베이스 비디오 신호(302) 및 보조 신호(303)의 각각의 쌍에 대해 반복되어야 한다.
상기 PiP 기능의 다양한 공간 구성들이 예로서, 나란히 또는 특정 크기 및 위치의 유입 윈도우(inlet window)와 같이 가능하다. 상기 유입 윈도우는 심지어 루마-키잉(luma-keying), 즉 비디오 구성의 분야로부터 알려진 바와 같이, 특정 범위의 밝기로 나뉘는 비디오 신호에서의 픽셀들을 교체하는 프로세스를 사용함으로써 임의의 임의적인 형상을 가질 수 있다. 그러므로, 상기 3D 1차 비디오 신호(301) 및 2D 2차 비디오 신호(304)의 요구된 공간 구성은 상기 병합 단계 동안 고려될 필요가 있다. 하나의 옵션은 상기 병합 단계가 사실상 예로서, 비디오 신호들 중 하나 또는 둘 모두를 리-사이징, 크롭핑(crop), 또는 이동시킴으로써 상기 공간 구성을 배열하는 것이다. 또 다른 옵션은 상기 공간 구성이 이미 배열된다는 것이며, 즉 비디오 신호들 둘 모두가 이미 리-사이징, 크롭핑 등이 되었다는 것이다. 이 경우에, 상기 병합의 단계는 상기 2D 2차 비디오 신호(304)의 픽셀들로 상기 3D 1차 비디오 신호(301)에서의 픽셀들을 교체하는 것에 제한될 수 있다.
상기 3D 1차 비디오 신호(301) 및 2D 2차 비디오 신호(304)의 '블렌드(blend)'를 생성하는 것이 보다 시각적으로 흥미로울 수 있다. 이를 위해, 비디오 신호들 둘 모두는 예로서, 비디오 합성의 분야로부터 알려진 바와 같이 알파 합성을 사용하여 서로 블렌딩될 수 있다. 알파 합성은 본질적으로 상기 PiP 기능을 위한 부분적 투명도의 외관을 생성하기 위해 비디오 신호들 둘 모두의 픽셀 값들의 가중 합계를 결정한다.
상기 3D 1차 비디오 신호(301) 및 2D 2차 비디오 신호(304)를 블렌딩할 때, 바람직하게는 상기 각각의 비디오 신호들의 깊이의 레벨이 고려된다. 이에 대하여, 여기에 참조로서 포함된 "알파의 존재시 깊이 신호 향상(Depth signal improvement in the presence of alpha)"로 명명된 아직 공개되지 않은 국제 출원 번호 제IB2009/054160호가 이미지+깊이 신호의 경우에 어떻게 이러한 블렌딩이 달성될 수 있는지를 설명한다.
도 6은 3D 디스플레이 상에서 3D 1차 비디오 신호(301) 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위한 3D 비디오 신호(300)를 도시한다. 상기 3D 1차 비디오 신호는 베이스 비디오 신호(302) 및 3D 디스플레이를 가능하게 하는 보조 신호(303)를 포함하며, 상기 3D 비디오 신호(300)는 상기 2차 비디오 신호로서 2D 2차 비디오 신호(304)를 포함한다. 그 결과, 상기 3D 비디오 신호(300)는 포맷팅된 형태로 상기 베이스 비디오 신호(302), 상기 보조 신호(303), 및 상기 2D 2차 비디오 신호(304)를 포함한다.
상기 3D 비디오 신호는 단일의 또는 다수의 전송 채널들을 통해 전송 또는 수신될 수 있거나, 또는 단일의 또는 다수의 정보 캐리어들 상에 저장될 수 있다. 상기 3D 비디오 신호(300)를 전송하기 위한 방법에서, 상기 3D 비디오 신호는 2D 2차 비디오 신호(304)인 상기 3D 비디오 신호의 2차 비디오 신호를 제공받으며, 상기 3D 비디오 신호는 전송 채널을 통해 전송된다.
도 7은 보조 스트림(312)과 다중화된 베이스 비디오 스트림(311)을 포함한 비디오 스트림(310)을 도시하며, 상기 베이스 비디오 스트림(311)은 포맷팅된 형태로 상기 베이스 비디오 신호(302)를 포함하며, 상기 보조 스트림(312)은 포맷팅된 형태로 상기 보조 신호(303)를 포함한다. 상기 비디오 스트림(310)은 또한 상기 베이스 비디오 스트림(311) 또는 상기 2차 스트림(312) 중 하나에 포함되는 상기 2D 2차 비디오 신호(304)를 포함한다.
도 8은 도 7의 상기 비디오 스트림(310)과 유사한 비디오 스트림(315)을 도시한다. 그러나, 상기 비디오 스트림(315)은 부가적으로 상기 베이스 비디오 스트림(311) 및 상기 보조 스트림(312)과 다중화된 2D 2차 비디오 스트림(313)을 포함한다. 도 7의 상기 비디오 스트림(310)과 반대로, 상기 2D 2차 비디오 신호(304)는 상기 베이스 비디오 스트림(311) 또는 상기 2차 스트림(312) 중 하나에 포함되는 대신에 별개의 2D 2차 비디오 스트림(313)에 포함된다.
도 9는 3D 비디오 신호(300)를 포함한 정보 캐리어(320)를 도시하며, 상기 3D 비디오 신호(300)는 예로서 1차 신호 성분(321) 및 2차 신호 성분(322)으로 분리된다. 상기 정보 캐리어(320)는 블루-레이 디스크, DVD 디스크, 하드 디스크 등과 같은 임의의 적절한 정보 캐리어일 수 있으며, 기록가능하지 않거나 또는 기록가능할 수 있다. 전자의 경우에, 상기 정보 캐리어(320)는 제조 동안에 상기 정보 캐리어 상에서 상기 3D 비디오 신호(300)를 물리적 마크들로 변환함으로써 상기 3D 비디오 신호(300)를 포함하도록 제조된다. 후자의 경우에, 상기 3D 비디오 신호(300)는 통상적으로 소비자 또는 콘텐트 생성자에 의해 상기 정보 캐리어(320)로 기록되며, 상기 기록 단계는 상기 정보 캐리어(320) 상에서 상기 3D 비디오 신호(300)를 물리적 마크들로 변환하는 단계를 포함한다. 상기 3D 비디오 신호는 또한 상기 보조 스트림(312)과 다중화된 상기 베이스 비디오 스트림(311)을 포함한 단일 비디오 스트림(310)일 수 있다. 상기 스트림들의 논리적 다중화는 상기 정보 캐리어(320) 상에서의 물리적 다중화를 초래한다. 유리하게는, 상기 물리적 다중화는 상기 판독 유닛의 물리적 재배치를 요구하지 않고 재생 디바이스의 판독 유닛으로 하여금 스트림들 모두를 판독할 수 있게 한다.
도 9에 도시된 1차 신호 성분(321)은 상기 베이스 비디오 신호(302)를 포함하며, 상기 2차 신호 성분(322)은 상기 2D 2차 비디오 신호(304)를 포함한다. 상기 베이스 비디오 신호(302) 및 상기 2D 2차 비디오 신호(304) 둘 모두는 신호 성분들 모두의 개별적 전송을 가능하게 하기 위해 포맷팅된다. 그 결과, 성분들 모두가 또한 정보 캐리어(320)의 두 개의 상이한 위치들에 저장될 수 있다. 상기 보조 신호(303)는 상기 1차 신호 성분(321) 또는 상기 2차 신호 성분(322)에 포함될 수 있지만, 또한 제 3 신호 성분에 포함될 수 있다. 이 경우에, 상기 보조 신호(303)는 상기 제 3 신호 성분의 개별적 전송을 가능하게 하기 위해 포맷팅된다. 유사하게는, 상기 1차 신호 성분(321)은 상기 2차 신호 성분(322)이 상기 보조 신호(303)를 포함하는 동안 상기 베이스 비디오 신호(302)를 포함할 수 있다. 이 경우에, 상기 2D 2차 비디오 신호(304)는 어느 하나의 신호 성분에 포함될 수 있다.
신호 성분들 모두의 개별적 저장 또는 전송을 가능하게 하기 위한 상기 포맷팅은 때때로 또한 다중화되지 않게 하는, 즉 소위 먹싱되지 않은, 저장 또는 전송을 가능하게 하는 것으로서 알려져 있다. 상기 3D 비디오 신호(300)의 재생 및 그에 따른 디스플레이 시, 재생 디바이스는 그 후 버퍼링 목적들을 위해, 먼저 상기 정보 캐리어(320)로부터 상기 2차 신호 성분(322)을 판독하고 로컬 저장 장치, 예로서 비-휘발성 메모리에 상기 신호 성분을 저장한다. 상기 재생 디바이스가 상기 정보 캐리어(320)로부터 두 개의 신호 성분들을 동시에 판독할 수 없다면 이러한 버퍼링이 요구될 수 있다.
후속하여, 상기 재생 디바이스는 3D 디스플레이 상에 상기 3D 1차 비디오 신호(301) 및 상기 2D 2차 비디오 신호(304)의 동시 재생을 제공하기 위해 상기 로컬 저장장치로부터 상기 2차 신호 성분(322)을 판독하는 것과 동시에 상기 정보 캐리어(320)로부터 상기 1차 신호 성분(321)을 판독할 수 있다. 대안적으로, 두 개의 성분들 중 하나가 또한 예로서, 상기 3D 비디오 신호(300)의 재생 동안 인터넷으로부터 직접 스트리밍될 수 있거나, 또는 먼저 상기 인터넷으로부터 다운로드되고 상기 로컬 저장장치에서 버퍼링될 수 있다.
실제 예에서, 상기 3D 비디오 신호(300)는 소비자가 상기 1차 신호 성분(321)을 포함하는 블루-레이 디스크를 구매하게 할 수 있으며, 상기 1차 신호 성분(321)은 상기 베이스 비디오 신호(302)로서 영화의 2D 비디오 신호를 포함한다. 상기 사용자는 그 후 가능하게는 온라인 납부 후, 상기 보조 신호(303) 및 상기 2D 2차 비디오 신호(304)를 포함하는 상기 2차 신호 성분(322)을 인터넷으로부터 다운로드할 수 있다. 이와 같이, 상기 다운로딩된 2차 신호 성분(322)은 상기 블루-레이 디스크 상에 포함된 상기 영화의 3D 및 PiP 기능을 2D로 가능하게 한다.
도 10은 3D 비디오 신호(300)를 생성하기 위한 신호 생성 디바이스(350)의 블록도이다. 상기 디바이스는 상기 2차 비디오 신호로서 2D 2차 비디오 신호(304)를 제공하기 위한 제공 수단(351)을 포함한다. 제 1 변형에서, 상기 제공 수단(351)은 외부 소스로부터 상기 2D 2차 비디오 신호(304)를 수신하기 위한 수신기일 수 있다. 그러나, 상기 제공 수단(351)은 또한 3D 2차 비디오 신호를 수신하기 위한 수신기일 수 있으며, 또한 상기 3D 2차 비디오 신호를 상기 2D 2차 비디오 신호(304)로 변환하도록 구성될 수 있다. 더욱이, 상기 디바이스는 상기 3D 비디오 신호(300)를 생성하기 위해 상기 베이스 비디오 신호(302), 상기 보조 신호(303) 및 상기 2D 2차 비디오 신호(304)를 포맷팅하기 위한 포맷팅 유닛(352)을 포함한다.
도 11은 3D 디스플레이 신호(403)를 생성하기 위해 3D 비디오 신호(300)를 처리하기 위한 신호 처리 디바이스(400)의 블록도이다. 상기 디바이스는 상기 3D 비디오 신호(300)로부터 상기 베이스 비디오 신호(302), 상기 보조 신호(303) 및 상기 2D 2차 비디오 신호(304)를 디-포맷팅하기 위한 디-포맷팅 유닛(401)을 포함한다. 상기 디바이스는 상기 3D 디스플레이 상에서의 디스플레이 깊이로 상기 2D 2차 비디오 신호(304)의 디스플레이를 위한 3D 디스플레이 신호(403)를 제공하기 위해 상기 베이스 비디오 신호(302) 및 상기 보조 신호(303)와 상기 2D 2차 비디오 신호(304)를 병합하기 위한 병합 유닛(402)을 더 포함한다. 이를 위해, 상기 3D 디스플레이 신호(403)는 직접 상기 3D 디스플레이로 전송될 수 있거나, 또는 먼저 예로서 비디오 향상 또는 포맷 변환을 위해, 상기 3D 디스플레이로 전송되기 전에 부가적인 신호 처리 디바이스에 의해 추가 처리될 수 있다.
도 12는 3D 디스플레이 신호(403)를 생성하기 위해 비디오 스트림(310)을 처리하기 위한 신호 처리 디바이스(410)의 블록도이다. 상기 디바이스는 상기 비디오 스트림(310)으로부터 상기 베이스 비디오 스트림(311) 및 상기 보조 스트림(312)을 역다중화하기 위한 역다중화 유닛(411)을 포함한다. 상기 디바이스는 상기 베이스 비디오 스트림(311)으로부터 상기 베이스 비디오 신호(302)를 디-포맷팅하고, 상기 보조 스트림(312)으로부터 상기 보조 신호(303)를 디-포맷팅하며, 상기 비디오 스트림(310)으로부터 상기 2D 2차 비디오 신호(304)를 추출하도록 구성되는 디-포맷팅 유닛(412)을 더 포함한다.
상기 추출 단계는 본질적으로 도 2에 서술된 상기 방법(110)의 "상기 2D 2차 비디오 신호를 포함시키는" 단계와 같이 역 프로세스이다. 그러므로, 상기 2D 2차 비디오 신호(304)가 상기 비디오 스트림(310)에 포함되는 방식에 의존하여, 다양한 옵션들이 상기 신호를 추출하기 위해 존재한다. 예를 들면, 상기 베이스 비디오 스트림(311) 및 상기 보조 스트림(312) 모두가 상기 2D 2차 비디오 신호(304)를 포함하지 않는다면, 상기 디-포맷팅 유닛(412)은 상기 비디오 스트림으로부터 직접 상기 2D 2차 비디오 신호를 추출하도록 구성될 수 있다. 이것은 점선으로 도 12에 표시된다.
상기 베이스 비디오 스트림(311)은 포맷팅된 형태로, 상기 2D 2차 비디오 신호(304)와 다중화된 상기 베이스 비디오 신호(302)를 포함하는 것이 또한 가능하다. 이 경우에, 상기 디-포맷팅 유닛(412)은 또한 상기 베이스 비디오 스트림(311)으로부터 상기 베이스 비디오 신호(302) 및 상기 2D 2차 비디오 신호(304)를 역다중화하도록 구성된다. 또 다른 가능성은 상기 보조 스트림(312)이 포맷팅된 형태로 상기 2D 2차 비디오 신호(304)와 다중화된 상기 보조 신호(303)를 포함한다는 것이다. 이 경우에, 상기 디-포맷팅 유닛(412)은 또한 상기 보조 스트림(312)으로부터 상기 보조 신호(303) 및 상기 2D 2차 비디오 신호(304)를 역다중화하도록 구성된다. 마지막으로, 상기 디바이스는 도 11에 서술된 것과 동일한 병합 유닛(402)을 포함한다.
도 13은 3D 디스플레이 신호(403)를 생성하기 위해 2D 2차 비디오 스트림(313)을 포함한 비디오 스트림(315)을 처리하기 위한 신호 처리 디바이스(420)의 블록도이다. 상기 비디오 스트림(315)은 상기 베이스 비디오 스트림(311) 및 상기 보조 스트림(312)과 다중화된 2D 2차 비디오 스트림(313)을 포함한다. 그러므로 상기 디바이스는 도 12에 도시된 상기 역다중화 유닛(411)과 유사한 역다중화 유닛(421)을 포함하지만, 또한 상기 비디오 스트림(315)으로부터 상기 2D 2차 비디오 스트림(313)을 역다중화하도록 구성된다. 더욱이, 상기 디-포맷팅 유닛(422)은 도 12에 도시된 상기 디-포맷팅 유닛(412)과 유사하지만, 또한 상기 2D 2차 비디오 스트림(313)으로부터 상기 2D 2차 비디오 신호(304)를 디-포맷팅하도록 구성된다. 마지막으로, 상기 디바이스는 도 11에 서술된 것과 동일한 병합 유닛(402)을 포함한다.
도 14는 오프셋 값(501)을 포함한 3D 비디오 신호(500)를 도시한다. 상기 3D 비디오 신호(500)는 도 6에 도시된 상기 3D 비디오 신호(300)와 유사하지만, 부가적으로 상기 3D 디스플레이 상에 상기 2D 2차 비디오 신호(304)의 디스플레이 깊이를 나타내는 상기 오프셋 값(501)을 포함한다. 상기 오프셋 값(501)이 블루-레이 디스크 상에 포함되는 상기 3D 비디오 신호(500)의 다음 예에 의해 도시된 바와 같이, 상기 3D 비디오 신호(500)에 포함될 수 있는 다양한 방식들이 존재한다. 여기에서, 상기 베이스 비디오 신호(302), 상기 보조 신호(303), 상기 2D 2차 비디오 신호(304) 및 상기 오프셋 값(501)은 그것들이 상기 블루-레이 디스크 규격의 버전에 따르도록 포맷팅된다.
이 예에서, 상기 2D 2차 비디오 신호는 소위 PiP 기본 스트림으로 포맷팅된다. 상기 블루-레이 디스크는 그것이 PiP 기능을 포함한 2D 블루-레이 디스크 상에 있는 것과 동일한 데이터 구조로 저장된 2차 비디오 스트림을 더 포함하며, 즉, 그것의 소위 'STN_table'에 리스트된 상기 PiP 기본 스트림을 갖는 재생아이템(playitem)에서의 서브경로(subpath)로서 리스트된다. 이러한 문맥에서, 재생아이템은 본질적으로, 재생-리스트이며, 상기 재생 아이템에서의 서브 경로는 본질적으로 부가적인 성분들에 대한 참조이고, 상기 'STN_table'은 상기 재생 아이템의 프리젠테이션 동안 선택될 수 있는 상기 기본 스트림들 모두를 리스트하는 테이블이다. 상기 2D 2차 비디오 신호(304)는 또한 먹싱에서 벗어나(out-of-control), 로컬 저장 장치상에 저장되며, 상기 3D 1차 비디오 신호(301)와 동기적으로 또는 비동기적으로 제공되도록 포맷팅될 수 있다. 물론, 이들 옵션들의 조합들이 또한 가능하다.
상기 오프셋 값(501)은 다양한 방식들로 상기 블루-레이 디스크 상에 포함될 수 있다. 예를 들면, 상기 오프셋 값(501)은 상기 2차 비디오 스트림을 위한 메타 데이터, 즉, 상기 2차 비디오 메타데이터에 포함될 수 있다. 이를 위해, 상기 2차 비디오 메타데이터는 상기 서브경로가 먹싱 중이거나(in-mux) 또는 먹싱에서 벗어난 (비)동기식 PiP 스트림을 포함한 기본 스트림이라는 것을 표시하는 새로운 서브경로 유형들을 정의할 수 있다. 더욱이, 상기 오프셋 값(501)을 포함하는 오프셋 메타데이터는 서브-재생아이템에서의 예약 필드에 내장될 수 있다.
상기 오프셋 값(501)은 또한 상기 PiP 기본 스트림을 위한 메타데이터, 즉 상기 PiP 메타데이터에 포함될 수 있다. 상기 PiP 메타데이터는 상기 프레임에 상기 PiP를 배치하기 위한 곳을 정의한다. 이들 위치 파라미터들은 그 후 'PiP_오프셋(PiP_offset)' 값 식별자 및 상기 오프셋이 상기 PiP 앞으로 이동하는, 즉 상기 3D 디스플레이 밖으로 돌출하거나 또는 상기 PiP 뒤로 이동하는, 즉 상기 3D 디스플레이 안으로 들어감으로써 적용되어야 하는지 여부를 나타내는 'PiP_오프셋_방향(PiP_offset_direction)'을 갖고 아래의 테이블에 도시되는 바와 같이 확장될 수 있다.
Figure 112012055680102-pct00001
상기 PiP의 오프셋 메타데이터는 또한 연관된 오프셋 파라미터 값을 가지는 추가 2D 비디오 스트림들을 리스트하는 새롭게 정의된 테이블에서의 재생 리스트에 확장 데이터로서 부가될 수 있다. 더욱이, 상기 오프셋 데이터는 프레임-정밀할 수 있으며, 즉 오프셋 값(501)은 상기 2D 2차 비디오 신호(304)의 특정 프레임을 위해 제공된다. 이러한 경우에, 3D 비디오 신호는 예로서, 오프셋 값 스트림으로 포맷팅된 다수의 오프셋 값들(501)을 포함할 수 있다.
상기에 대한 바람직한 대안에 있어서, 상기 오프셋 값(501)은 다음 정보에 의해 3D 모드에서의 블루-레이 재생 디바이스에 의해 사용된 재생리스트의 STN_table을 확장시킴으로써 제공된다.
Figure 112012055680102-pct00002
상기 테이블에서, 'PiP_offset_sequence_id_ref' 필드는 오프셋 값들의 스트림을 참조하기 위한 식별자를 특정한다. 바람직하게는, 오프셋 값들의 이러한 스트림은 GOP 당 하나씩, MVC SEI 메시지들에서의 테이블로서 전달된다. 이러한 문맥에서, MVC는 멀티뷰 코딩된 것을 나타내고, SEI는 부가적인 강화 정보를 나타내며, GOP는 화상들의 그룹(Group-of-Pictures)을 나타낸다. 상기 오프셋 값들의 해석은 또한 소위 'plane_offset_value' 및 'plane_offset_direction'에 의존한다. 더욱이, 상기 'PiP_Full_Screen_offset_sequence_if_ref' 필드는 상기 PiP 스케일링 인자가 풀 스크린으로 설정될 때를 위한 오프셋 값들의 스트림을 참조하기 위한 식별자를 특정한다.
더욱이, 상기 오프셋 값(501), 또는 오프셋 값들의 스트림은 상기 보조 스트림(312)에서, 또는 상기 2D 2차 비디오 스트림(313)에서 SEI 메시지로 운반될 수 있다. 따라서, 3D 비디오 신호를 생성하기 위한 방법, 예로서, 도 4에 도시된 방법은 상기 보조 스트림(312) 및/또는 상기 2D 2차 비디오 스트림(313)에 부가적인 강화 정보 메시지에 상기 3D 비디오 신호(500)에서의 오프셋 값들의 스트림을 포함시키는 단계를 포함할 수 있다.
또한, 상기 오프셋 값(501)은 상기 비디오 스트림에서의 SEI 메시지 내에 저장되는 예로서 그래픽스 오프셋 값들에 대한 상대적인 오프셋 값일 수 있다. 따라서, 상기 상대적인 오프셋 값과 결합된 상기 그래픽스 오프셋 값은 상기 2D 2차 비디오 신호를 위한 절대 오프셋 값을 결정한다.
도 15는 상기 3D 비디오 신호(500)에 포함된 오프셋 값(501)을 사용하도록 구성된 신호 처리 디바이스(510)의 블록도이다. 상기 디바이스는 도 11의 상기 디-포맷팅 유닛(401)과 유사한 디-포맷팅 유닛(511)을 포함하며, 단지 차이는 상기 디-포맷팅 유닛(511)이 도 6의 상기 3D 비디오 신호(300)라기보다는 입력으로서 도 14의 상기 3D 비디오 신호(500)를 수용한다는 것이다. 상기 디바이스는 도 11에 도시된 상기 병합 유닛(402)과 유사한 병합 유닛(512)을 또한 포함하며, 차이는 상기 병합 유닛(512)이 또한 상기 오프셋 값(501)에 의존하여, 상기 베이스 비디오 신호(302) 및 상기 보조 신호(303)와 상기 2D 2차 비디오 신호를 병합하도록 구성된다는 것이다.
상기 오프셋 값(501)에 의존하여 상기 신호들을 병합함으로써, 상기 3D 디스플레이 상에서의 상기 2D 2차 비디오 신호(304)의 디스플레이 깊이의 제어가 가능해진다. 예를 들면, 상기 3D 1차 비디오 신호(301)가 좌+우(스테레오) 비디오 신호라면, 상기 2D 2차 비디오 신호(304)의 디스플레이 깊이는 좌측으로 상기 오프셋 값 반 만큼 시프트된 상기 2D 2차 비디오 신호(304)를 상기 베이스 비디오 신호(302)로 병합함으로써 제어될 수 있으며, 상기 베이스 비디오 신호는 상기 좌측 비디오 신호이다. 더욱이, 우측으로 상기 오프셋 값 반만큼 시프트된 상기 2차 비디오 신호(304)는 상기 보조 신호(303)로 병합되며, 상기 보조 신호는 상기 우측 비디오 신호이다. 병합의 상기 예는 상기 오프셋 값(501)을 상기 병합 유닛(412)에 포함하는 것이 메모리 포인터들의 조작에 의해 실현될 수 있기 때문에, 계산 효율성에 대하여 특히 유리하다.
상기 3D 1차 비디오 신호(301)가 2D+깊이 비디오 신호이면, 상기 3D 디스플레이 상에서의 상기 2D 2차 비디오 신호의 디스플레이 깊이를 제어하는 가능한 방법은 상기 2D 2차 비디오 신호(304)가 상기 베이스 비디오 신호(302)로 병합되는 위치에서 상기 오프셋 값(501)에 의해 표시된 바와 같이 상기 보조 신호(303)를 깊이 값으로 설정하는 것에 의한다. 상기 예에서, 상기 베이스 비디오 신호는 상기 2D 비디오 신호이며, 상기 보조 신호는 상기 깊이 신호이다. 유사하게는, 상기 3D 1차 비디오 신호(301)가 다중-뷰+깊이 비디오 신호이면, 상기 2D 2차 비디오 신호(304)는 상기 오프셋 값(501) 및 시야각에 독립하여 시프트되는 동안 상기 베이스 비디오 신호들(302)의 각각으로 병합되며, 즉 극좌측 뷰들에 대해, 상기 2D 2차 비디오(304)가 상기 우측으로 비교적 큰 시프트를 가지는 반면, 상기 극우측 뷰들에 대해, 그것은 상기 좌측으로 비교적 큰 시트프를 가진다. 더욱이, 상기 보조 신호들(303)의 각각은 상기 2D 2차 비디오 신호(304)가 상기 보조 신호(303)에 대응하는 상기 베이스 비디오 신호(302)로 병합되는 위치에서 상기 오프셋 값(501)에 의해 표시되는 바와 같이 깊이 값으로 설정되어야 한다.
도 14에 도시된 상기 3D 비디오 신호(500)는 그래픽스 신호(502)를 더 포함한다. 상기 그래픽스 신호(502)는 상기 시청자에게 시각적 정보를 제공하기 위해 포함될 수 있다. 특히 상기 그래픽스 신호가 2D 그래픽스 신호이면, 상기 오프셋 값(501)은 상기 그래픽스 신호(502)의 디스플레이 깊이를 나타낼 의도로 상기 3D 비디오 신호(500)에 제공될 수 있다. 그러므로 이러한 오프셋 값은 또한, 특히 유사한 디스플레이 깊이로 상기 그래픽스 신호(502) 및 상기 2D 2차 비디오 신호(304)들 모두를 디스플레이하는 것이 시청자에게 시각적으로 즐거움을 줄 수 있기 때문에, 상기 2D 2차 비디오 신호(304)의 디스플레이 깊이에 대한 표시로서 사용될 수 있다. 몇몇 경우들에서, 그것은 또한 상기 신호들을 명확하게 구별하는 것이 바람직할 수 있으며; 상기 그래픽스 신호(502)의 상기 오프셋 값(501)은 그 후 상기 2D 2차 비디오 신호(304)의 명확하게 다른 디스플레이 깊이를 결정하기 위해 사용될 수 있다.
상기 2D 2차 비디오 신호(304)는 또한 디스플레이를 위해 의도된 메타데이터, 예로서 자막들을 제공받을 수 있다. 이러한 경우에, 상기 병합 유닛(512)은 또한 상기 오프셋 값(501)에 의존하여 상기 자막들을 추가 병합하도록 구성되며, 따라서 상기 2D 2차 비디오 신호(304) 및 대응하는 자막들은 상기 3D 디스플레이 상에 유사한 디스플레이 깊이로 디스플레이된다. 또한, 상기 오프셋 값(501)은 상기 3D 비디오 신호(500)에 포함되지 않을 수 있거나, 시청자가 상기 디스플레이 깊이를 수동으로 제어하는 것을 선호할 수 있다. 이러한 경우에, 상기 신호 처리 디바이스(510)는 상기 오프셋 값(501)을 수신하기 위한 수신 수단을 부가적으로 제공받을 수 있다. 상기 수신 수단은 재생 제어 프로그램으로부터 상기 오프셋 값(501)을 수신할 수 있거나, 또는 예로서, 사용자 인터페이스 또는 원격 제어를 사용하여 상기 시청자로부터 상기 오프셋 값(501)을 수신할 수 있다.
도 16은 상기 3D 디스플레이 신호(403)를 디스플레이하기 위한 상기 3D 디스플레이(601), 방송(603)으로부터 상기 3D 비디오 신호(300)를 수신하기 위한 방송 수신기(602), 인터넷(605)으로부터 상기 3D 비디오 신호(300)를 수신하기 위한 인터넷 수신기(604) 또는 정보 캐리어(607)로부터 상기 3D 비디오 신호(300)를 판독하기 위한 판독기(606)의 임의의 조합을 포함하는 신호 처리 디바이스(600)의 블록도이다.
상기 신호 처리 디바이스(600)는 임의의 유형의 3D 또는 2D 디스플레이를 구비할 수 있는 예로서 텔레비전, 모니터 등일 수 있다. 예를 들면, 상기 신호 처리 디바이스(600)는 오토-스테레오스코픽 3D 텔레비전일 수 있고, 상기 3D 디스플레이는 렌즈-기반 다중-뷰 3D 디스플레이일 수 있으며, 상기 디바이스는 상기 3D 디스플레이(501)에 대한 입력을 위해 요구된 3D 디스플레이 신호(403)를 생성할 수 있다. 상기 신호 처리 디바이스(600)는 또한 예로서, 블루-레이 플레이어, 블루-레이 레코더, 셋탑 박스, 개인용 컴퓨터, 하드디스크 레코더 등일 수 있으며, 이 경우에, 상기 디바이스는 통상적으로 상기 3D 디스플레이(601)를 제공받지 않는다. 더욱이, 상기 디바이스는 다음 중 단지 하나 또는 둘만을 제공받을 수 있다: 상기 방송 수신기(602), 상기 인터넷 수신기(604) 또는 판독기(606).
상기 방송 수신기(602)는 예로서, 지상파, 위성 또는 케이블 방송들을 수신하기 위한 임의의 적절한 유형일 수 있다. 상기 인터넷 수신기(604)는 또한 임의의 적절한 유형일 수 있으며, 예로서, ADSL, 이더넷, WLAN, UMTS 등에 의해 요구된 바와 같은 모뎀 기능을 포함할 수 있거나, 또는 인터페이스 프로토콜, 예로서, TCP/IP일 수 있다. 상기 판독기(606)는 정보 캐리어(607)로부터 3D 비디오 신호를 판독하기 위한 임의의 적절한 유형일 수 있으며, 상기 정보 캐리어(607)는 임의의 적절한 유형, 예로서, 블루-레이, DVD, 플래시-메모리, ROM, RAM 등이다.
명료함을 위한 상기 설명은 상이한 기능 유닛들을 참조하여 본 발명의 실시예들을 설명하였음이 이해될 것이다. 그러나, 상이한 기능 유닛들 또는 프로세서들 간의 기능의 임의의 적절한 분배는 본 발명을 손상시키지 않고 사용될 수 있다는 것이 명백할 것이다. 예를 들면, 별개의 프로세서들 또는 제어기들에 의해 수행되는 것으로 도시된 기능은 동일한 프로세서 또는 제어기들에 의해 수행될 수 있다. 그러므로, 특정 기능 유닛들에 대한 참조들은 단지 엄격한 논리적 또는 물리적 구조 또는 조직을 나타내기보다는 설명된 기능을 제공하기 위한 적절한 수단에 대한 참조들로서 이해될 것이다.
본 발명은 하드웨어, 소프트웨어, 펌웨어 또는 그것들의 임의의 조합을 포함한 임의의 적절한 형태로 구현될 수 있다. 본 발명은 선택적으로 하나 이상의 데이터 프로세서들 및/또는 디지털 신호 프로세서들 상에서 구동하는 컴퓨터 소프트웨어로서 적어도 부분적으로 구현될 수 있다. 본 발명의 일 실시예의 요소들 및 구성요소들은 임의의 적절한 방식으로 물리적으로, 기능적으로 및 논리적으로 구현될 수 있다. 실제로, 상기 기능은 단일 유닛으로, 복수의 유닛들로 또는 다른 기능 유닛들의 적어도 일부로서 구현될 수 있다. 이와 같이, 본 발명은 단일 유닛으로 구현될 수 있거나 또는 상이한 유닛들 및 프로세서들 간에 물리적으로 및 기능적으로 분배될 수 있다.
3D 스테레오 비디오 신호는 예로서, 상기 3D 1차 비디오 신호의 해상도의 1/4로 스케일링될 때, 이러한 스케일링된 3D 스테레오 비디오 신호가 제공하는 싶이 인상은 통상적으로 또한 축소된다는 것이 주의된다. 이것은 한편으로, 디스패리티 값들; 즉 상기 스케일링된 3D 스테레오 비디오 신호의 좌측 및 우측 이미지들 간의 분명한 변위들이 비례적으로 축소된다는 사실의 결과이다. 그러나, 다른 한편으로, 이러한 스케일링의 영향은 깊이가 디스패리티에 반비례하는 것으로서 강조된다. 그 결과, 스케일링은 상기 깊이 인상에 대한 확연한 효과를 가질 수 있다. 따라서, 상기 2차 비디오 신호가 상기 3D 1차 비디오 신호의 것보다 낮은 해상도로 이용가능할 때 2D 2차 비디오 신호로서 2차 비디오 신호를 저장하는 것이 특히 유리할 수 있다. 후자는 특히 상기 2D 2차 비디오 신호가 상기 3D 1차 비디오 신호의 해상도의 1/4 이하로 저장될 때 지속된다.
본 발명은 상기 2D 2차 비디오 신호의 적어도 둘, 셋 이상의 면들이 상기 3D 1차 비디오 신호에 인접하고, 또한 화상 내 화상과 관련되는 실제 화상 내 화상과 같은 다양한 PiP 구현들을 갖고 사용될 수 있다. 인코딩된 오프셋과 조합하여, 본 발명은 화상 내 화상을 구현하기 위해 특히 유리하며, 상기 2D 2차 비디오 신호는 상기 3D 1차 비디오 신호 내에 디스플레이되고 상기 3D 1차 비디오 신호에 인접한 상기 2D 2차 비디오 신호의 적어도 두 개의 면들을 가진다. 후자는 특히 상기 화상 내 화상이 구속받지 않는 경계들과 같이, 불규칙적인 형상의 경계들을 사용하여 구현될 때 특히 참(true)을 유지한다. 이러한 애플리케이션들에서, 상기 깊이 방향에서의 오프셋은 상기 2D 2차 비디오 신호가 깊이 방향의 적절한 위치에 위치되게 한다는 점에서 오프셋이 없는 상황들에 이점을 제공하는데 도움을 줄 수 있다.
오프셋을 부가하는 유연성은 상기 3D 1차 비디오 신호에 관하여 상기 2D 2차 신호의 보다 유연한 깊이 방향의 위치 결정을 가능하게 한다. 이러한 유연성은 예로서, 기술적으로 유리한 위치들에서의 위치 결정을 가능하게 한다:
- 상기 3D 1차 비디오의 앞에; 또는 적어도 직접 인접하여 상기 3D 비디오의 앞에(즉, (x,y) 공간 인접성으로), 따라서 보다 자연스러운 보기를 제공하며; 즉 상기 3D 1차 비디오를 가리는 상기 2D 2차는 사실상 상기 3D 1차 비디오의 앞에 위치된다.
- 상기 3D 1차 비디오 신호에서의 초점의 깊이에 가깝게, 따라서 상기 시청자들이 상기 3D 1차 비디오 신호를 시청하는 것으로부터 상기 2D 2차 비디오 신호를 시청하는 것으로 스위칭하는 것을 용이하게 한다,
- 제로 디스패리티 평면에 가깝게, 따라서 최대 선명도를 제공하며, 및/또는
- 예로서, 콘텐트의 저자, 및/또는 상기 콘텐트의 예술 감독에 의해 결정된 바와 같이, 미학적으로 기분 좋은 위치.
적절한 오프셋 제어를 제공함으로써, 상기 접근법들 중 임의의 것이 조합될 수 있다. 오프셋 제어는 상이한 레벨들의 입도로 제공될 수 있다. 예를 들면, 오프셋 제어는 프레임 기반으로 제공될 수 있으며; 그에 의해 예로서, 상기 3D 1차 비디오 신호의 깊이에서의 변화들과 같이, 상기 3D 1차 비디오 신호에서의 다이나믹스들을 보상하기 위해, 상기 2D 2차 비디오 신호의 적응적 배치를 허용한다. 그러나, 이러한 경우에; 시간적 연속성이 관련있으며 변화의 양은 바람직하게는 상기 3D 1차 비디오 신호에 의존할 수 있지만, 그럴 필요는 없는 임계값 아래로 유지된다.
대안적으로, 상기 오프셋 제어는 보다 효율적인 인코딩을 제공하기 위해, 화상들의 그룹 기반으로와 같이, 보다 높은 입도로 제어될 수 있으며, 상기 입도는 바람직하게는 기본적인 비디오 압축 표준의 것에 대응한다. 보다 대안적으로, 상기 오프셋 제어는 샷 기반으로와 같이, 훨씬 더 높은 레벨로 제어될 수 있으며, 그에 의해 상기 비디오 신호들의 저작(authoring) 동안 오프셋 생성을 용이하게 하고 또한 보다 효율적인 인코딩을 제공한다. 비록 본 발명은 몇몇 실시예들과 관련되어 설명되지만, 그것은 여기에 설명된 특성 형태로 제한되는 것으로 의도되지 않는다. 오히려, 본 발명의 범위는 단지 첨부한 청구항들에 의해서만 제한된다. 부가적으로, 특징이 특정 실시예들과 관련되어 설명되는 것처럼 보일 수 있지만, 이 기술분야의 숙련자들은 상기 설명된 실시예들의 다양한 특징들이 본 발명에 따라 조합될 수 있다는 것을 인지할 것이다. 청구항들에서, 용어 '포함하는'은 다른 요소들 또는 단계들의 존재를 배제하지 않는다.
더욱이, 개별적으로 열거되었지만, 복수의 수단들, 요소들 또는 방법 단계들은 예로서, 단일 유닛 또는 프로세서에 의해 구현될 수 있다. 부가적으로, 개별적인 특징들이 상이한 청구항들에 포함될 수 있지만, 이것들은 가능하게는 유리하게 조합될 수 있고, 상이한 청구항들에서의 포함은 특징들이 조합이 실현 가능하고 및/또는 유리하지 않음을 내포하지 않는다. 청구항들의 하나의 카테고리에서의 특징의 포함은 이러한 카테고리에 대한 제한을 내포하지 않으며, 오히려 상기 특징이 다른 청구항 카테고리들에 적절하게 동일하게 적용가능하다는 것을 나타낸다. 더욱이, 상기 청구항들에서의 특징들의 순서는 상기 특징들이 동작되어야 하는 임의의 특정 순서를 의미하지 않으며, 특히 방법 청구항에서의 개별 단계들의 순서는 상기 단계들이 이러한 순서로 수행되어야 한다는 것을 내포하지 않는다. 오히려, 상기 단계들은 임의의 적절한 순서로 수행될 수 있다. 또한, 단수형 참조는 복수를 배제하지 않는다. 따라서, 부정관사("a", "an"), "제 1", "제 2" 등은 복수를 배제하지 않는다. 상기 청구항들에서의 참조 부호들은 단지 예를 명확히 하는 것으로서 제공되며, 임의의 방식으로 상기 청구항들의 범위를 제한하는 것으로서 해석되어서는 안된다.
300 : 3D 비디오 신호 301 : 3D 1차 비디오 신호
302 : 베이스 비디오 신호 303 : 보조 신호
304 : 2D 2차 비디오 신호 310 : 비디오 스트림
311 : 베이스 비디오 스트림 312 : 보조 스트림
313 : 2D 2차 비디오 스트림 315 : 비디오 스트림
320 : 정보 캐리어 321 : 1차 신호 성분
322 : 2차 신호 성분 400 : 신호 처리 디바이스
401 : 디-포맷팅 유닛 402 : 병합 유닛
403 : 3D 디스플레이 신호 410 : 신호 처리 디바이스
411 : 역다중화 유닛 412 : 디-포맷팅 유닛
500 : 3D 비디오 신호 501 : 오프셋 값
510 : 신호 처리 디바이스 511 : 디-포맷팅 유닛
512 : 병합 유닛 600 : 신호 처리 디바이스
601 : 3D 디스플레이 602 : 방송 수신기
603 : 방송 604 : 인터넷 수신기
605 : 인터넷 606 : 판독기
607 : 정보 캐리어

Claims (21)

  1. 3D 디스플레이 상에 3D 1차 비디오 신호 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위해 3D 비디오 신호를 생성하기 위한 방법으로서, 상기 3D 1차 비디오 신호는 베이스 비디오 신호 및 3D 디스플레이를 가능하게 하는 보조 신호를 포함하며, 상기 3D 비디오 신호는 다중화된 형태의 비디오 스트림인, 상기 3D 비디오 신호 생성 방법에 있어서,
    - 상기 2차 비디오 신호로서 2D 2차 비디오 신호를 제공하는 단계;
    - 베이스 비디오 스트림을 생성하기 위해 상기 베이스 비디오 신호를 포맷팅하는 단계;
    - 보조 스트림을 생성하기 위해 상기 보조 신호를 포맷팅하는 단계;
    - 상기 비디오 스트림을 생성하기 위해 상기 보조 스트림과 상기 베이스 비디오 스트림을 다중화하는 단계; 및
    - 상기 비디오 스트림에 상기 2D 2차 비디오 신호를 포함시키는 단계를 포함하고,
    상기 방법은 2D 2차 비디오 스트림을 생성하기 위해 상기 2D 2차 비디오 신호를 포맷팅하는 단계를 더 포함하고, 상기 다중화 단계는 상기 2D 2차 비디오 신호를 상기 비디오 스트림에 포함시키기 위해 상기 베이스 비디오 스트림 및 상기 보조 스트림과 상기 2D 2차 비디오 스트림을 다중화하는 단계를 포함하는, 3D 비디오 신호 생성 방법.
  2. 제 1 항에 있어서,
    상기 베이스 비디오 신호를 포맷팅하는 단계는 상기 베이스 비디오 스트림에 상기 2D 2차 비디오 신호를 포함시키기 위해 상기 2D 2차 비디오 신호와 상기 베이스 비디오 신호를 다중화하는 단계를 포함하는, 3D 비디오 신호 생성 방법.
  3. 제 1 항에 있어서,
    상기 보조 신호를 포맷팅하는 단계는 상기 보조 스트림에 상기 2D 2차 비디오 신호를 포함시키기 위해 상기 2D 2차 비디오 신호와 상기 보조 신호를 다중화하는 단계를 포함하는, 3D 비디오 신호 생성 방법.
  4. 삭제
  5. 제 1 항에 있어서,
    상기 방법은 상기 3D 비디오 신호에 오프셋 값을 포함시키는 단계를 추가로 포함하며, 상기 오프셋 값은 상기 3D 디스플레이 상에 상기 2D 2차 비디오 신호의 디스플레이 깊이를 나타내는, 3D 비디오 신호 생성 방법.
  6. 제 5 항에 있어서,
    상기 2D 2차 비디오 신호는 3D 2차 비디오 신호로부터 도출되며, 상기 방법은 상기 3D 2차 비디오 신호의 깊이에 의존하여 상기 오프셋 값을 결정하는 단계를 추가로 포함하는, 3D 비디오 신호 생성 방법.
  7. 제 5 항에 있어서,
    상기 오프셋 값은 오프셋 값들의 스트림 중 하나이며, 상기 방법은 부가적인 강화 정보 메시지에서의 상기 3D 비디오 신호에 상기 오프셋 값들의 스트림을 포함시키는 단계를 추가로 포함하는, 3D 비디오 신호 생성 방법.
  8. 3D 디스플레이 상에 3D 1차 비디오 신호 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위해 제 1 항의 방법에 의해 생성된 3D 비디오 신호를 처리하기 위한 방법으로서, 상기 3D 1차 비디오 신호는 베이스 비디오 신호 및 3D 디스플레이를 가능하게 하는 보조 신호를 포함하고, 상기 3D 비디오 신호는 상기 2차 비디오 신호로서 2D 2차 비디오 신호를 포함하고, 상기 3D 비디오 신호는 다중화된 형태의 비디오 스트림이고, 상기 비디오 스트림은 상기 2D 2차 비디오 신호를 포함하며, 보조 스트림 및 2D 2차 비디오 스트림과 다중화된 베이스 비디오 스트림을 포함하고, 상기 베이스 비디오 스트림은 포맷팅된 형태로 상기 베이스 비디오 신호를 포함하고, 상기 보조 스트림은 포맷팅된 형태로 상기 보조 신호를 포함하고, 상기 2D 2차 비디오 스트림은 포맷팅된 형태로 상기 2D 2차 비디오 신호를 포함하는, 상기 3D 비디오 신호 처리 방법에 있어서,
    - 상기 비디오 스트림으로부터 상기 2D 2차 비디오 신호를 추출하는 단계;
    - 상기 비디오 스트림으로부터 상기 베이스 비디오 스트림 및 상기 보조 스트림을 역다중화하는 단계;
    - 상기 베이스 비디오 스트림으로부터 상기 베이스 비디오 신호를 디-포맷팅하는 단계;
    - 상기 보조 스트림으로부터 상기 보조 신호를 디-포맷팅하는 단계;
    - 상기 3D 디스플레이 상에서 디스플레이 깊이로 상기 2D 2차 비디오 신호의 디스플레이를 위한 3D 디스플레이 신호를 제공하기 위해 상기 2D 2차 비디오 신호를 상기 베이스 비디오 신호 및 상기 보조 신호와 병합하는 단계를 포함하고,
    상기 역다중화하는 단계는 상기 비디오 스트림으로부터 상기 2D 2차 비디오 스트림을 역다중화하는 단계를 더 포함하고,
    상기 방법은 상기 2D 2차 비디오 스트림으로부터 상기 2D 2차 비디오 신호를 디-포맷팅하는 단계를 더 포함하는, 3D 비디오 신호 처리 방법.
  9. 프로세서 시스템이 제 1 항 내지 제 3 항 및 제 5 항 내지 제 8 항 중 어느 한 항의 방법을 수행하게 하기 위한 명령들을 포함하는, 컴퓨터 프로그램이 기록된 컴퓨터-판독가능한 기록매체.
  10. 삭제
  11. 삭제
  12. 삭제
  13. 3D 디스플레이 상에 3D 1차 비디오 신호 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위해 3D 비디오 신호를 생성하기 위한 신호 생성 디바이스로서, 상기 3D 1차 비디오 신호는 베이스 비디오 신호 및 3D 디스플레이를 가능하게 하는 보조 신호를 포함하고, 상기 3D 비디오 신호는 다중화된 형태의 비디오 스트림인, 상기 신호 생성 디바이스에 있어서,
    - 상기 2차 비디오 신호로서 2D 2차 비디오 신호를 제공하기 위한 제공 수단; 및
    - 포맷팅 유닛으로서,
    - 베이스 비디오 스트림을 생성하기 위해 상기 베이스 비디오 신호를 포맷팅하고,
    - 보조 스트림을 생성하기 위해 상기 보조 신호를 포맷팅하고,
    - 상기 비디오 스트림을 생성하기 위해 상기 보조 스트림과 상기 베이스 비디오 스트림을 다중화하며,
    - 상기 비디오 스트림에 상기 2D 2차 비디오 신호를 포함시키기 위한, 상기 포맷팅 유닛을 포함하고,
    상기 포맷팅 유닛은 2D 2차 비디오 스트림을 생성하기 위해 상기 2D 2차 비디오 신호를 포맷팅하고, 상기 2D 2차 비디오 신호를 상기 비디오 스트림에 포함시키기 위해 상기 베이스 비디오 스트림 및 상기 보조 스트림과 상기 2D 2차 비디오 스트림을 다중화하도록 더 구성되는, 신호 생성 디바이스.
  14. 3D 디스플레이 상에 3D 1차 비디오 신호 및 2차 비디오 신호의 동시 디스플레이를 가능하게 하기 위해 제 13 항의 상기 신호 생성 디바이스에 의해 생성된 3D 비디오 신호를 처리하기 위한 신호 처리 디바이스로서, 상기 3D 1차 비디오 신호는 베이스 비디오 신호 및 3D 디스플레이를 가능하게 하는 보조 신호를 포함하고, 상기 3D 비디오 신호는 상기 2차 비디오 신호로서 2D 2차 비디오 신호를 포함하고, 상기 3D 비디오 신호는 다중화된 형태인 비디오 스트림이고, 상기 비디오 스트림은 상기 2D 2차 비디오 신호를 포함하고 보조 스트림 및 2D 2차 비디오 스트림과 다중화된 베이스 비디오 스트림을 포함하고, 상기 베이스 비디오 스트림은 포맷팅된 형태로 상기 베이스 비디오 신호를 포함하며, 상기 보조 스트림은 포맷팅된 형태로 상기 보조 신호를 포함하고, 상기 2D 2차 비디오 스트림은 포맷팅된 형태로 상기 2D 2차 비디오 신호를 포함하는, 상기 신호 처리 디바이스에 있어서,
    - 상기 비디오 스트림으로부터 상기 베이스 비디오 스트림 및 상기 보조 스트림을 역다중화하기 위한 역다중화 유닛;
    - 상기 베이스 비디오 스트림으로부터 상기 베이스 비디오 신호를 디-포맷팅하고, 상기 보조 스트림으로부터 상기 보조 신호를 디-포맷팅하며 상기 비디오 스트림으로부터 상기 2D 2차 비디오 신호를 추출하기 위한 디-포맷팅 유닛; 및
    - 상기 3D 디스플레이 상에서 디스플레이 깊이로 상기 2D 2차 비디오 신호의 디스플레이를 위한 3D 디스플레이 신호를 제공하기 위해 상기 2D 2차 비디오 신호를 상기 베이스 비디오 신호 및 상기 보조 신호와 병합하기 위한 병합 유닛을 포함하고,
    상기 역다중화 유닛은 또한 상기 2D 2차 비디오 스트림을 역다중화하도록 구성되며,
    상기 디-포맷팅 유닛은 또한 상기 2D 2차 비디오 스트림으로부터 상기 2D 2차 비디오 신호를 디-포맷팅하도록 구성되는, 신호 처리 디바이스.
  15. 제 14 항에 있어서,
    상기 베이스 비디오 스트림은, 포맷팅된 형태로 상기 2D 2차 비디오 신호와 다중화된 상기 베이스 비디오 신호를 포함하며, 상기 디-포맷팅 유닛은 또한 상기 베이스 비디오 스트림으로부터 상기 베이스 비디오 신호 및 상기 2D 2차 비디오 신호를 역다중화하도록 구성되는, 신호 처리 디바이스.
  16. 제 14 항에 있어서,
    상기 보조 스트림은 포맷팅된 형태로 상기 2D 2차 비디오 신호와 다중화된 상기 보조 신호를 포함하며, 상기 디-포맷팅 유닛은 또한 상기 보조 스트림으로부터 상기 보조 신호 및 상기 2D 2차 비디오 신호를 역다중화하도록 구성되는, 신호 처리 디바이스.
  17. 삭제
  18. 제 14 항에 있어서,
    상기 3D 비디오 신호는 상기 3D 디스플레이 상에 상기 2D 2차 비디오 신호의 디스플레이 깊이를 나타내는 오프셋 값을 추가로 포함하며, 상기 병합 유닛은 또한 상기 오프셋 값에 의존하여, 상기 2D 2차 비디오 신호를 상기 베이스 비디오 신호 및 상기 보조 신호와 병합하도록 구성되는, 신호 처리 디바이스.
  19. 제 18 항에 있어서,
    상기 3D 비디오 신호는 그래픽스 신호를 추가로 포함하며, 상기 오프셋 값은 상기 3D 디스플레이 상에서 상기 그래픽스 신호들의 디스플레이 깊이를 나타내는, 신호 처리 디바이스.
  20. 제 18 항에 있어서,
    상기 오프셋 값은 부가적인 강화 정보 메시지에서의 상기 3D 비디오 신호에 포함된 오프셋 값들의 스트림 중 하나인, 신호 처리 디바이스.
  21. 제 14 항에 있어서,
    상기 디바이스는: 상기 3D 디스플레이 신호를 디스플레이하기 위한 상기 3D 디스플레이, 방송으로부터 상기 3D 비디오 신호를 수신하기 위한 방송 수신기, 인터넷으로부터 상기 3D 비디오 신호를 수신하기 위한 인터넷 수신기 또는 정보 캐리어로부터 상기 3D 비디오 신호를 판독하기 위한 판독기 중 적어도 하나를 추가로 포함하는, 신호 처리 디바이스.
KR1020127018102A 2009-12-14 2010-12-10 3ｄ 비디오 신호를 생성하는 방법 KR101812612B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP09179019.6 2009-12-14
EP09179019A EP2334088A1 (en) 2009-12-14 2009-12-14 Generating a 3D video signal
PCT/IB2010/055730 WO2011073870A1 (en) 2009-12-14 2010-12-10 Generating a 3d video signal

Publications (2)

Publication Number Publication Date
KR20120114300A KR20120114300A (ko) 2012-10-16
KR101812612B1 true KR101812612B1 (ko) 2017-12-27

Family

ID=42133712

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020127018102A KR101812612B1 (ko) 2009-12-14 2010-12-10 3ｄ 비디오 신호를 생성하는 방법

Country Status (9)

Country Link
US (1) US20120293619A1 (ko)
EP (2) EP2334088A1 (ko)
JP (1) JP2013513990A (ko)
KR (1) KR101812612B1 (ko)
CN (1) CN102640506B (ko)
BR (1) BR112012014169A2 (ko)
RU (1) RU2566968C2 (ko)
TW (1) TWI573425B (ko)
WO (1) WO2011073870A1 (ko)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110136414A (ko) * 2010-06-15 2011-12-21 삼성전자주식회사 영상처리장치 및 그 제어방법
US9386295B2 (en) * 2010-09-01 2016-07-05 Lg Electronics Inc. Digital receiver and method for processing 3D content in the digital receiver
IT1403450B1 (it) * 2011-01-19 2013-10-17 Sisvel S P A Flusso video costituito da frame video combinati, e procedimento e dispositivi per la sua generazione, trasmissione, ricezione e riproduzione
FR2978318A1 (fr) * 2011-09-02 2013-01-25 Sagemcom Broadband Sas Procede et dispositif d'optimisation du positionnement d'une fenetre d'incrustation d'un objet sur une sequence d'images stereoscopiques
EP2670130B1 (en) * 2012-06-01 2019-03-27 Alcatel Lucent Method and apparatus for mixing a first video signal and a second video signal
US20150304593A1 (en) * 2012-11-27 2015-10-22 Sony Corporation Display apparatus, display method, and computer program
US10554967B2 (en) 2014-03-21 2020-02-04 Futurewei Technologies, Inc. Illumination compensation (IC) refinement based on positional pairings among pixels
KR20160028272A (ko) * 2014-09-03 2016-03-11 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US9940637B2 (en) 2015-06-05 2018-04-10 Apple Inc. User interface for loyalty accounts and private label accounts
US10271084B2 (en) 2015-06-07 2019-04-23 Apple Inc. Video recording and replay
US11580608B2 (en) 2016-06-12 2023-02-14 Apple Inc. Managing contact information for communication applications
JP6389540B2 (ja) * 2017-02-06 2018-09-12 ソフトバンク株式会社 動画データ生成装置、表示システム、表示制御装置、及びプログラム
DK179992B1 (en) 2018-05-07 2020-01-14 Apple Inc. DISPLAY OF USER INTERFACES ASSOCIATED WITH PHYSICAL ACTIVITIES
EP3687166A1 (en) * 2019-01-23 2020-07-29 Ultra-D Coöperatief U.A. Interoperable 3d image content handling
DK201970530A1 (en) 2019-05-06 2021-01-28 Apple Inc Avatar integration with multiple applications
US11039074B1 (en) 2020-06-01 2021-06-15 Apple Inc. User interfaces for managing media
CN111901623B (zh) * 2020-08-03 2022-03-08 杭州当虹科技股份有限公司 一种基于全链路ip化超高清制播***的辅助信息叠加方法

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4808979A (en) * 1987-04-02 1989-02-28 Tektronix, Inc. Cursor for use in 3-D imaging systems
JP3513371B2 (ja) * 1996-10-18 2004-03-31 キヤノン株式会社 マトリクス基板と液晶装置とこれらを用いた表示装置
US6088064A (en) * 1996-12-19 2000-07-11 Thomson Licensing S.A. Method and apparatus for positioning auxiliary information proximate an auxiliary image in a multi-image display
WO1999012348A1 (en) * 1997-08-29 1999-03-11 Matsushita Electric Industrial Co., Ltd. Optical disc for recording high resolution and normal image, optical disc player, optical disc recorder, and playback control information generator
US6061719A (en) * 1997-11-06 2000-05-09 Lucent Technologies Inc. Synchronized presentation of television programming and web content
US7254265B2 (en) * 2000-04-01 2007-08-07 Newsight Corporation Methods and systems for 2D/3D image conversion and optimization
JP3561463B2 (ja) * 2000-08-11 2004-09-02 コナミ株式会社 ３ｄビデオゲームにおける擬似カメラ視点移動制御方法及び３ｄビデオゲーム装置
US20060031889A1 (en) * 2002-12-11 2006-02-09 Bennett James D Video processing system with simultaneous multiple outputs each with unique formats
CN1204757C (zh) * 2003-04-22 2005-06-01 上海大学 一种立体视频流编码/解码器及其立体视频编解码***
JP2005229384A (ja) * 2004-02-13 2005-08-25 Nippon Hoso Kyokai <Nhk> マルチメディア情報配受信システム、マルチメディア情報配信装置およびマルチメディア情報受信装置
WO2005091215A1 (en) * 2004-03-18 2005-09-29 Pixe Pty Ltd System and method for transforming graphics data
KR100585966B1 (ko) * 2004-05-21 2006-06-01 한국전자통신연구원 3차원 입체 영상 부가 데이터를 이용한 3차원 입체 디지털방송 송/수신 장치 및 그 방법
US20060015919A1 (en) * 2004-07-13 2006-01-19 Nokia Corporation System and method for transferring video information
US8398541B2 (en) * 2006-06-06 2013-03-19 Intuitive Surgical Operations, Inc. Interactive user interfaces for robotic minimally invasive surgical systems
KR100747550B1 (ko) * 2005-12-09 2007-08-08 한국전자통신연구원 Ｄｍｂ 기반의 3차원 입체영상 서비스 제공 방법과, ｄｍｂ기반의 3차원 입체영상 서비스를 위한 복호화 장치 및 그방법
RU2306678C1 (ru) * 2006-02-07 2007-09-20 Василий Александрович ЕЖОВ Автостереоскопический дисплей с квазинепрерывным спектром ракурсов
EP2074832A2 (en) * 2006-09-28 2009-07-01 Koninklijke Philips Electronics N.V. 3 menu display
WO2009027923A1 (en) * 2007-08-31 2009-03-05 Koninklijke Philips Electronics N.V. Conveying auxiliary information in a multiplexed stream
AU2009287465B2 (en) * 2008-09-17 2014-09-11 Panasonic Corporation Recording medium, playback device, and integrated circuit
BRPI0904620A2 (pt) * 2008-09-30 2020-08-18 Panasonic Corporation meio de gravação , dispositivo de reprodução, sistema lsi, método de reprodução,óculos, e dispositivo de exibição para imagens 3d
AU2009332433A1 (en) * 2008-12-26 2010-07-01 Panasonic Corporation Recording medium, reproduction device, and integrated circuit

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Bruls W.H.A. et al, "Enabling Introduction of Stereoscopic Video", International Conference on Consumer Electronics 2007(2007.01.) 1부.*
Hyun Lee et al, "A structure for 2D/3D mixed service based on terrestrial DMB system", 3DTV Conference 2007(2007.05.) 1부.*

Also Published As

Publication number Publication date
CN102640506B (zh) 2016-07-06
TWI573425B (zh) 2017-03-01
KR20120114300A (ko) 2012-10-16
TW201134191A (en) 2011-10-01
RU2566968C2 (ru) 2015-10-27
RU2012129915A (ru) 2014-01-27
EP2514213A1 (en) 2012-10-24
EP2334088A1 (en) 2011-06-15
BR112012014169A2 (pt) 2017-10-24
JP2013513990A (ja) 2013-04-22
CN102640506A (zh) 2012-08-15
US20120293619A1 (en) 2012-11-22
WO2011073870A1 (en) 2011-06-23

Similar Documents

Publication Publication Date Title
KR101812612B1 (ko) 3ｄ 비디오 신호를 생성하는 방법
US10951876B2 (en) Stereoscopic video reproducing method, stereoscopic video reproducing apparatus and optical disc
EP2537347B1 (en) Apparatus and method for processing video content
RU2517402C2 (ru) Обработка 3d отображения субтитров
JP5906462B2 (ja) 映像符号化装置、映像符号化方法、映像符号化プログラム、映像再生装置、映像再生方法及び映像再生プログラム
EP2433429B1 (en) Entry points for 3d trickplay
JP2015092669A (ja) ３ｄビデオ及び補助データの結合
WO2013038679A1 (ja) 符号化装置、復号装置、再生装置、符号化方法、及び復号方法
CN103125123A (zh) 再现装置、再现方法、集成电路、广播***及广播方法
JP6040932B2 (ja) 立体視に対応したビデオストリームを生成、再構築する方法、および関連する符号化および復号化デバイス
MX2013000348A (es) Datos auxiliares en radiodifusion de video de tres dimensiones.
EP2337365A2 (en) Method and system for pulldown processing for 3D video
WO2009027923A1 (en) Conveying auxiliary information in a multiplexed stream
WO2011039927A1 (ja) 三次元映像処理装置及び三次元映像処理方法
WO2012108210A1 (ja) ビデオストリームの映像のデータ作成装置及び再生装置
US20110150355A1 (en) Method and system for dynamic contrast processing for 3d video
WO2004030377A1 (ja) 立体画像表示装置、記録方法、及び伝送方法
AU2011202552B2 (en) 3D display handling of subtitles
Zink Blu-Ray 3D™

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant