KR100716142B1 - 스테레오스코픽 영상 데이터의 전송 방법 - Google Patents

스테레오스코픽 영상 데이터의 전송 방법 Download PDF

Info

Publication number
KR100716142B1
KR100716142B1 KR1020060100258A KR20060100258A KR100716142B1 KR 100716142 B1 KR100716142 B1 KR 100716142B1 KR 1020060100258 A KR1020060100258 A KR 1020060100258A KR 20060100258 A KR20060100258 A KR 20060100258A KR 100716142 B1 KR100716142 B1 KR 100716142B1
Authority
KR
South Korea
Prior art keywords
image
information
stereoscopic image
stereoscopic
header unit
Prior art date
Application number
KR1020060100258A
Other languages
English (en)
Inventor
천승문
박광훈
서덕영
김규헌
오용협
정태섭
Original Assignee
주식회사 이시티
경희대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 이시티, 경희대학교 산학협력단 filed Critical 주식회사 이시티
Application granted granted Critical
Publication of KR100716142B1 publication Critical patent/KR100716142B1/ko
Priority to JP2009527295A priority Critical patent/JP2010503310A/ja
Priority to PCT/KR2007/004151 priority patent/WO2008030011A1/en
Priority to US12/439,969 priority patent/US20100182403A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H04N9/8047—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Library & Information Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

스테레오스코픽 영상을 위한 디스플레이 장치에서 실감나는 입체 영상을 재생할 수 있는 부호화된 영상의 데이터에 대한 파일 포맷에 관하여 개시한다. 본 발명의 일 실시예에 따른 부호화된 스테레오스코픽 영상의 데이터에 대한 파일 포맷은 부호화된 스테레오스코픽 영상의 이미지 정보를 포함하는 영상 데이터부 및 영상 데이터부에 포함된 부호화된 스테레오스코픽 영상의 이미지 정보를 디코딩하고 재생하기 위한 메타데이터를 포함하는 헤더부를 포함한다. 그리고 헤더부는 스테레오스코픽 영상을 획득하는데 사용된 좌우 카메라와 관련된 정보를 포함하는 카메라 헤더부, 스테레오스코픽 영상의 부호화와 관련된 정보를 포함하는 코덱 헤더부, 및 부호화된 스테레오스코픽 영상의 데이터를 수신하여 재생하기 위한 배리어 타입의 디스플레이 장치와 관련된 정보를 포함하는 디스플레이 헤더부 중에서 적어도 하나의 헤더부를 포함할 수 있다.
스테레오스코픽 영상, MAF(Multimedia Application Format), 엠펙, 동영상, 정지 영상

Description

스테레오스코픽 영상 데이터의 전송 방법{Method for transferring stereoscopic image data}
도 1은 좌우 카메라를 이용하여 획득한 양안식 스테레오스코픽 영상의 일례를 보여주는 도면이다.
도 2는 좌영상의 홀수 수직라인과 우영상의 짝수 수직라인으로부터 통합합성영상을 생성하는 방법을 보여주는 도면이다.
도 3은 배리어 타입(Barrier Type)의 디스플레이를 이용하여 입체 영상을 디스플레이하는 원리를 설명하기 위한 도면이다.
도 4는 디스플레이 장치로 전송되는 기존의 부호화된 영상의 데이터에 대한 파일 포맷을 보여주는 블록도이다.
도 5는 본 발명의 실시예에 따른 부호화된 스테레오스코픽 영상의 데이터에 대한 파일 포맷을 보여주는 개념적인 블록도이다.
도 6a, 도 6b, 및 도 6c는 각각 도 5의 파일 포맷에서 카메라 헤더부, 코덱 헤더부, 및 디스플레이 헤더부의 세부 구성을 보여주기 위한 개념적인 블록도이다.
본 발명은 스테레오스코픽 영상에 관한 것으로, 보다 구체적으로 디스플레이 장치로 전송되는 부호화된 스테레오스코픽 영상 데이터(stereoscopic image data)에 대한 파일 포맷(File Format)에 관한 것이다.
양안식 스테레오스코픽 영상(이하, '스테레오스코픽 영상'이라고 한다)은, 도 1에 도시되어 있는 바와 같이, 일정한 거리로 이격되어 있는 좌측 카메라(4a)와 우측 카메라(4b)를 이용하여 동일한 피사체(2)를 촬영하여 각각 획득한 1쌍의 좌영상(6a)과 우영상(6b)을 말한다. 이러한 스테레오스코픽 영상(6a, 6b)은 피사체(2)에 대한 입체감을 LCD(Liquid Crystal Display)나 PDP(Plasma Display Panel) 등과 같은 평면 디스플레이 장치에 구현하기 위하여 사용된다.
스테레오스코픽 영상을 이용하여 입체 영상을 디스플레이하기 위한 방법은 여러 가지가 있다. 그 중의 한 가지 방법은 스테레오스코픽 영상의 좌영상과 우영상을 프레임 단위로 교대로 디스플레이함으로써 입체 영상을 재현하는 것이다. 이 방법에 의하면 좌영상과 우영상의 전체 화면에 대한 이미지 정보를 포함하는 파일이 디스플레이 장치측으로는 전송되어야 한다.
그리고 다른 한 가지 방법은 통합합성영상을 디스플레이함으로써 입체 영상을 재현하는 것이다. 통합합성영상이란 스테레오스코픽 영상의 좌영상과 우영상의 픽셀들을 라인 단위로 교대로 배열하여 만든 영상을 말한다. 예를 들어, 도 2에 도시된 바와 같이, 좌영상(10a)의 홀수 번째 수직 라인 픽셀들과 우영상(10b)의 짝수 번째 수직 라인 픽셀들을 추출하여 교대로 배열함으로써 통합합성영상(12)을 형성할 수 있다. 또한, 통합합성영상은 좌영상(10a)의 짝수 번째 수직 라인 픽셀들 과 우영상(10b)의 홀수 번째 수직 라인 픽셀들을 추출하거나 또는 좌영상(10a)과 우영상(10b)의 수평 라인 픽셀들을 추출하여 교대로 배열함으로써 형성할 수도 있다. 이 방법에 의하면 좌영상과 우영상의 전체 화면에 대한 이미지 정보가 포함된 파일이 디스플레이 장치측으로는 전송되거나 또는 통합합성영상을 구성하는 픽셀에 대한 이미지 정보만 포함된 파일이 디스플레이 장치측으로 전송될 수도 있다. 전자의 경우에는 디스플레이 장치측에서 수신된 좌영상과 우영상의 전체 화면에 대한 이미지 정보로부터 통합합성영상을 생성하여 디스플레이할 수 있다.
상기 통합합성영상은 입체 영상의 디스플레이 방식 중에서 2차원 영상(모노스코픽 영상)과 입체 영상을 동시에 디스플레이할 수 있는 유일한 방식인 배리어 타입(Barrier Type)의 디스플레이 장치에서 효과적으로 활용될 수 있다. 배리어 타입의 디스플레이 장치는, 도 3에 도시되어 있는 바와 같이, 편광 필름이나 편광 글래스로 형성되는 배리어 편광판(22)이 평면 디스플레이 장치(20)의 앞면에 구비되어 있는 장치를 말한다. 이러한 배리어 편광판(22)에서 배리어 패턴은 여러 가지가 있는데, 기본적으로 수직 라인 타입과 수평 라인 타입으로 구분할 수 있다. 그리고 상기 수직 라인 타입과 수평 라인 타입에서 라인 모양의 배리어를 형성하는 미세한 패턴의 모양에 따라서 1자형, 톱니형, 및 대각선형 등으로 구분할 수 있다.
이러한 배리어 타입의 디스플레이 장치(20)를 통해서 통합합성영상이 디스플레이될 경우에, 배리어 편광판(22)에 의하여 좌안(24a)을 통해서는 좌영상의 픽셀 라인들만을 볼 수 있고 우안(24b)을 통해서는 우영상의 픽셀 라인들만을 볼 수 있다. 따라서 배리어 타입의 디스플레이 장치를 이용하면, 시청자들은 보조 기구의 도움 없이 맨눈으로 입체감이 있는 영상을 보는 것이 가능하다. 최근에는 3D TV나 휴대폰, PMP, DMB 수신기 등과 같은 휴대용 전자 기기 등의 디스플레이 상에 입체 영상을 구현하는데 있어서 배리어 타입의 디스플레이 장치가 각광을 받고 있다. 물론, 배리어 타입의 디스플레이 장치를 통해서 일반 모노스코픽 영상을 디스플레이할 수도 있다.
이러한 배리어 타입의 디스플레이 장치 등과 같은 평면 디스플레이 장치를 이용하여 입체 영상을 디스플레이하기 위해서는 스테레오스코픽 영상에 대한 효율적인 부호화 방법이 요구된다. 예를 들어, 엠펙-2(MPEG-2)의 멀티-뷰 프로파일(Multi-View Profile, MVP)에 따른 부호화 방법이 있는데, 이 방법에 의하면 좌우 영상 중에서 하나의 영상, 예컨대 좌영상을 기저층(Base Layer)으로 하여 모노스코픽 영상(Monoscopic image)과 동일한 방식으로 부호화하고, 다른 하나의 영상 즉 우영상은 상위층(Enhancement Layer)으로 하여 좌우 영상간의 상관 정보에 대해서만 부호화를 한다. 그리고 평면 디스플레이 장치에서는 수신된 비트스트림으로부터 좌우 영상을 모두 복호화한 다음, 복호화된 좌우 영상의 데이터를 이용하여 통합 합성 영상을 생성하여 디스플레이하거나 좌영상과 우영상을 번갈아가면서 디스플레이한다.
스테레오스코픽 영상에 대한 다른 부호화 방법은 좌영상과 우영상 각각이 아닌 프레임 단위의 통합합성영상을 부호화하는 방법이 있다. 이 방법에 의하면, 부호화 장치에서 통합합성영상을 추출하여 생성하고, 생성된 통합합성영상 자체를 하나의 프레임으로 취급하여 기존의 부호화 방법을 이용하여 부호화를 수행한다는 점 에서 전술한 방식과 상이하다. 기존의 부호화 방법으로는 예컨대, 제이펙(JPEG) 등에 따른 정지 영상에 대한 부호화 방법이나 MPEG-1, MPEG-2, MPEG-4, H.264/AVC, VC-1 등에 따른 동영상에 부호화 방법 등이 있다.
이러한 기존의 정지 영상이나 동영상에 대한 부호화 방법에 따라 부호화된 영상 데이터는 그 부호화 방식을 지원하는 디스플레이 장치로 바로 전송되어 재생되거나 또는 저장 매체에 저장된 후에 이후에 디스플레이 장치에 의하여 재생된다. 이 경우, 디스플레이 장치로 영상 데이터를 전송하기 전에 좌우 카메라를 통해 획득한 영상에 대하여 필요한 보정 작업이나 편집 작업을 할 수도 있다. 예를 들어, 영상 데이터에 보안 관련 데이터, 저작권 관리와 관련된 데이터 등을 삽입할 수 있다. 또는 스테레오스코픽 영상을 이용하여 특정한 콘텐츠를 제작하거나 또는 디스플레이 장치의 특성을 고려하여 획득된 스테레오스코픽 영상에 필요한 보정을 수행할 수도 있다.
그런데, 디스플레이 장치에서 부호화된 영상 데이터를 디코딩하여 재생하기 위해서는 일반적으로 휘도, 색차 등과 같은 이미지 정보를 나타내는 데이터만이 아니라 이를 디코딩하고 또한 디스플레이하는데 있어서 필요한 여러 가지 부가 정보를 나타내는 데이터도 필요하다. 따라서 디스플레이 장치로 전송되는 데이터에는 상기 이미지 데이터만이 아니라 여러 가지 부가 데이터도 함께 전송된다.
도 4에는 디스플레이 장치로 전송되는 기존의 부호화된 영상 데이터에 대한 파일 포맷이 도시되어 있다. 도 4를 참조하면, 기존의 부호화된 영상 데이터에 대한 파일 포맷(30)은 크게 기본 헤더부(Basic Header Unit, 32)와 영상 데이터 부(Image Data Unit, 34)로 구성된다. 여기서, 상기 영상 데이터부(34)는 휘도 및 색차 등과 같은 텍스쳐 정보(Texture Information), 배경이나 물체에 대한 정보인 형상 정보(Shape Information), 움직임 정보(Motion Information) 등과 각 부호화 표준에 정의되어 있는 여러 가지 헤더 정보 등이 포함될 수 있다. 그리고 상기 기본 헤더부(32)에는 상기 영상 데이터부(34)에 포함되는 여러 가지 이미지 정보 등을 제외한 나머지 메타 데이터(META Data)들이 포함되는데, 일반적으로 디스플레이 장치에서 상기 영상 데이터부(34)에 포함된 이미지 정보를 디코딩하여 재생하기 위하여 필요한 정보이다.
그런데, 도 4에 도시된 것과 같은 기존의 부호화된 영상 데이터에 대한 파일 포맷(32)을 그대로 이용하여 디스플레이 장치에서 스테레오스코픽 영상인 입체 영상을 재현하는 것은 일정한 한계가 있다. 왜냐하면, 전술한 기존의 데이터 구조는 일반적으로 모노스코픽 영상을 디스플레이하기 위한 것으로서, 종래의 기본 헤더부(32)에 포함되는 정보로는 스테레오스코픽 영상인 입체 영상을 재현하는데 필요한 정보를 모두 디스플레이 장치로 전송할 수 없기 때문이다.
보다 구체적으로, 스테레오스코픽 영상의 이미지 정보를 포함한 여러 가지 데이터는 소정의 간격으로 이격되어 있는 좌우 카메라를 사용하여 1쌍의 좌우 영상을 획득하고 이를 부호화한 것이다. 그리고 이러한 부호화된 스테레오스코픽 영상의 데이터들은 배리어 타입의 디스플레이 장치 등과 같은 특수한 디스플레이 장치를 이용하여 디스플레이되며, 또한 상기 디스플레이 장치는 스테레오스코픽 영상만이 아니라 모노스코픽 영상에 대한 디스플레이도 지원하는 장치일 수도 있다. 따 라서 기존의 부호화된 영상의 데이터에 대한 파일 포맷(30)으로는 부호화된 스테레오스코픽 영상의 데이터를 이용하여 배리어 타입의 디스플레이 장치 등에서 최적의 입체 영상을 재현하기가 용이하지 않다.
모노스코픽 영상과는 달리 스테레오스코픽 영상의 경우에는 그 스테레오스코픽 영상을 획득하는데 있어서 2개의 카메라가 사용된다. 그리고 스테레오스코픽 영상을 획득할 시점의 조명 등의 방향에 따라서, 좌영상과 우영상에서 휘도나 색차 등의 이미지 정보의 차이가 존재한다. 또한, 스테레오스코픽 영상은 입체 영상을 재현하기 위하여 배리어 방식의 디스플레이와 같은 특수한 디스플레이 장치가 사용된다. 그런데, 이러한 스테레오스코픽 영상의 고유한 특성 및/또는 디스플레이 장치의 고유한 특성 등으로 인하여, 기존의 부호화된 영상의 데이터에 대한 파일 포맷을 이용해서는 실감나는 입체 영상을 재현하는데 필요한 모든 정보를 복호화 장치로 전송하기가 용이하지 않다.
따라서 본 발명에서는 이러한 고유한 특성을 갖는 스테레오스코픽 영상을 효율적으로 부호화하고 또한 획득된 스테레오스코픽 영상으로 입체 영상의 재현에 적합하도록 콘텐츠를 제작할 수 있으며, 아울러 스테레오스코픽 영상을 위한 디스플레이 장치에서 실감나는 입체 영상을 재현하는데 있어서 필요한 정보도 포함하여 디스플레이 장치로 전송할 수 있는 부호화된 스테레오스코픽 영상의 데이터에 대한 파일 포맷을 제안하고자 한다.
상기한 기술적 과제를 달성하기 위한 본 발명의 일 실시예에 따른 스테레오스코픽 영상 데이터의 전송방법은 부호화된 스테레오스코픽 영상의 데이터를 소정의 파일 포맷으로 만들어서 복호화장치로 전송하는 방법으로서, 상기 파일 포맷은 상기 부호화된 스테레오스코픽 영상의 이미지 정보를 포함하는 영상 데이터부 및 상기 영상 데이터부에 포함된 상기 부호화된 스테레오스코픽 영상의 이미지 정보를 디코딩하고 재생하기 위한 메타데이터를 포함하는 헤더부를 포함한다.
상기 실시예의 일 측면에 의하면, 상기 헤더부는 상기 스테레오스코픽 영상을 획득하는데 사용된 좌우 카메라와 관련된 정보를 포함하는 카메라 헤더부, 상기 스테레오스코픽 영상의 부호화와 관련된 정보를 포함하는 코덱 헤더부, 및 상기 부호화된 스테레오스코픽 영상의 데이터를 수신하여 재생하기 위한 배리어 타입의 디스플레이 장치와 관련된 정보를 포함하는 디스플레이 헤더부 중에서 적어도 하나의 헤더부를 포함할 수 있다.
이 경우, 상기 카메라 헤더부는 상기 스테레오스코픽 영상을 구성하는 좌영상과 우영상의 디스패러티 정보, 상기 좌우 카메라 사이의 거리에 관한 정보, 상기 좌우 카메라를 통해 캡쳐되는 좌우 영상의 프레임율에 관한 정보, 상기 스테레오스코픽 영상을 구성하는 좌영상과 우영상의 동기화에 관한 정보, 및 상기 스테레오스코픽 영상을 획득하는데 사용되는 좌우 카메라의 종류에 관한 정보 중에서 하나 또는 그 이상의 정보를 포함할 수 있다.
그리고 상기 코덱 헤더부는 상기 영상 데이터부에 포함되는 이미지 정보가 스테레오스코픽 영상에 대한 것인지 또는 다른 종류의 영상에 대한 것인지를 지시하는 정보, 상기 영상 데이터부에 포함되는 이미지 정보의 구성 방법에 관한 정보, 및 상기 영상 데이터부에 포함되는 이미지 정보를 얻는데 사용된 부호화 방법에 관련된 정보 중에서 하나 또는 그 이상의 정보를 포함할 수 있다.
또한, 상기 헤더부는 상기 영상 데이터부에 포함되는 이미지 정보가 어떤 종류의 배리어 패턴을 갖는 상기 배리어 타입의 디스플레이 장치에 최적화되어 있는지를 나타내는 정보와 상기 영상 데이터부에 포함되는 이미지 정보가 어떤 배리어 패턴의 간격을 갖는 상기 배리어 타입의 디스플레이 장치에 최적화되어 있는지를 나타내는 정보를 모두 포함하거나 이 중에서 하나의 정보를 포함할 수 있다.
이하에서는, 첨부 도면을 참조하여 본 발명의 바람직한 실시예에 대하여 상세하게 설명한다. 후술하는 실시예는 본 발명의 기술적 사상을 설명하기 위한 목적이므로, 본 발명의 기술적 사상은 이 실시예에 의하여 한정되는 것으로 해석되어서는 안된다. 그리고 이하의 실시예의 설명에서 각각의 구성요소의 명칭은 당업계에서 다른 명칭으로 호칭될 수 있는데, 이들이 기능적 유사성과 동일성이 있다면 비록 다른 명칭을 사용하더라도 본 발명의 실시예와 균등한 구성이라고 볼 수 있다. 마찬가지로 도면상의 구성을 일부 변형한 실시예가 채용되더라도 기능적 유사성과 동일성이 있다면 양자는 균등한 구성으로 볼 수 있다.
도 5는 본 발명의 일 실시예에 따른 부호화된 스테레오스코픽 영상의 데이터에 대한 파일 포맷을 보여주는 블록도이다.
도 5를 참조하면, 본 실시예에 따른 파일 포맷(100)은 기본 헤더부(110) 및 영상 데이터부(150)에 추가하여 카메라 헤더부(120), 코덱 헤더부(130), 및 디스플레이 헤더부(140) 중에서 적어도 하나의 헤더부를 더 포함한다. 이러한 본 실시예에 따른 파일 포맷(100)은 기존의 부호화 방법, 예컨대 JPEG이나 MPEG, H.264/AVC 등에 따라 부호화된 영상(모노스코픽 영상 또는 멀티-뷰 프로파일에 따라 부호화된 멀티-뷰 영상)의 데이터에 대한 파일 포맷(기본 헤더부(110)와 영상 데이터부(150))을 그대로 이용하면서, 아울러 스테레오스코픽 영상과 이를 이용한 콘텐츠 및/또는 디스플레이 장치의 특성 등을 고려한 별도의 추가 정보를 표현하기 위한 메타 데이터가 헤더부(카메라 헤더부(120), 코덱 헤더부(130), 및/또는 디스플레이 헤더부(140))에 더 포함되어 있다는 점에서 특징이 있다.
일반적인 부호화된 영상의 데이터에 대한 파일 포맷에서 픽셀의 이미지 정보 등이 포함되는 영상 데이터부(150)를 제외한 나머지 부분은 모두 헤더부(A)로 분류할 수 있다. 따라서 본 실시예에 따른 파일 포맷(100)에서 카메라 헤더부(120), 코덱 헤더부(130), 및 디스플레이 헤더부(140)는 모두 기본 헤더부(110)와 함께 하나의 헤더부(A)를 구성하며, 여기서 각 헤더부(110, 120, 130, 140)의 구분은 임의적인 것이다.
그리고 본 실시예에서 사용하는 헤더부의 명칭도 설명의 편의를 위한 임의적인 것이다. 본 발명에 의하면, 각 헤더부(120, 130, 140)에 어떠한 특성을 갖는 정보를 나타내는 데이터(이것은 도 5, 도 6a, 도 6b, 및 도 6c를 참조하여 뒤에서 상세히 설명한다)가 포함되는가 하는 것이 문제가 될 따름이며, 그 구체적인 명칭은 각 헤더부에 포함되는 정보의 특성이나 기타 관련 규정에 따라서 적절하게 변경 이 가능하다.
그리고 본 실시예에 따른 파일 포맷(100)에서 상기 헤더부(Header Unit, A)는 기본 헤더부(Basic Header Sub-unit, 110)외에 카메라 헤더부(Camera Header Sub-unit, 120), 코덱 헤더부(Codec Header Sub-unit, 130), 및 디스플레이 헤더부(Display Header Sub-unit, 140) 중에서 적어도 하나의 헤더부를 더 포함한다. 예컨대, 실시예에 따라서 상기 헤더부(A)는 기본 헤더부(110)와 카메라 헤더부(120)로 구성되거나 기본 헤더부(110), 카메라 헤더부(120), 및 코덱 헤더부(130)로 구성되거나, 또는 기본 헤더부(110), 카메라 헤더부(120), 코덱 헤더부(130), 및 디스플레이 헤더부(140)로 구성될 수 있는데, 여기에만 한정되는 것은 아니다.
또한, 도 5에서는 카메라 헤더부(120), 코덱 헤더부(130), 및/또는 디스플레이 헤더부(140)와 기본 헤더부(110)가 서로 구분되어서 일정한 순서에 따라서 배열되어 있지만, 이것도 단지 설명의 편의를 위한 것일 뿐이다. 따라서 실시예에 따라서는 상기 헤더부(A)에 포함되는 구성 요소의 배열순서는 바뀔 수 있다. 그리고 경우에 따라서는 각 헤더부(110, 120, 130, 140)의 정보가 다른 헤더부의 정보와 함께 동일한 헤더부에 포함될 수도 있다.
이하에서는 도 5, 도 6a, 도 6b, 및 도 6c를 참조하여, 본 발명의 실시예에 따른 부호화된 스테레오스코픽 영상의 데이터에 대한 파일 포맷(100)에 포함되는 정보에 대하여 상세하게 설명한다. 여기에서, 도 6a, 도 6b, 및 도 6c는 각각 도 5의 파일 포맷(100)에서 카메라 헤더부(120), 코덱 헤더부(130), 및 디스플레이 헤 더부(140)의 세부 구성을 보여주기 위한 개념적인 블록도이다.
우선, 기본 헤더부(110)와 영상 데이터부(150)에는 각각 종래의 부호화된 영상의 데이터에 대한 파일 포맷(예컨대 도 4 참조)의 기본 헤더부와 영상 데이터부의 정보와 거의 유사하거나 동일한 정보가 포함된다. 기본 헤더부(110)에는 모노스코픽 영상의 부호화에 따라서 파생되는 여러 가지 메타 데이터가 포함되거나 멀티-뷰 프로파일에 따른 멀티-뷰 영상의 부호화에 따라서 파생되는 여러 가지 메타 데이터가 포함될 수 있다. 다만, 후술하는 바와 같이 상기 기본 헤더부(110)에는 영상 데이터부(150)에 포함된 이미지 정보가 일반 모노스코픽 영상에 대한 것인지 또는 스테레오스코픽 영상에 대한 것인지를 식별하기 위한 정보 등이 더 포함될 수도 있다.
그리고 영상 데이터부(150)에는 스테레오스코픽 영상의 각 픽셀 또는 블록 단위의 휘도, 색차, 형상 등에 대한 정보와 움직임 정보 등이 포함된다. 상기 영상 데이터부(150)에 포함되는 정보는 예컨대 모노스코픽 영상을 소정의 부호화 방법을 이용하여 부호화한 이미지 정보, 통합합성영상 자체를 소정의 부호화 방법을 이용하여 부호화한 이미지 정보, 또는 기존의 멀티-뷰 프로파일에 따라 부호화한 이미지 정보 등일 수 있다.
그리고 카메라 헤더부(120)에는 스테레오스코픽 영상을 획득하는데 사용된 좌우 카메라와 관련된 정보(Camera-related Information)가 포함된다. 예를 들어, 도 6a에 도시된 바와 같은 5가지 종류의 정보(Ca1 블록 내지 Ca5 블록, 이들 각 블록에 포함되는 정보의 구체적 내용에 대해서는 후술한다) 모두가 포함되거나 또는 이들 각각은 좌우 카메라에 대한 독립적인 정보이므로 상기 5가지 종류의 정보 중에서 일부의 정보가 카메라 헤더부(120)에 포함될 수 있다.
Ca1 블록에는 좌영상과 우영상의 이미지 정보의 차이(Image Information Difference), 예컨대 휘도(Y) 차이(Luminance or Brightness Difference) 및 색차(Cb, Cr) 차이(Chrominance Difference) 또는 RGB값의 차이(Color Difference)를 나타내는 정보, 즉 디스패러티 정보(Disparity Information)가 포함된다. 일반적으로 소정의 거리만큼 이격되어 있는 좌우 카메라를 이용하여 동일한 피사체에 대한 스테레오스코픽 영상을 촬영할 경우에, 조명(광원)의 위치에 따라서 좌우 영상 간에는 이미지 정보의 차이가 생길 수 있다. 예컨대, 좌영상과 우영상 중에서 어느 하나의 영상이 다른 영상에 비해서 상대적으로 밝기가 더 어둡거나 밝을 수가 있으며, Ca1 블록에는 이러한 이미지 정보의 차이에 관한 정보가 포함된다.
스테레오스코픽 영상에 있어서 이러한 이미지 정보의 차이는 부호화 효율(압축 효율)의 측면에서나 실감나는 입체 영상의 재현을 위해서 반드시 고려하는 것이 바람직하다. 왜냐하면, 이러한 이미지 정보의 차이가 반영되지 않는 경우에는 전체적으로 데이터의 발생량이 증가할 수가 있으며 또한 데이터의 손실 등으로 인하여 입체 영상의 입체감을 떨어뜨릴 수가 있기 때문이다.
이러한 좌우 영상간의 이미지 정보 차이를 부호화하는 한 가지 방법은 이를 영상 데이터부(150)에 포함되는 이미지 정보로 취급하여 부호화하는 방법이다. 예를 들어, 좌영상과 우영상을 멀티-뷰 프로파일에 따라서 부호화하는 경우에, 이러한 디스패러티 정보는 두 영상 간의 상관 정보로서 영상 데이터부(150)에 포함되 어, 블록이나 픽쳐 또는 프레임 단위로 부호화가 수행된다. 그러나 이러한 부호화 방식은 영상 데이터부(150)의 데이터 양을 증가시켜서 데이터 압축률을 떨어뜨리고, 한편으로 기존의 부호화 장치에 상기 디스패러티 정보를 부호화하기 위한 수단이 더 포함되므로 부호화 장치의 구성을 복잡하게 만들 염려가 있다. 또한, 이러한 부호화 방식은 통합합성영상을 자체를 부호화하는 경우에는 적용하기가 상당이 어려운 단점이 있으며, 복호화 장치에서는 디스플레이 장치의 해상도나 성능에 상관없이 항상 이러한 디스패러티 정보를 반영하여 입체 영상을 재현하여야 하는 경직성이 있다.
따라서 본 실시예에서는 상기 디스패러티 정보를 카메라 헤더부(120)의 Ca1 블록에 포함시켜서 헤더 정보로서 전송한다. 일반적인 정지 영상이나 동영상의 경우에 조명이 시간에 따라 급격하게 변하지 않으므로, 소정의 시간 간격으로 상기 디스패러티 정보를 카메라 헤더부(120)에 포함시킬 경우에는 그 만큼 부호화 효율을 향상시킬 수가 있다. 그리고 본 실시예에 의하면, 디스플레이 장치의 해상도나 성능을 고려하여 화면 보정을 복호화 장치에서 수행하는 것이 가능하기 때문에, 동일한 복호화 장치를 다양한 특성의 디스플레이 장치에서도 사용이 가능한 장점이 있다.
상기 디스패러티 정보는 여러 가지 방법으로 표현하는 것이 가능하다. 예컨대 휘도 (또는 색차)에 대한 디스패러티의 경우에 좌영상과 우영상의 평균값을 구해서 그 상대적인 차이(예컨대, 좌영상의 평균 휘도를 기준으로 한 우영상의 평균 휘도의 상대적인 값)나 또는 절대적인 차이(예컨대, 좌영상과 우영상의 평균 휘도 차이)를 디스패러티 정보로 표현할 수 있다. 그리고 이러한 좌우 영상 간의 휘도 차이는 소정의 시간 간격으로 이용하여 측정하여 주기적으로 카메라 헤더 정보의 Ca1 블록에 포함시킬 수 있다.
Ca2 블록에는 좌우 카메라 사이의 거리(Distance between Left Camera and Right Camera)에 관한 정보가 포함된다. 좌우 카메라 사이의 거리는 예컨대 왼쪽 카메라의 중앙점과 오른쪽 카메라의 중앙점 사이의 거리일 수 있지만, 여기에만 한정되는 것은 아니다. 그리고 이러한 좌우 카메라 사이의 거리는 일반적으로 고정되어 있다. 하지만, 스테레오스코픽 영상의 획득하기 위한 촬영 장치의 특성에 따라서는 상기 거리가 주기적으로 또는 임의적으로 감소되거나 또는 증가될 수도 있으며, 이 경우에 Ca2 블록에는 상기 거리 정보가 주기적으로 또는 수시로 포함될 수 있다.
상기 Ca2 블록에 포함되는 좌우 카메라 사이의 거리 정보는 복호화 장치가 구비된 디스플레이 장치에서 스테레오스코픽 영상을 재구성함에 있어서 입체 영상의 중심점을 알 수 있도록 한다. 그리고 상기 거리 정보는 카메라와 피사체 사이의 거리를 알 수 있도록 함으로써, 디스플레이되는 스테레오스코픽 영상에 대한 실감나는 입체감을 재현하는데도 도움을 줄 수 있다. 예컨대, 입체 영상을 보는 시청자에게 입체 영상의 시청을 위한 최적의 거리 정보를 주거나 피사체와 카메라 사이의 실제 거리 정보를 제공할 수도 있다.
Ca3 블록에는 좌우 카메라를 통해서 캡쳐되는 영상의 초당 프레임 수(frame/sec, fps)에 관한 정보, 즉 프레임율(Frame Rate)에 관한 정보가 포함된 다. 상기 프레임율에 관한 정보는 예컨대, 좌우 카메라 각각의 프레임율을 나타내거나 또는 특정한 기준(예컨대 초당 30프레임)과 차이를 보이는 경우에 그 차이를 나타내는 정보(예컨대 왼쪽 카메라를 통해서 초당 10프레임이 캡처된 경우에 그 프레임율을 나타내는 10이라는 정보 또는 상기 기준값과의 차이값인 20에 관한 정보)일 수 있다. 또는, 실시예에 따라서는 좌우 카메라 사이의 프레임율의 차이값(예컨대 왼쪽 카메라의 초당 프레임 수가 30이고 오른쪽 카메라의 초당 프레임 수가 10인 경우에 그 차이값인 20에 관한 정보)이 상기 Ca3 블록에 포함될 수도 있다. 이러한 프레임율에 관한 정보는 주기적으로 Ca3 블록에 포함시켜 전송하거나 또는 필요한 경우에만 Ca3 블록에 추가하여 전송할 수 있다.
현재 널리 사용되고 있는 디지털 카메라의 경우에 씨모스 이미지 센서(CMOS Image Sensor) 또는 CCD(Charged Coupled Device) 등과 같은 촬상 장치를 구비하고 있다. 이러한 디지털 카메라는 일반적으로 초당 30프레임의 영상을 캡쳐하도록 구성되어 있지만, 특수한 사정이 있는 경우 예컨대, 조명이 어두운 경우 등에는 이보다 더 적은 프레임의 영상, 예컨대 초당 15프레임 또는 초당 10프레임 이하로 영상을 캡쳐할 수도 있다. 특히, 조명(광원)이 한 쪽에 치우쳐서 있는 경우, 예컨대 왼쪽에 치우쳐서 있는 경우에는 왼쪽 카메라의 경우에는 조도가 높아서 초당 30프레임의 영상을 만들어 내지만 오른쪽 카메라의 경우에는 조도가 낮아서 초당 15프레임의 영상 밖에는 만들어내지 못할 수가 있다.
이러한 경우에 왼쪽 카메라와 오른쪽 카메라에서 캡쳐되는 스테레오스코픽 영상의 초당 프레임 수가 다르게 되는데, 이를 고려하지 않고 디스플레이 장치에서 상기 스테레오스코픽 영상을 그대로 재생하는 경우에는 자연스럽고 실감나는 입체 영상을 재현하기가 어렵다. 따라서 부호화 장치에서는 이러한 초당 프레임 수의 차이를 보정한 다음 부호화 처리를 할 수도 있지만, 이 경우 전송되는 데이터 양이 증가하는 단점이 있다. 또는, 복호화 장치에서 이러한 초당 프레임 수의 차이를 보정하여 스테레오스코픽 영상을 복원한 다음 디스플레이 장치를 통해서 재생할 필요가 있으며, 이를 위해서는 전술한 각 카메라별 초당 프레임 수에 관한 정보가 복호화 장치가 구비된 디스플레이 장치로 전송될 필요가 있다.
상기 Ca3 블록에 포함된 초당 프레임 수에 관한 정보에 따라 디스플레이 장치에서 스테레오스코픽 영상을 보정하는 방법은 여러 가지 방법으로 구현이 가능하며, 본 발명에서는 이에 대하여 아무런 제한이 없다. 예를 들어, 왼쪽 카메라의 초당 프레임 수가 30프레임이고 오른쪽 카메라의 초당 프레임 수가 15프레임인 경우에, 부족한 15프레임의 우영상은 이전 우영상의 프레임을 반복하여 재생하거나 또는 이전 영상과 이후 영상을 이용하여 부족한 우영상의 프레임을 보간하여 재생할 수도 있다.
Ca4 블록에는 좌영상과 우영상의 동기화에 관한 정보(Synchronization-related Information)가 포함된다. 예를 들어, 전술한 바와 같이 좌우 각 카메라의 초당 프레임 수가 다를 경우에, 정확한 입체 영상의 재현을 위해서는 좌우 영상의 동기화가 필수적이다. 그리고 좌우 영상의 데이터 양이 차이가 나는 경우에는 좌우 영상 간에 부호화 처리에 소요되는 시간이 다소 차이가 생기거나 또는 저장 매체에 저장되어 있는 콘텐츠를 차후에 디스플레이 장치에서 이용하고자 할 경우 등에는 좌우 영상 간의 동기화를 위한 정보가 필요하다. 따라서 Ca4 블록에 포함되는 좌영상과 우영상의 동기화에 관한 정보는 디스플레이 장치에서 좌영상과 우영상 간의 시간상의 오차를 보정하여, 정확한 입체 영상을 재현하는데 도움을 준다.
Ca5 블록에는 스테레오스코픽 영상을 캡쳐하는데 사용되는 좌우 카메라의 종류에 관한 정보가 포함된다. 상기 카메라의 종류에 관한 정보란 예컨대 카메라가 완전 고화질(Full High Definition, Full HD) 카메라인지, HD급 카메라인지, 또는 SD급 카메라인지 등과 같은 카메라의 화질에 관한 정보 및/또는 CCD 이미지 센서나 CMOS 이미지 센서 등과 같은 촬상 수단에 관한 정보 등일 수 있으며, 여기에만 한정되는 것은 아니다. 이러한 좌우 카메라의 종류에 관한 정보는 디스플레이 장치에서 입체 영상을 재현하는데 있어서 화질의 정확도나 입체감을 더 정확하게 재현하는데 도움을 준다.
계속해서 도 5 및 도 6b를 참조하여 본 발명의 실시예에 따른 부호화된 스테레오스코픽 영상의 데이터에 대한 파일 포맷(100)의 코덱 헤더부(130)에 대하여 설명한다.
파일 포맷(100)의 코덱 헤더부(130)에는 스테레오스코픽 영상의 부호화와 관련된 정보가 포함된다. 예를 들어, 도 6b에 도시된 바와 같은 3가지 종류의 정보(Co1 블록 내지 Co3 블록, 이들 각 블록에 포함되는 정보의 구체적 내용에 대해서는 후술한다) 모두가 포함되거나 또는 이들 각각은 스테레오스코픽 영상의 부호화에 관련된 독립적인 정보이므로, 상기 3가지 종류의 정보 중에서 일부의 정보가 포함될 수 있다.
Co1 블록에는 디스플레이되는 영상의 종류에 관한 정보가 포함된다. 예를 들어, Co1 블록에 포함되는 정보는 영상 데이터부(150)에 포함되는 이미지 정보가 모노스코픽 영상의 디스플레이를 위한 것인지, 스테레오스코픽 영상의 디스플레이를 위한 것인지, 또는 모노스코픽 영상과 스테레오스코픽 영상 모두를 디스플레이하기 위한 것인지를 지시하는 정보일 수 있다.
이러한 Co1 블록의 정보는 영상 데이터부(150)에 포함되는 이미지 정보의 종류를 디스플레이 장치에서 식별하기 위하여 사용된다. 그리고 디스플레이 장치에서는 현재 수신되는 이미지 정보 또는 재생하고자 하는 이미지 정보가 모노스코픽 영상인지 스테레오스코픽 영상인지를 가능한 빨리 인식하는 것이 바람직하며, 이를 위하여 상기 Co1 블록의 정보는 본 실시예에 따른 데이터 구조 또는 파일 포맷(100)에서 가능한 앞쪽에 배치할 수도 있다. 예컨대, 실시예에 따라서 상기 Co1 블록에 포함되는 정보는 기본 헤더부(110)에 포함시키는 것도 가능하다.
Co2 블록에는 디스플레이되는 영상의 구성 방법에 관한 정보가 포함된다. 예를 들어, Co1 블록에 포함된 정보가 영상 데이터부(150)에 포함되는 이미지 정보가 스테레오스코픽 영상이라고 지시하는 경우에, Co2 블록에는 상기 스테레오스코픽 영상이 어떻게 구성되었는지를 나타내는 정보가 포함될 수 있다. 전술한 바와 같이, 스테레오스코픽 영상은 통합합성영상을 기존의 부호화 방법을 이용하여 부호화하거나 또는 좌우 영상 모두를 멀티-뷰 프로파일에 따라서 부호화하는 등 여러 가지 방법으로 부호화될 수 있으며, 상기 Co2 블록에는 이에 대한 정보가 포함될 수 있다. 그리고 배리어 타입의 디스플레이 장치를 이용하여 통합합성영상을 디스플레이하는 경우에, 전술한 바와 같이 통합합성영상은 여러 가지 방법으로 구성이 가능한데(예컨대, 좌우 영상이 수직 라인이 교대로 배열된 타입이거나 또는 수평 라인이 교대로 배열된 타입 등), Co2 블록에는 이에 대한 정보도 포함될 수 있다.
또한, 예를 들어 디스플레이 장치에서 수신한 콘텐츠가 좌영상의 전체와 우영상의 짝수 번째 수직 라인을 더하여 만들어진 스테레오스코픽 영상이라고 하자. 이 경우, 디스플레이 장치에서는 왼쪽 영상을 재생하면 일반 모노스코픽 영상을 볼 수 있고, 수신된 콘텐츠 전체를 재생하면 입체 영상을 볼 수 있다. 즉, 배리어 타입의 디스플레이 장치의 경우에 모노스코픽 영상과 입체 영상을 모두 볼 수 있는데, 이를 위해서는 수신된 정보에 모노스코픽 영상과 입체 영상을 구성하는 방법에 관한 정보가 포함되어야 한다. 따라서 이러한 모노스코픽 영상과 입체 영상을 구성하는 방법에 관한 정보 등도 상기 Co2 블록에 포함될 수 있다.
Co3 블록에는 스테레오스코픽 영상의 부호화에 사용된 방법에 관련된 정보, 예컨대 코덱의 종류를 나타내는 정보가 포함된다. 여기서 스테레오스코픽 영상의 부호화란 좌영상과 우영상을 각각 부호화하거나 또는 통합합성영상을 부호화하는 것 등이 해당될 수 있다. 이러한 스테레오스코픽 영상은 기존의 여러 가지 방법, 즉 JPEG이나 MPEG-1, MPEG-2, MPEG-4, H.264/AVC, VC-1 등과 같은 다양한 코덱 방법을 사용하여 부호화될 수 있으며, Co3 블록에는 이에 대한 정보가 포함된다. 이러한 Co3 블록은 여러 가지 코덱 방법을 지원하는 복호화 장치에서 스테레오스코픽 영상을 복원하는데 있어서 사용할 코덱 방법을 지시하거나 또는 특정 코덱 방법만 지원하는 복호화 장치에서는 수신된 영상 데이터가 자신이 디코딩할 수 있는 데이터인지를 판단하는데 이용될 수 있다. 따라서 이러한 Co3 블록의 정보도, 전술한 Co1 블록의 정보와 마찬가지로, 본 실시예에 따른 데이터 구조 또는 파일 포맷(100)에서 가능한 앞쪽에 배치할 수도 있다.
계속해서 도 5 및 도 6c를 참조하여 본 발명의 실시예에 따른 부호화된 스테레오스코픽 영상의 데이터에 대한 파일 포맷(100)의 디스플레이 헤더부(140)에 대하여 설명한다.
본 실시예에 따른 파일 포맷(100)의 디스플레이 헤더부(140)에는 스테레오스코픽 영상의 디스플레이 장치와 관련된 정보가 포함된다. 예를 들어, 도 6c에 도시된 바와 같은 2가지 종류의 정보(D1 블록 및 D2 블록, 이들 각 블록에 포함되는 정보의 구체적 내용에 대해서는 후술한다) 모두가 포함되거나 또는 이들 각각은 부호화된 스테레오스코픽 영상의 특성에 관련된 독립적인 정보이므로, 상기 2가지 종류의 정보 중에서 하나의 정보만이 포함될 수 있다. 이러한 디스플레이 헤더부(140)는 예컨대 배리어 타입의 디스플레이 장치에서 배리어 패턴과 관련된 정보가 포함될 수 있다.
D1 블록에는 스테레오스코픽 영상이 최적화되어 있는 배리어 패턴의 종류에 관한 정보가 포함된다. 전술한 바와 같이, 배리어 패턴의 종류는 1자형, 톱니형, 또는 대각선형 등이 있을 수 있는데, D1 블록에는 이에 대한 정보가 포함된다. 그리고 D2 블록에는 스테레오스코픽 영상이 최적화되어 있는 배리어 패턴의 간격에 관한 정보가 포함된다. 배리어 패턴의 간격은 예컨대, 화면 전체에 걸쳐서 간격이 일정할 수도 있고, 화면의 중앙 부분보다 화면의 가장 자리 부분에서의 배리어 패턴의 간격을 더 크거나 또는 더 작게 형성할 수 있는데, D2 블록에는 이에 대한 정보가 포함된다.
일반적으로 좌우 카메라를 통해서 획득한 스테레오스코픽 영상을 이용하여 콘텐츠를 제작하는 단계에서 디스플레이 장치의 배리어 패턴을 감안하여 이미지 정보를 가공하거나 보정하는 과정, 즉 콘텐츠 제작의 조정 작업을 거친다. 이것은 현재 여러 가지 종류의 배리어 패턴이 존재하고 또한 배리어 패턴의 간격도 여러 가지가 있는 것을 고려하여, 해당 콘텐츠를 특정 배리어 패턴에 최적화되어 콘텐츠로 만들기 위해서이다. 물론, 콘텐츠의 배리어 패턴과 디스플레이 장치의 배리어 패턴이 다르다고 해서 입체 영상을 보는 것이 불가능하지는 않지만, 상기 배리어 패턴이 일치하지 않으면 입체 영상의 입체감이나 생동감이 저하될 수밖에 없다. 따라서 D1 블록 및/또는 D2 블록에 포함되어 있는 정보는 디스플레이 장치에게 수신되는 콘텐츠(즉, 영상 데이터부(150)에 포함되는 이미지 정보)가 최적화되어 있는 배리어 패턴에 관한 정보를 알려준다. 그리고 디스플레이 장치에 구비되어 있는 배리어 패턴이 D1 블록 및/또는 D2 블록에 포함되어 있는 정보가 지시하는 배리어 패턴과 다를 경우에는, 디스플레이 장치의 배리어 패턴에 적합하도록 영상 데이터부(150)에 포함되는 이미지 정보를 보정하여 디스플레이하도록 할 수도 있다.
이상에서 본 발명의 일 실시예에 대하여 상세하게 설명하였지만, 이러한 실시예는 단지 예시적은 것으로서, 본 발명의 기술 사상은 여러 가지 방법으로 구현 하는 것이 가능하다는 것은 당업자에게 자명하다.
디스플레이 장치로 전송되는 기존의 부호화된 영상의 데이터에 대한 파일 포맷은 일반적으로 모노스코픽 영상에 대한 것으로서, 스테레오스코픽 영상의 특성을 고려하지 않고 있다. 따라서 이러한 기존의 파일 포맷으로는 디스플레이 장치에서 실감나는 스테레오스코픽 영상을 재현하는데 필요한 모든 정보를 포함시킬 수가 없다. 본 발명에 의하면, 스테레오스코픽 영상이나 또는 모노스코픽 영상과 스테레오스코픽 영상을 함께 재생할 수 있는 디스플레이 장치에 적합한 부호화된 스테레오스코픽 영상의 데이터에 대한 새로운 파일 포맷을 제안함으로써, 스테레오스코픽 영상을 위한 디스플레이 장치에서 실감나는 입체 영상을 재생하는 것이 가능하다.
특히, 본 발명에 의하면 상기 파일 포맷에 배리어 타입의 디스플레이 장치에 구비된 배리어 패턴에 관한 정보도 포함시킬 수 있으며, 이러한 배리어 패턴에 관한 정보를 이용하면 디스플레이 장치에 의하여 배리어 패턴에 최적화된 입체 영상을 재현하는 것이 가능하다.

Claims (14)

  1. 부호화된 스테레오스코픽 영상의 데이터를 소정의 파일 포맷으로 만들어서 복호화 장치로 전송하는 방법에 있어서, 상기 파일 포맷은
    상기 부호화된 스테레오스코픽 영상의 이미지 정보를 포함하는 영상 데이터부; 및
    상기 영상 데이터부에 포함된 상기 부호화된 스테레오스코픽 영상의 이미지 정보를 디코딩하고 재생하기 위한 메타데이터를 포함하는 헤더부를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
  2. 제1항에 있어서, 상기 헤더부는 상기 스테레오스코픽 영상을 획득하는데 사용된 좌우 카메라와 관련된 정보를 포함하는 카메라 헤더부를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
  3. 제2항에 있어서, 상기 카메라 헤더부는 상기 스테레오스코픽 영상을 구성하는 좌영상과 우영상의 디스패러티 정보를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
  4. 제2항에 있어서, 상기 카메라 헤더부는 상기 좌우 카메라 사이의 거리에 관한 정보를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
  5. 제2항에 있어서, 상기 카메라 헤더부는 상기 좌우 카메라를 통해 캡쳐되는 좌우 영상의 프레임율에 관한 정보를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
  6. 제2항에 있어서, 상기 카메라 헤더부는 상기 스테레오스코픽 영상을 구성하는 좌영상과 우영상의 동기화에 관한 정보를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
  7. 제2항에 있어서, 상기 카메라 헤더부는 상기 스테레오스코픽 영상을 획득하는데 사용되는 좌우 카메라의 종류에 관한 정보를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
  8. 제1항에 있어서, 상기 헤더부는 상기 스테레오스코픽 영상의 부호화와 관련된 정보를 포함하는 코덱 헤더부를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
  9. 제8항에 있어서, 상기 코덱 헤더부는 상기 영상 데이터부에 포함되는 이미지 정보가 스테레오스코픽 영상에 대한 것인지 또는 다른 종류의 영상에 대한 것인지를 지시하는 정보를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
  10. 제8항에 있어서, 상기 코덱 헤더부는 상기 영상 데이터부에 포함되는 이미지 정보의 구성 방법에 관한 정보를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
  11. 제8항에 있어서, 상기 코덱 헤더부는 상기 영상 데이터부에 포함되는 이미지 정보를 얻는데 사용된 부호화 방법에 관련된 정보를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
  12. 제1항에 있어서, 상기 헤더부는 상기 부호화된 스테레오스코픽 영상의 데이터를 수신하여 재생하기 위한 배리어 타입의 디스플레이 장치와 관련된 정보를 포함하는 디스플레이 헤더부를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
  13. 제12항에 있어서, 상기 디스플레이 헤더부는 상기 영상 데이터부에 포함되는 이미지 정보가 어떤 종류의 배리어 패턴을 갖는 상기 배리어 타입의 디스플레이 장치에 최적화되어 있는지를 나타내는 정보를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
  14. 제12항에 있어서, 상기 디스플레이 헤더부는 상기 영상 데이터부에 포함되는 이미지 정보가 어떤 배리어 패턴의 간격을 갖는 상기 배리어 타입의 디스플레이 장치에 최적화되어 있는지를 나타내는 정보를 포함하는 것을 특징으로 하는 스테레오스코픽 영상 데이터의 전송 방법.
KR1020060100258A 2006-09-04 2006-10-16 스테레오스코픽 영상 데이터의 전송 방법 KR100716142B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2009527295A JP2010503310A (ja) 2006-09-04 2007-08-29 符号化されたステレオスコピック映像データのファイルフォーマット
PCT/KR2007/004151 WO2008030011A1 (en) 2006-09-04 2007-08-29 File format for encoded stereoscopic image/video data
US12/439,969 US20100182403A1 (en) 2006-09-04 2007-08-29 File format for encoded stereoscopic image/video data

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020060084510 2006-09-04
KR20060084510 2006-09-04

Publications (1)

Publication Number Publication Date
KR100716142B1 true KR100716142B1 (ko) 2007-05-11

Family

ID=38270151

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060100258A KR100716142B1 (ko) 2006-09-04 2006-10-16 스테레오스코픽 영상 데이터의 전송 방법

Country Status (4)

Country Link
US (1) US20100182403A1 (ko)
JP (1) JP2010503310A (ko)
KR (1) KR100716142B1 (ko)
CN (1) CN101513077A (ko)

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008150111A1 (en) * 2007-06-07 2008-12-11 Enhanced Chip Technology Inc. Format for encoded stereoscopic image data file
WO2008156318A3 (en) * 2007-06-19 2009-02-05 Korea Electronics Telecomm Metadata structure for storing and playing stereoscopic data, and method for storing stereoscopic content file using this metadata
WO2008153313A3 (en) * 2007-06-12 2009-02-05 Samsung Electronics Co Ltd System and method for generating and regenerating 3d image files based on 2d image media standards
WO2008153312A3 (en) * 2007-06-11 2009-02-12 Samsung Electronics Co Ltd System and method for generating and regenerating 3d image files based on 2d image media standards
WO2008153294A3 (en) * 2007-06-11 2009-03-05 Samsung Electronics Co Ltd Method and apparatus for generating header information of stereoscopic image
WO2009048216A1 (en) * 2007-10-10 2009-04-16 Electronics And Telecommunications Research Institute Metadata structure for storing and playing stereoscopic data, and method for storing stereoscopic content file using this metadata
WO2009031872A3 (en) * 2007-09-07 2009-04-30 Samsung Electronics Co Ltd System and method for generating and reproducing 3d stereoscopic image file including 2d image
WO2009093881A1 (ko) * 2008-01-25 2009-07-30 Korea Electronics Technonlogy Institute 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오 파일을 기록한 컴퓨터로 판독 가능한 기록매체
WO2009157668A3 (en) * 2008-06-24 2010-03-25 Samsung Electronics Co., Ltd. Method and apparatus for outputting and displaying image data
KR100959534B1 (ko) * 2007-10-08 2010-05-27 엘지전자 주식회사 Ｍａｆ 파일 포맷을 구성하는 방법 및 이를 이용한 비디오 신호의 디코딩 장치
WO2011021768A3 (ko) * 2009-08-19 2011-04-14 한국전자통신연구원 영상 처리 장치 및 방법
WO2011013995A3 (en) * 2009-07-27 2011-04-28 Samsung Electronics Co., Ltd. Method and apparatus for generating 3-dimensional image datastream including additional information for reproducing 3-dimensional image, and method and apparatus for receiving the 3-dimensional image datastream
US20110122230A1 (en) * 2008-07-21 2011-05-26 Thomson Licensing Coding device for 3d video signals
WO2011122755A1 (ko) * 2010-04-02 2011-10-06 전자부품연구원 3차원 방송을 위한 데이터 코덱 방법 및 장치
KR101090764B1 (ko) 2008-11-20 2011-12-08 주식회사 넷앤티비 장면 기술자를 이용한 콘텐츠 재생 방법 및 장치, 이를 위한 부호화 방법
WO2011162474A2 (ko) 2010-06-24 2011-12-29 주식회사 이시티 스트레오스코픽 동영상 파일의 구성 방법
KR101180870B1 (ko) 2007-06-11 2012-09-07 삼성전자주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
KR101357755B1 (ko) 2013-04-15 2014-02-05 세종대학교산학협력단 카메라 파라미터를 이용한 다시점 영상의 부호화 장치 및 생성 장치, 그 방법과, 이를 수행하기 위한 프로그램이 기록된 기록 매체
KR101396332B1 (ko) 2007-10-10 2014-05-16 삼성전자주식회사 3차원 영상 시청시 발생하는 피로도 감소 방법 및 장치, 그리고 저피로도 3차원 영상 데이터 스트림 생성 방법 및 장치
KR101396619B1 (ko) 2007-12-20 2014-05-16 삼성전자주식회사 3ｄ 영상에 관한 부가 정보를 포함하는 3ｄ 영상파일을생성 및 재생하기 위한 시스템 및 방법
US8780173B2 (en) 2007-10-10 2014-07-15 Samsung Electronics Co., Ltd. Method and apparatus for reducing fatigue resulting from viewing three-dimensional image display, and method and apparatus for generating data stream of low visual fatigue three-dimensional image
US8824820B2 (en) 2008-03-25 2014-09-02 Samsung Electronics Co., Ltd. Method and apparatus for providing and reproducing three-dimensional video content and recording medium thereof
US8842903B2 (en) 2007-12-10 2014-09-23 Samsung Electronics Co., Ltd. System and method for generating and reproducing image file including 2D image and 3D stereoscopic image
US8861550B2 (en) 2009-04-30 2014-10-14 Samsung Electronics Co., Ltd. Apparatus and method for transmitting stereoscopic image data
KR101453084B1 (ko) 2007-09-07 2014-10-27 삼성전자주식회사 3ｄ 영상 파일을 생성 및 재생하기 위한 휴대 단말기 및 방법
US8922621B2 (en) 2007-10-19 2014-12-30 Samsung Electronics Co., Ltd. Method of recording three-dimensional image data
KR101480186B1 (ko) * 2007-12-10 2015-01-07 삼성전자주식회사 2ｄ 영상과 3ｄ 입체영상을 포함하는 영상파일을 생성 및재생하기 위한 시스템 및 방법
KR20150037200A (ko) * 2013-09-30 2015-04-08 엘지전자 주식회사 비디오 스트림 송/수신 장치 및 비디오 스트림 송/수신 방법

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8400497B2 (en) 2007-09-07 2013-03-19 Samsung Electronics Co., Ltd Method and apparatus for generating stereoscopic file
US20090148038A1 (en) * 2007-12-10 2009-06-11 Youichi Sawachi Distance image processing apparatus and method
KR101591085B1 (ko) * 2008-05-19 2016-02-02 삼성전자주식회사 영상 파일 생성 및 재생 장치 및 방법
US20090317062A1 (en) * 2008-06-24 2009-12-24 Samsung Electronics Co., Ltd. Image processing method and apparatus
DE102008049921A1 (de) * 2008-09-29 2010-04-15 Mobotix Ag Verfahren zur Videodatenstrom-Erzeugung
RU2502214C2 (ru) * 2008-09-30 2013-12-20 Панасоник Корпорэйшн Носитель записи, устройство воспроизведения, системная бис, способ воспроизведения, очки и устройство отображения для трехмерных изображений
KR101154051B1 (ko) * 2008-11-28 2012-06-08 한국전자통신연구원 다시점 영상 송수신 장치 및 그 방법
KR101176065B1 (ko) * 2008-12-22 2012-08-24 한국전자통신연구원 스테레오스코픽 영상에 관한 데이터를 전송하는 방법, 스테레오스코픽 영상을 재생하는 방법, 및 스테레오스코픽 영상 데이터의 파일 생성 방법
JP5627860B2 (ja) 2009-04-27 2014-11-19 三菱電機株式会社 立体映像配信システム、立体映像配信方法、立体映像配信装置、立体映像視聴システム、立体映像視聴方法、立体映像視聴装置
US8291322B2 (en) * 2009-09-30 2012-10-16 United Video Properties, Inc. Systems and methods for navigating a three-dimensional media guidance application
KR20110041736A (ko) * 2009-10-16 2011-04-22 삼성전자주식회사 디스플레이장치 및 영상처리방법
US20110137727A1 (en) * 2009-12-07 2011-06-09 Rovi Technologies Corporation Systems and methods for determining proximity of media objects in a 3d media environment
JP2013077863A (ja) * 2010-02-09 2013-04-25 Panasonic Corp 立体表示装置および立体表示方法
KR20110115087A (ko) * 2010-04-14 2011-10-20 삼성전자주식회사 3차원 영상 데이터를 부호화하는 방법 및 장치와 복호화 방법 및 장치
KR101383775B1 (ko) 2011-05-20 2014-04-14 주식회사 케이티 화면 내 예측 방법 및 장치
JP5978695B2 (ja) * 2011-05-27 2016-08-24 株式会社Ｊｖｃケンウッド 裸眼立体ディスプレイ装置及び視点調整方法
CN107071301B (zh) * 2017-04-17 2019-11-22 宁波视睿迪光电有限公司 一种多目成像序列的存储方法及读取方法
CN112102292A (zh) * 2020-09-16 2020-12-18 深圳超多维科技有限公司 3d图像贴合精度的检测方法、装置及设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010104493A (ko) * 2000-05-02 2001-11-26 성필문 데이터통신망을 이용한 입체영상제공방법 및 그 처리장치
KR20020096203A (ko) * 2001-06-18 2002-12-31 (주)디지털국영 입체영상을 확대/축소하는 방법

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3492761B2 (ja) * 1994-04-07 2004-02-03 株式会社ソニー・コンピュータエンタテインメント 画像生成方法及び装置
JPH0822091A (ja) * 1994-07-05 1996-01-23 Canon Inc 立体画像記録方法および装置ならびに立体画像形成体
US6023277A (en) * 1996-07-03 2000-02-08 Canon Kabushiki Kaisha Display control apparatus and method
JP2000308089A (ja) * 1999-04-16 2000-11-02 Nippon Hoso Kyokai <Nhk> 立体画像符号化装置および復号化装置
JP2001326618A (ja) * 2000-05-17 2001-11-22 Nippon Telegr & Teleph Corp <Ntt> パケット多重化ストリーム評価法、パケット多重化ストリーム評価用装置、及びパケット多重化ストリーム評価用プログラム記録媒体
JP2002325254A (ja) * 2001-02-26 2002-11-08 Ando Electric Co Ltd 動画符号評価装置及びシステム
JP3888575B2 (ja) * 2001-03-19 2007-03-07 日本ビクター株式会社 番組信号の記録方法、及び記録番組制御信号の伝送方法
US7277121B2 (en) * 2001-08-29 2007-10-02 Sanyo Electric Co., Ltd. Stereoscopic image processing and display system
JP2003161912A (ja) * 2001-09-13 2003-06-06 Hit Design:Kk ３次元画像表示装置および３次元画像表示における色再現方法
KR100397511B1 (ko) * 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
JP2003250155A (ja) * 2002-02-25 2003-09-05 Ando Electric Co Ltd 動画符号評価装置及び課金システム
EP2262273A3 (en) * 2002-04-25 2013-12-04 Sharp Kabushiki Kaisha Image data creation device, image data reproduction device, and image data recording medium
EP1501316A4 (en) * 2002-04-25 2009-01-21 Sharp Kk METHOD FOR GENERATING MULTIMEDIA INFORMATION, AND DEVICE FOR REPRODUCING MULTIMEDIA INFORMATION
JP4072674B2 (ja) * 2002-09-06 2008-04-09 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
JP4243095B2 (ja) * 2002-11-25 2009-03-25 三洋電機株式会社 立体画像処理方法及びプログラム及び記録媒体
JP2004274091A (ja) * 2003-01-15 2004-09-30 Sharp Corp 画像データ作成装置、画像データ再生装置、画像データ記録方式および画像データ記録媒体
JPWO2004084560A1 (ja) * 2003-03-20 2006-06-29 富田　誠次郎 立体映像撮影表示システム
JP2004357156A (ja) * 2003-05-30 2004-12-16 Sharp Corp 映像受信装置および映像再生装置
JP2005026800A (ja) * 2003-06-30 2005-01-27 Konica Minolta Photo Imaging Inc 画像処理方法、撮像装置、画像処理装置及び画像記録装置
CN100440166C (zh) * 2003-10-22 2008-12-03 奥林巴斯株式会社 文件生成方法和文件检索方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010104493A (ko) * 2000-05-02 2001-11-26 성필문 데이터통신망을 이용한 입체영상제공방법 및 그 처리장치
KR20020096203A (ko) * 2001-06-18 2002-12-31 (주)디지털국영 입체영상을 확대/축소하는 방법

Cited By (70)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100962696B1 (ko) 2007-06-07 2010-06-11 주식회사 이시티 부호화된 스테레오스코픽 영상 데이터 파일의 구성방법
KR101288932B1 (ko) * 2007-06-07 2013-07-22 경희대학교 산학협력단 부호화된 스테레오스코픽 영상 데이터 파일의 구성방법
WO2008150111A1 (en) * 2007-06-07 2008-12-11 Enhanced Chip Technology Inc. Format for encoded stereoscopic image data file
CN101711483B (zh) * 2007-06-07 2012-05-30 升级芯片技术公司 用于立体图像编码数据文件的格式
JP2010530160A (ja) * 2007-06-07 2010-09-02 エンハンスト チップ テクノロジー インコーポレイテッド 符号化されたステレオスコピック映像データファイルのフォーマット
KR101396325B1 (ko) * 2007-06-11 2014-05-20 삼성전자주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
KR101390812B1 (ko) * 2007-06-11 2014-05-07 삼성전자주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
KR101427663B1 (ko) 2007-06-11 2014-08-08 삼성전자주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
KR101396352B1 (ko) 2007-06-11 2014-05-21 삼성전자주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
KR101396351B1 (ko) 2007-06-11 2014-05-21 삼성전자주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
KR101396337B1 (ko) 2007-06-11 2014-05-20 삼성전자주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
US9172942B2 (en) 2007-06-11 2015-10-27 Samsung Electronics Co., Ltd. Method and apparatus for generating header information of stereoscopic image data
WO2008153294A3 (en) * 2007-06-11 2009-03-05 Samsung Electronics Co Ltd Method and apparatus for generating header information of stereoscopic image
KR101396339B1 (ko) * 2007-06-11 2014-05-20 삼성전자주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
US8644597B2 (en) 2007-06-11 2014-02-04 Samsung Electronics Co., Ltd System and method for generating and regenerating 3D image files based on 2D image media standards
KR101396359B1 (ko) 2007-06-11 2014-05-19 삼성전자주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
KR101396360B1 (ko) 2007-06-11 2014-05-19 삼성전자주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
KR101396354B1 (ko) 2007-06-11 2014-05-19 삼성전자주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
KR101450145B1 (ko) 2007-06-11 2014-10-13 삼성전자 주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
KR101390813B1 (ko) * 2007-06-11 2014-05-02 삼성전자주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
KR101388265B1 (ko) 2007-06-11 2014-04-22 삼성전자주식회사 2ｄ 영상 미디어 표준을 기반으로 3ｄ 입체영상 파일을생성 및 재생하기 위한 시스템 및 방법
US8457386B2 (en) 2007-06-11 2013-06-04 Samsung Electronics Co., Ltd System and method for generating and regenerating 3D image files based on 2D image media standards
WO2008153312A3 (en) * 2007-06-11 2009-02-12 Samsung Electronics Co Ltd System and method for generating and regenerating 3d image files based on 2d image media standards
KR101180870B1 (ko) 2007-06-11 2012-09-07 삼성전자주식회사 스테레오스코픽 영상 비트스트림 생성 방법 및 장치
US8274551B2 (en) 2007-06-11 2012-09-25 Samsung Electronics Co., Ltd. Method and apparatus for generating header information of stereoscopic image data
WO2008153313A3 (en) * 2007-06-12 2009-02-05 Samsung Electronics Co Ltd System and method for generating and regenerating 3d image files based on 2d image media standards
KR101387212B1 (ko) * 2007-06-12 2014-04-21 삼성전자주식회사 2ｄ 영상 미디어 표준을 기반으로 3ｄ 입체영상 파일을생성 및 재생하기 위한 시스템 및 방법
KR101276605B1 (ko) * 2007-06-19 2013-06-19 한국전자통신연구원 스테레오스코픽 데이터의 저장 및 재생을 위한 메타데이터구조 및 이를 이용하는 스테레오스코픽 콘텐츠 파일의 저장방법
WO2008156318A3 (en) * 2007-06-19 2009-02-05 Korea Electronics Telecomm Metadata structure for storing and playing stereoscopic data, and method for storing stereoscopic content file using this metadata
KR101310214B1 (ko) 2007-06-19 2013-09-24 한국전자통신연구원 스테레오스코픽 데이터의 저장 및 재생을 위한 메타데이터 구조 및 이를 이용하는 스테레오스코픽 콘텐츠 파일의 저장 방법
KR101362647B1 (ko) 2007-09-07 2014-02-12 삼성전자주식회사 2ｄ 영상을 포함하는 3ｄ 입체영상 파일을 생성 및재생하기 위한 시스템 및 방법
US8508579B2 (en) 2007-09-07 2013-08-13 Samsung Electronics Co., Ltd System and method for generating and reproducing 3D stereoscopic image file including 2D image
KR101453084B1 (ko) 2007-09-07 2014-10-27 삼성전자주식회사 3ｄ 영상 파일을 생성 및 재생하기 위한 휴대 단말기 및 방법
WO2009031872A3 (en) * 2007-09-07 2009-04-30 Samsung Electronics Co Ltd System and method for generating and reproducing 3d stereoscopic image file including 2d image
KR100959534B1 (ko) * 2007-10-08 2010-05-27 엘지전자 주식회사 Ｍａｆ 파일 포맷을 구성하는 방법 및 이를 이용한 비디오 신호의 디코딩 장치
KR101457893B1 (ko) 2007-10-10 2014-11-04 삼성전자주식회사 3차원 영상 시청시 발생하는 피로도 감소 방법 및 장치,그리고 저피로도 3차원 영상 데이터 스트림 생성 방법 및장치
WO2009048216A1 (en) * 2007-10-10 2009-04-16 Electronics And Telecommunications Research Institute Metadata structure for storing and playing stereoscopic data, and method for storing stereoscopic content file using this metadata
US8780173B2 (en) 2007-10-10 2014-07-15 Samsung Electronics Co., Ltd. Method and apparatus for reducing fatigue resulting from viewing three-dimensional image display, and method and apparatus for generating data stream of low visual fatigue three-dimensional image
KR101439850B1 (ko) 2007-10-10 2014-09-17 삼성전자주식회사 3차원 영상 시청시 발생하는 피로도 감소 방법 및 장치, 그리고 저피로도 3차원 영상 데이터 스트림 생성 방법 및 장치
KR101398168B1 (ko) * 2007-10-10 2014-05-22 한국전자통신연구원 스테레오스코픽 데이터의 저장 및 재생을 위한 메타데이터구조 및 이를 이용하는 스테레오스코픽 콘텐츠 파일의 저장방법
KR101396332B1 (ko) 2007-10-10 2014-05-16 삼성전자주식회사 3차원 영상 시청시 발생하는 피로도 감소 방법 및 장치, 그리고 저피로도 3차원 영상 데이터 스트림 생성 방법 및 장치
CN101897193A (zh) * 2007-10-10 2010-11-24 韩国电子通信研究院 用于存储和播放立体数据的元数据结构、以及用于使用该元数据来存储立体内容文件的方法
KR101396356B1 (ko) * 2007-10-10 2014-05-16 삼성전자주식회사 3차원 영상 시청시 발생하는 피로도 감소 방법 및 장치, 그리고 저피로도 3차원 영상 데이터 스트림 생성 방법 및 장치
KR101396327B1 (ko) * 2007-10-10 2014-05-16 삼성전자주식회사 3차원 영상 시청시 발생하는 피로도 감소 방법 및 장치, 그리고 저피로도 3차원 영상 데이터 스트림 생성 방법 및 장치
US8396906B2 (en) 2007-10-10 2013-03-12 Electronics And Telecommunications Research Institute Metadata structure for storing and playing stereoscopic data, and method for storing stereoscopic content file using this metadata
US8922621B2 (en) 2007-10-19 2014-12-30 Samsung Electronics Co., Ltd. Method of recording three-dimensional image data
KR101533114B1 (ko) * 2007-10-19 2015-07-03 삼성전자주식회사 입체영상 데이터를 수록한 기록매체 및 상기 입체영상 데이터를 기록하는 방법
KR101480186B1 (ko) * 2007-12-10 2015-01-07 삼성전자주식회사 2ｄ 영상과 3ｄ 입체영상을 포함하는 영상파일을 생성 및재생하기 위한 시스템 및 방법
US8842903B2 (en) 2007-12-10 2014-09-23 Samsung Electronics Co., Ltd. System and method for generating and reproducing image file including 2D image and 3D stereoscopic image
KR101396619B1 (ko) 2007-12-20 2014-05-16 삼성전자주식회사 3ｄ 영상에 관한 부가 정보를 포함하는 3ｄ 영상파일을생성 및 재생하기 위한 시스템 및 방법
US8659642B2 (en) 2008-01-25 2014-02-25 Korea Electronics Technology Institute Stereoscopic video file format and computer readable recording medium in which stereoscopic video file is recorded according thereto
KR100924757B1 (ko) 2008-01-25 2009-11-05 전자부품연구원 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오파일을 기록한 컴퓨터로 판독 가능한 기록매체
WO2009093881A1 (ko) * 2008-01-25 2009-07-30 Korea Electronics Technonlogy Institute 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오 파일을 기록한 컴퓨터로 판독 가능한 기록매체
US8824820B2 (en) 2008-03-25 2014-09-02 Samsung Electronics Co., Ltd. Method and apparatus for providing and reproducing three-dimensional video content and recording medium thereof
KR101506219B1 (ko) 2008-03-25 2015-03-27 삼성전자주식회사 3차원 영상 컨텐츠 제공 방법, 재생 방법, 그 장치 및 그기록매체
EP2292019A4 (en) * 2008-06-24 2014-04-30 Samsung Electronics Co Ltd METHOD AND DEVICE FOR PRODUCTION AND DISPLAY OF DATA
CN102077600A (zh) * 2008-06-24 2011-05-25 三星电子株式会社 输出和显示图像数据的方法和设备
EP2292019A2 (en) * 2008-06-24 2011-03-09 Samsung Electronics Co., Ltd. Method and apparatus for outputting and displaying image data
WO2009157668A3 (en) * 2008-06-24 2010-03-25 Samsung Electronics Co., Ltd. Method and apparatus for outputting and displaying image data
US20110122230A1 (en) * 2008-07-21 2011-05-26 Thomson Licensing Coding device for 3d video signals
KR101090764B1 (ko) 2008-11-20 2011-12-08 주식회사 넷앤티비 장면 기술자를 이용한 콘텐츠 재생 방법 및 장치, 이를 위한 부호화 방법
US8861550B2 (en) 2009-04-30 2014-10-14 Samsung Electronics Co., Ltd. Apparatus and method for transmitting stereoscopic image data
WO2011013995A3 (en) * 2009-07-27 2011-04-28 Samsung Electronics Co., Ltd. Method and apparatus for generating 3-dimensional image datastream including additional information for reproducing 3-dimensional image, and method and apparatus for receiving the 3-dimensional image datastream
US9392256B2 (en) 2009-07-27 2016-07-12 Samsung Electronics Co., Ltd. Method and apparatus for generating 3-dimensional image datastream including additional information for reproducing 3-dimensional image, and method and apparatus for receiving the 3-dimensional image datastream
WO2011021768A3 (ko) * 2009-08-19 2011-04-14 한국전자통신연구원 영상 처리 장치 및 방법
WO2011122755A1 (ko) * 2010-04-02 2011-10-06 전자부품연구원 3차원 방송을 위한 데이터 코덱 방법 및 장치
WO2011162474A2 (ko) 2010-06-24 2011-12-29 주식회사 이시티 스트레오스코픽 동영상 파일의 구성 방법
KR101357755B1 (ko) 2013-04-15 2014-02-05 세종대학교산학협력단 카메라 파라미터를 이용한 다시점 영상의 부호화 장치 및 생성 장치, 그 방법과, 이를 수행하기 위한 프로그램이 기록된 기록 매체
KR20150037200A (ko) * 2013-09-30 2015-04-08 엘지전자 주식회사 비디오 스트림 송/수신 장치 및 비디오 스트림 송/수신 방법
KR102139532B1 (ko) * 2013-09-30 2020-07-30 엘지전자 주식회사 비디오 스트림 송/수신 장치 및 비디오 스트림 송/수신 방법

Also Published As

Publication number Publication date
US20100182403A1 (en) 2010-07-22
JP2010503310A (ja) 2010-01-28
CN101513077A (zh) 2009-08-19

Similar Documents

Publication Publication Date Title
KR100716142B1 (ko) 스테레오스코픽 영상 데이터의 전송 방법
US10567728B2 (en) Versatile 3-D picture format
US9479755B2 (en) Process and system for encoding and playback of stereoscopic video sequences
JP5482254B2 (ja) 受信装置、送信装置、通信システム、表示制御方法、プログラム、及びデータ構造
US20090015662A1 (en) Method and apparatus for encoding and decoding stereoscopic image format including both information of base view image and information of additional view image
US20110304618A1 (en) Calculating disparity for three-dimensional images
US8218855B2 (en) Method and apparatus for receiving multiview camera parameters for stereoscopic image, and method and apparatus for transmitting multiview camera parameters for stereoscopic image
US20110273542A1 (en) Broadcast receiver and video data processing method thereof
US20110149037A1 (en) Method and system for encoding a 3D video signal, encoder for encoding a 3-D video signal, encoded 3D video signal, method and system for decoding a 3D video signal, decoder for decoding a 3D video signal.
JP2006352876A (ja) 映像送信及び受信方法と装置、及びその伝送ストリーム構造
JP2012186781A (ja) 画像処理装置および画像処理方法
JP2006191357A (ja) 再生装置および再生プログラム
WO2008030011A1 (en) File format for encoded stereoscopic image/video data
US10037335B1 (en) Detection of 3-D videos
CH706886A2 (it) Metodo per la generazione, trasmissione e ricezione di immagini stereoscopiche e relativi dispositivi.
JP2006140618A (ja) ３次元映像情報記録装置及びプログラム
JP2007312407A (ja) 立体画像表示装置およびその方法
CN104205824A (zh) 产生、传送和重构立体视频流的方法
TW201304540A (zh) 記錄裝置、記錄方法、再生裝置、再生方法、程式、及記錄再生裝置
KR101114572B1 (ko) 스테레오스코픽 영상 신호의 2차원 영상 신호로의 변환방법 및 변환 장치
Salman et al. Overview: 3D Video from capture to Display
US20140078255A1 (en) Reproduction device, reproduction method, and program
GB2470402A (en) Transmitting three-dimensional (3D) video via conventional monoscopic (2D) channels as a multiplexed, interleaved data stream

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130503

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20140507

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20151111

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20170322

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20180319

Year of fee payment: 12