KR100747550B1 - Method for providing three dimensional image service based on DMB, Apparatus and Method of Decoding for three dimensional image service based on DMB - Google Patents

Method for providing three dimensional image service based on DMB, Apparatus and Method of Decoding for three dimensional image service based on DMB Download PDF

Info

Publication number
KR100747550B1
KR100747550B1 KR1020060001987A KR20060001987A KR100747550B1 KR 100747550 B1 KR100747550 B1 KR 100747550B1 KR 1020060001987 A KR1020060001987 A KR 1020060001987A KR 20060001987 A KR20060001987 A KR 20060001987A KR 100747550 B1 KR100747550 B1 KR 100747550B1
Authority
KR
South Korea
Prior art keywords
image
dmb
service
dimensional
decoding
Prior art date
Application number
KR1020060001987A
Other languages
Korean (ko)
Other versions
KR20070060951A (en
Inventor
윤국진
이광순
강훈종
허남호
이수인
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to EP06769273.1A priority Critical patent/EP1961238A4/en
Priority to PCT/KR2006/002756 priority patent/WO2007066868A1/en
Publication of KR20070060951A publication Critical patent/KR20070060951A/en
Application granted granted Critical
Publication of KR100747550B1 publication Critical patent/KR100747550B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

1. 청구범위에 기재된 발명이 속한 기술분야1. TECHNICAL FIELD OF THE INVENTION

본 발명은 ＤＭＢ 기반의 3차원 입체영상 서비스 제공 방법과, ＤＭＢ 기반의 3차원 입체영상 서비스를 위한 복호화 장치 및 그 방법에 관한 것임.The present invention relates to a method for providing a 3D stereoscopic image service based on a DMV, a decoding apparatus for a 3D stereoscopic image service based on a DMV, and a method thereof.

2. 발명이 해결하려고 하는 기술적 과제2. The technical problem to be solved by the invention

본 발명은 3차원 입체영상 서비스를 위한 새로운 구조의 MPEG-4 객체 기술자를 제공하고, 이를 통하여 DMB기반으로 3차원 입체영상 서비스를 제공함으로써, 기존의 DMB 시스템과의 호환성을 유지하면서도 사용자에게 보다 현실감 있는 3차원 서비스를 제공할 수 있게 하는, DMB 기반의 3차원 입체영상 서비스 제공 방법과, DMB 기반의 3차원 입체영상 서비스를 위한 복호화 장치 및 그 방법을 제공하는데 그 목적이 있음.The present invention provides a new structure of MPEG-4 object descriptor for 3D stereoscopic image service, and through this, provides 3D stereoscopic image service based on DMB, thereby maintaining the compatibility with the existing DMB system and providing more realism to the user. The present invention provides a method for providing a 3D stereoscopic image service based on DMB, a decoding device for a 3D stereoscopic image service based on DMB, and a method for providing a 3D service.

3. 발명의 해결방법의 요지3. Summary of Solution to Invention

본 발명은, 디지털 멀티미디어 방송(DMB) 기반의 3차원 입체영상 서비스 제공 방법에 있어서, '데이터 서비스 컴포넌트 타입(DSCTy: Data Service Component Type)'을 통하여 DMB 서비스임을 정의하고, '사용자 어플리케이션 타입(User Application Type)'을 통하여 상기 DMB 서비스의 차원을 정의하는 서비스 유형/차원 정의 단계; 및 서비스 대상이 되는 3차원 영상에 대한 기준영상과 3차원 부가정보를 서로 다른 객체기술자(Object Descriptor)를 이용하여 각기 다른 독립스트림으로 할당하는 스트림 할당 단계를 포함함.The present invention, in the digital multimedia broadcasting (DMB) -based 3D stereoscopic video service providing method, defines a DMB service through the 'Data Service Component Type (DSCTy), and defines a' User Application Type (User) Service type / dimension defining step of defining the dimension of the DMB service; And a stream allocation step of allocating the reference image and the 3D additional information about the 3D image to be serviced to different independent streams using different object descriptors.

4. 발명의 중요한 용도4. Important uses of the invention

본 발명은 3차원 입체 서비스 제공 등에 이용됨.The present invention is used to provide three-dimensional stereoscopic services.

DMB, 3차원 입체 방송, MPEG-4, 객체기술자, 3차원 입체영상, 기준영상, 3차원영상, 3차원 부가정보 DMB, 3D stereoscopic broadcasting, MPEG-4, object descriptor, 3D stereoscopic image, reference image, 3D image, 3D additional information

Description

ＤＭＢ 기반의 3차원 입체영상 서비스 제공 방법과, ＤＭＢ 기반의 3차원 입체영상 서비스를 위한 복호화 장치 및 그 방법{Method for providing three dimensional image service based on DMB, Apparatus and Method of Decoding for three dimensional image service based on DMB}Method for providing three-dimensional three-dimensional image service based on DMB, and a decoding apparatus and method for the three-dimensional three-dimensional image service based on DMB [Method for providing three dimensional image service based on DMB, Apparatus and Method of Decoding for three dimensional image service based] on DMB}

도 1 은 DAB를 기반으로 DMB 서비스를 위하여 추가된 데이터 서비스 컴포넌트 타입에 대한 설명도,1 is an explanatory diagram of a data service component type added for a DMB service based on a DAB;

도 2 는 본 발명에 따른 DAB에서 정의된 사용자 어플리케이션 타입을 토대로 2D DMB와 3D DMB 서비스를 구별하기 위한 방법에 대한 일실시예 설명도,2 is a diagram for explaining a method for distinguishing between 2D DMB and 3D DMB service based on a user application type defined in a DAB according to the present invention;

도 3 은 종래의 DMB 서비스에서 오디오/비디오를 기술하기 위하여 사용되는 MPEG-4 객체기술자의 구조도,3 is a structural diagram of an MPEG-4 object descriptor used for describing audio / video in a conventional DMB service;

도 4 는 본 발명에 따른 2개의 객체기술자를 이용하여 ＤＭＢ 기반의 3차원 동영상 서비스를 제공하기 위한 객체 기술자의 일실시예 구조도, 4 is a structural diagram of an object descriptor for providing a 3D video service based on DMX using two object descriptors according to the present invention;

도 5 는 본 발명에 따른 3차원 부가 정보의 타입(Type)에 대한 일실시예 설명도,5 is a diagram illustrating an embodiment of a type of 3D additional information according to the present invention;

도 6 은 본 발명에 따른 도 4의 객체기술자 구조를 이용하여 ＤＭＢ 기반의 3차원 입체영상 서비스를 제공하기 위한 복호화 장치 및 그 방법에 대한 일실시예 설명도이다.6 is a diagram illustrating an embodiment of a decoding apparatus and method for providing a 3D stereoscopic image service based on DMX using the object descriptor structure of FIG. 4 according to the present invention.

도 7 은 본 발명에 따른 1개의 객체기술자를 이용하여 ＤＭＢ 기반의 3차원 동영상 서비스를 제공하기 위한 객체 기술자의 일실시예 구조도,7 is a structural diagram of an object descriptor for providing a 3D video service based on DMX using one object descriptor according to the present invention;

도 8 은 본 발명에 따른 도 7의 객체기술자 구조를 이용하여 ＤＭＢ 기반의 3차원 입체영상 서비스를 제공하기 위한 복호화 장치 및 그 방법에 대한 일실시예 설명도이다.FIG. 8 is a diagram illustrating an embodiment of a decoding apparatus and method for providing a 3D stereoscopic image service based on DMX using the object descriptor structure of FIG. 7 according to the present invention.

* 도면의 주요 부분에 대한 부호 설명* Explanation of symbols on the main parts of the drawing

60, 80: 복호화 장치 61, 81: 디코더60, 80: decoder 61, 81: decoder

62, 82: 3차원 포맷 변환부 610, 810: 2차원 디스플레이 영상62, 82: 3D format conversion unit 610, 810: 2D display image

620, 820: 2차원 디스플레이 영상620, 820: two-dimensional display image

본 발명은 ＤＭＢ 기반의 3차원 입체영상 서비스 제공 방법과, ＤＭＢ 기반의 3차원 입체영상 서비스를 위한 복호화 장치 및 그 방법에 관한 것으로, 더욱 상세하게는 3차원 입체영상 서비스를 위한 새로운 구조의 MPEG-4 객체 기술자를 제공하고, 이를 통하여 DMB기반으로 3차원 입체영상 서비스를 제공함으로써, 기존의 DMB 시스템과의 호환성을 유지하면서도 사용자에게 보다 현실감 있는 3차원 서비스 를 제공할 수 있게 하는, DMB 기반의 3차원 입체영상 서비스 제공 방법과, DMB 기반의 3차원 입체영상 서비스를 위한 복호화 장치 및 그 방법에 관한 것이다.The present invention relates to a 3D stereoscopic image service providing method based on DMV, a decoding apparatus for 3D stereoscopic image service based on DMV, and a method thereof. More specifically, MPEG- having a new structure for 3D stereoscopic image service is provided. DMB-based 3 enables users to provide more realistic 3D services to users while maintaining compatibility with existing DMB systems by providing 4 object descriptors and providing 3D stereoscopic video services based on DMB. A method of providing a 3D stereoscopic image service, a decoding apparatus for a 3D stereoscopic image service based on DMB, and a method thereof are provided.

디지털 멀티미디어 방송(DMB)에서는 각 객체 및 장면을 기술하기 위하여 MPEG-4 초기객체기술자(IOD: Initial Object Descriptor), 장면기술자(BIFS: Binary Format for Scene), 객체기술자(OD: Object Descriptor) 및 미디어 데이터들이 사용된다. 초기객체기술자(IOD)는 MPEG-4 장면을 구성하기 위해 가장 먼저 전송되어야 하는 정보로서 각 미디어의 프로파일과 레벨을 기술하고, 객체기술자는 장면을 구성하는 각 미디어 데이터에 대한 정보를 기술하는 기초스트림 기술자들의 집합으로서, 각 미디어 데이터의 기초스트림(ES: Elementary Stream)과 장면기술과의 연결을 제공한다. 또한, 장면기술자 스트림은 장면을 구성하는 비디오 또는 오디오 객체의 공간적/시간적 위치와 행위를 나타낸다.In digital multimedia broadcasting (DMB), MPEG-4 Initial Object Descriptor (IOD), Binary Format for Scene (BIFS), Object Descriptor (OD) and Media are used to describe each object and scene. Data is used. An Initial Object Descriptor (IOD) describes the profile and level of each media as information that must be transmitted first to compose an MPEG-4 scene, and an Object Descriptor describes an elementary stream describing information about each media data constituting the scene. As a set of descriptors, it provides a link between an elementary stream (ES) of each media data and a scene description. In addition, the scene descriptor stream represents the spatial and temporal position and behavior of the video or audio object composing the scene.

그러나, 종래의 DMB 서비스는 2차원 동영상 처리에 초점을 맞추어 정의되고 있어, 사용자에게 현실감 및 입체감이 있는 3차원 서비스를 제공하기에는 한계가 있었다.However, the conventional DMB service is defined with a focus on two-dimensional video processing, and there is a limit to providing a three-dimensional service having a realistic and three-dimensional effect to a user.

따라서, 종래의 DMB 시스템과 호환성을 유지하면서도 사용자에게 보다 현실감 있는 3차원 서비스를 제공할 수 있는, 새로운 구조의 MPEG-4 객체기술자와 그를 이용한 3차원 비디오/오디오를 서비스하기 위한 방법이 요구된다.Accordingly, there is a need for a new structure of MPEG-4 object descriptor and a method for serving 3D video / audio using the same structure, which can provide a realistic 3D service to a user while maintaining compatibility with a conventional DMB system.

하지만, 현재 DMB기반으로 3차원 서비스를 위한 MPEG-4 객체기술자 및 서비스되는 콘텐츠가 2D 혹은 3D인지 구별하는 방법은 종래의 특허 및 논문에서 소개된 바 없다. However, at present, the method of distinguishing MPEG-4 object descriptor for 3D service and whether serviced content is 2D or 3D based on DMB has not been introduced in the conventional patents and papers.

본 발명은 상기 문제점을 해결하기 위하여 제안된 것으로, 3차원 입체영상 서비스를 위한 새로운 구조의 MPEG-4 객체 기술자를 제공하고, 이를 통하여 DMB기반으로 3차원 입체영상 서비스를 제공함으로써, 기존의 DMB 시스템과의 호환성을 유지하면서도 사용자에게 보다 현실감 있는 3차원 서비스를 제공할 수 있게 하는, DMB 기반의 3차원 입체영상 서비스 제공 방법과, DMB 기반의 3차원 입체영상 서비스를 위한 복호화 장치 및 그 방법을 제공하는데 그 목적이 있다. The present invention has been proposed to solve the above problems, and provides a new structure of MPEG-4 object descriptor for 3D stereoscopic image service, thereby providing a 3D stereoscopic image service based on DMB, thereby providing an existing DMB system. DMB-based 3D stereoscopic image service providing method, which can provide a realistic 3D service to the user while maintaining compatibility with the present invention, and a decoding device and a method for DMB based 3D stereoscopic image service Its purpose is to.

본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허청구범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.Other objects and advantages of the present invention can be understood by the following description, and will be more clearly understood by the embodiments of the present invention. It will also be appreciated that the objects and advantages of the present invention may be realized by the means and combinations thereof indicated in the claims.

상기 목적을 달성하기 위한 본 발명은, 디지털 멀티미디어 방송(DMB) 기반의 3차원 입체영상 서비스 제공 방법에 있어서, '데이터 서비스 컴포넌트 타입(DSCTy: Data Service Component Type)'을 통하여 DMB 서비스임을 정의하고, '사용자 어플리케이션 타입(User Application Type)'을 통하여 상기 DMB 서비스의 차원을 정의하는 서비스 유형/차원 정의 단계; 및 서비스 대상이 되는 3차원 영상에 대한 기준영상과 3차원 부가정보를 서로 다른 객체기술자(Object Descriptor)를 이용하여 각기 다른 독립스트림으로 할당하는 스트림 할당 단계를 포함한다. The present invention for achieving the above object, in the digital multimedia broadcasting (DMB) -based 3D stereoscopic image service providing method, defines a DMB service through the 'Data Service Component Type (DSCTy: Data Service Component Type), A service type / dimension defining step of defining a dimension of the DMB service through a 'user application type'; And a stream allocation step of allocating the reference image and the 3D additional information on the 3D image to be serviced to different independent streams by using different object descriptors.

한편, 본 발명은, 디지털 멀티미디어 방송(DMB) 기반의 3차원 입체영상 서비스 제공 방법에 있어서, '데이터 서비스 컴포넌트 타입(DSCTy)'을 통하여 DMB 서비스임을 정의하고, '사용자 어플리케이션 타입(User Application Type)'을 통하여 상기 DMB 서비스의 차원을 정의하는 서비스 유형/차원 정의 단계; 및 서비스 대상이 되는 3차원 영상에 대한 기준영상과 3차원 부가정보를 하나의 객체기술자(Object Descriptor)를 이용하여, 상기 기준영상은 독립스트림으로 할당하고 상기 3차원 부가정보는 상기 기준영상의 종속스트림으로 할당하는 스트림 할당 단계를 포함한다.On the other hand, the present invention, in the digital multimedia broadcasting (DMB) -based 3D stereoscopic image service providing method, defines a DMB service through the 'Data Service Component Type (DSCTy), and' User Application Type (User Application Type) A service type / dimension defining step of defining the dimension of the DMB service through '; And assigning the reference image and the 3D additional information about the 3D image to be serviced using an object descriptor, the reference image is assigned as an independent stream, and the 3D additional information is dependent on the reference image. And stream allocation step of allocating the stream.

한편, 본 발명은, ＤＭＢ 기반의 3차원 입체영상 서비스를 위한 복호화 장치에 있어서, 서로 다른 두 개의 객체기술자(Object Descriptor)를 통하여 기준영상 스트림과 3차원 부가정보 스트림을 개별적으로 인식하여 디코딩하기 위한 디코딩 수단; 및 상기 디코딩 수단에서 디코딩된 기준영상과 3차원 부가영상 중에서 어느 하나는 홀라인 데이터만을 가지는 영상으로 변환하고 나머지 다른 하나는 짝라인 데이터만을 가지는 영상으로 변환하기 위한 3차원 포맷 변환 수단을 포함한다. Meanwhile, the present invention provides a decoding apparatus for a 3D stereoscopic image service based on DMB, for separately recognizing and decoding a reference video stream and a 3D additional information stream through two different object descriptors. Decoding means; And three-dimensional format conversion means for converting any one of the reference image and the three-dimensional additional image decoded by the decoding means into an image having only the line data and the other into an image having only the paired data.

한편, 본 발명은, ＤＭＢ 기반의 3차원 입체영상 서비스를 위한 복호화 장치에 있어서, 하나의 객체기술자(Object Descriptor)를 통하여 기준영상 스트림과 3차원 부가정보 스트림을 인식하여 디코딩하기 위한 디코딩 수단; 및 상기 사용자로부터 3차원 디스플레이를 요구받으면 상기 디코딩 수단에서 디코딩된 기준영상과 3차원 부가영상을 결합하여 하나의 3차원 영상을 생성하기 위한 3차원 포맷 변환 수단을 포함한다.On the other hand, the present invention, a decoding apparatus for 3D stereoscopic image service based on DMB, comprising: decoding means for recognizing and decoding a reference video stream and a 3D additional information stream through an object descriptor; And three-dimensional format converting means for generating one three-dimensional image by combining the reference image decoded by the decoding means and the three-dimensional additional image when the three-dimensional display is requested from the user.

한편, 본 발명은, ＤＭＢ 수신 단말에서의 3차원 입체영상 서비스 방법에 있어서, 서로 다른 두 개의 객체기술자(Object Descriptor)를 통하여 기준영상 스트림과 3차원 부가정보 스트림을 개별적으로 인식하여 디코딩하는 디코딩 단계; 사용자로부터 재생모드를 입력받는 재생모드 입력 단계; 상기 입력받은 재생모드가 2차원 디스플레이 재생모드이면, 상기 디코딩 단계에서 디코딩된 기준영상만 출력되도록 장면 기술자에서 3차원 부가정보에 해당하는 노드를 비활성화하는 2차원 재생 단계; 및 상기 입력받은 재생모드가 3차원 디스플레이 재생모드이면, 상기 디코딩 수단에서 디코딩된 기준영상과 3차원 부가영상 중에서 어느 하나는 홀라인 데이터만을 가지는 영상으로 변환하고 나머지 다른 하나는 짝라인 데이터만을 가지는 영상으로 변환하는 3차원 포맷 변환 단계를 포함한다.On the other hand, the present invention, in the 3D stereoscopic image service method in the DM receiving terminal, decoding step of separately recognizing and decoding the reference video stream and the 3D additional information stream through two different object descriptors (Object Descriptor) ; A play mode input step of receiving a play mode from a user; If the inputted reproduction mode is a two-dimensional display reproduction mode, a two-dimensional reproduction step of deactivating a node corresponding to three-dimensional additional information from a scene descriptor so that only the reference image decoded in the decoding step is output; And when the inputted reproduction mode is a 3D display reproduction mode, any one of the reference image and the 3D additional image decoded by the decoding means is converted into an image having only the hollow data, and the other image has only the paired data. And converting the 3D format.

한편, 본 발명은, ＤＭＢ 수신 단말에서의 3차원 입체영상 서비스 방법에 있어서, 하나의 객체기술자(Object Descriptor)를 통하여 기준영상 스트림과 3차원 부가정보 스트림을 인식하여 개별적으로 디코딩하는 디코딩 단계; 사용자로부터 재생모드를 입력받는 재생모드 입력 단계; 상기 입력받은 재생모드가 2차원 디스플레이 재생모드이면, 상기 디코딩 단계에서 디코딩된 기준영상만을 단순히 출력하는 2차원 재생 단계; 및 상기 입력받은 재생모드가 2차원 디스플레이 재생모드이면, 상기 디코딩 수단에서 디코딩된 기준영상과 3차원 부가영상을 결합하여 하나의 3차원 영상을 생성하는 3차원 포맷 변환 단계를 포함한다.On the other hand, the present invention, a three-dimensional stereoscopic image service method in a DM receiving terminal, Decoding step of recognizing and separately decoding the reference video stream and the three-dimensional additional information stream through an object descriptor (Object Descriptor); A play mode input step of receiving a play mode from a user; A two-dimensional reproduction step of simply outputting only the reference image decoded in the decoding step if the input reproduction mode is the two-dimensional display reproduction mode; And a three-dimensional format conversion step of generating one three-dimensional image by combining the reference image decoded by the decoding means and the three-dimensional additional image when the input reproduction mode is the two-dimensional display reproduction mode.

본 발명은 DMB에서 3차원 입체 콘텐츠를 서비스하기 위한 방법 및 MPEG-4 객체기술자에 관한 것으로, 더욱 상세하게는 종래의 DMB 시스템과 호환성을 유지하면 서 포함되는 코덱 형태에 따라 3D AV 콘텐츠를 기술하기 위한 MPEG-4 객체 기술자 구조 및 DMB를 통하여 서비스되는 콘텐츠가 2D 혹은 3D인지 구별하는 방법을 제안한다. The present invention relates to a method for servicing three-dimensional stereoscopic content in DMB and to an MPEG-4 object descriptor, and more particularly, to describe 3D AV content according to a codec form included while maintaining compatibility with a conventional DMB system. We propose an MPEG-4 object descriptor structure and a method for distinguishing whether 2D or 3D content is provided through DMB.

본 발명은, 3차원 서비스를 위한 MPEG-4 객체 기술자를 제안함으로써, 종래의 DMB 시스템과 호환성을 유지하고, 또한 종래의 DMB에서 서비스되는 콘텐츠가 2D 인지 3D인지를 구별하는 방법을 제공하는데 그 목적이 있다. The present invention provides a method for maintaining compatibility with a conventional DMB system by proposing an MPEG-4 object descriptor for a three-dimensional service and distinguishing whether a content serviced in a conventional DMB is 2D or 3D. There is this.

상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명하기로 한다.The above objects, features and advantages will become more apparent from the following detailed description taken in conjunction with the accompanying drawings, whereby those skilled in the art may easily implement the technical idea of the present invention. There will be. In addition, in describing the present invention, when it is determined that the detailed description of the known technology related to the present invention may unnecessarily obscure the gist of the present invention, the detailed description thereof will be omitted. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

DMB는 기본적으로 유럽의 디지털오디오방송 표준을 기반으로 하고 있으며, EUREKA-147의 데이터 서비스 모드 중 스트림 모드를 통하여 비디오 서비스를 제공하는 것으로서, 이동중에도 수신 성능이 탁월한 이동멀티미디어 방송 중 하나이다.DMB is basically based on the European digital audio broadcasting standard, and provides video service through the stream mode of the data service mode of EUREKA-147, which is one of the mobile multimedia broadcasting with excellent reception performance on the go.

EUREKA-147은 오디오와 연관된 데이터 서비스 및 이와 별도의 스트림 형태 또는 패킷 형태의 데이터 서비스가 가능하도록 구성되어 있다. EUREKA-147 is configured to enable data services associated with audio and data services in the form of streams or packets separate from these.

여러 개의 오디오 압축 스트림 및 여러 종류의 데이터는 각기 채널 부호화를 거친 후 시스템 제어 데이터와 함께 하나의 비트스트림으로 다중화되는데, 이렇게 다중화된 결과를 앙상블 스트림이라 부르며, 이후 OFDM으로 변조된 후 고출력 증폭을 거쳐 송신된다. 이때 다중화된 구성정보(MCI: Multiplex Configuration Information)는 앙상블 내에서 가능한 서비스 목록을 포함하고 있으며, 데이터 서비스 컴포넌트 타입(DSCTy)을 통하여 서비스 컴포넌트에 대한 타입 정보를 제공한다. Multiple audio compression streams and various kinds of data are each channel-coded and then multiplexed into a single bitstream together with system control data. This multiplexed result is called an ensemble stream, which is then modulated by OFDM and then subjected to high power amplification. Is sent. In this case, the multiplex configuration information (MCI) includes a list of services available in an ensemble, and provides type information on service components through a data service component type (DSCTy).

이하 본 발명에 따른 종래의DMB에서 3차원 서비스를 위한 MPEG-4 객체 기술자 구조 및 서비스되는 콘텐츠가 2D인지3D인지를 구별하는 방법은 첨부된 도면을 통하여 상세히 설명한다. Hereinafter, an MPEG-4 object descriptor structure for a 3D service and a method of distinguishing whether a serviced content is 2D or 3D in the conventional DMB according to the present invention will be described in detail with reference to the accompanying drawings.

도 1 은 DAB를 기반으로 DMB 서비스를 위하여 추가된 데이터 서비스 컴포넌트 타입에 대한 설명도이다.1 is an explanatory diagram of a data service component type added for a DMB service based on a DAB.

방송 송신측에서는 제공하고자 하는 서비스가 DMB 서비스임을, '데이터 서비스 컴포넌트 타입(DSCTy: Data Service Component Type)'을 통하여 정의하게 된다.The broadcast transmission side defines that a service to be provided is a DMB service through a data service component type (DSCTy).

따라서, DMB 수신 단말은 '데이터 서비스 컴포넌트 타입(DSCTy)을 통하여, DMB 서비스임(101)을 인지하게 된다. Accordingly, the DMB receiving terminal recognizes the DMB service 101 through the 'data service component type (DSCTy).

현재, DMB는 2차원 서비스만을 고려하고 있으나, 향후 3차원 서비스를 위해서는 DMB 서비스 내에서 2D 혹은 3D 서비스(2D DMB, 3D DMB)임을 구별하기 위한 방법이 요구된다.Currently, DMB considers only two-dimensional services, but for the three-dimensional service in the future, a method for distinguishing between 2D or 3D services (2D DMB, 3D DMB) within the DMB service is required.

도 2 는 본 발명에 따른 DAB에서 정의된 사용자 어플리케이션 타입을 토대로 2D DMB와 3D DMB 서비스를 구별하기 위한 방법에 대한 일실시예 설명도이다.2 is a diagram illustrating a method for distinguishing between 2D DMB and 3D DMB service based on a user application type defined in a DAB according to the present invention.

본 발명에서는, 도 2에 도시된 바와 같이, DAB에서 정의된 '사용자 어플리케 이션 타입(User Application Type)'을 토대로 DMB 내에 2D 콘텐츠와 3D 콘텐츠를 구별하기 위한 방법을 제공한다.In the present invention, as shown in Figure 2, based on the 'User Application Type (User Application Type)' defined in the DAB provides a method for distinguishing 2D content and 3D content in the DMB.

즉, 종래의 DMB서비스와 구분하면서 3차원 DMB 서비스를 위하여, DAB에서 정의된 '사용자 어플리케이션 타입(User Application Type)' 내에 2D DMB와 3D DMB를 구분하여 정의한다(201, 202).That is, 2D DMB and 3D DMB are defined and defined within the 'User Application Type' defined in the DAB for the three-dimensional DMB service while being distinguished from the conventional DMB service (201 and 202).

따라서, 실제 수신단말은 도 1에서 정의된 '데이터 서비스 컴포넌트 타입'(101)을 통해 DMB 서비스를 인지하게 되며(101), 더 나아가 '사용자 어플리케이션 타입(User Application Type)'(201, 202)을 통해서는 DMB 서비스 내에 전송되는 콘텐츠가 2D인지, 3D 인지를 인식하고 사용자에게 서비스하게 된다.Accordingly, the actual receiving terminal recognizes the DMB service through the 'data service component type' 101 defined in FIG. 1 (101), furthermore, the 'user application type' (201, 202). Through this, the contents transmitted in the DMB service are recognized as 2D or 3D and are serviced to the user.

2D DMB(201)는 기존의 DMB 서비스를 나타내며, 3D DMB(202)는 기존의 DMB 수신 단말과 호환 가능하면서 사용자에게 3차원 서비스를 제공할 수 있는 DMB를 나타낸다. 이때, 본 발명을 통해 정의된 2D DMB 및 3D DMB의 비트필드는 달라질 수 있다.The 2D DMB 201 represents a conventional DMB service, and the 3D DMB 202 represents a DMB capable of providing a 3D service to a user while being compatible with a conventional DMB receiving terminal. In this case, the bitfields of 2D DMB and 3D DMB defined through the present invention may be different.

도 3 은 종래의 DMB 서비스에서 오디오/비디오를 기술하기 위하여 사용되는 MPEG-4 객체기술자의 구조도이다.3 is a structural diagram of an MPEG-4 object descriptor used for describing audio / video in a conventional DMB service.

오디오와 비디오는 각각의 객체기술자(Object Descriptor) 및 기초스트림 기술자(ES Descriptor)를 통하여, 비디오의 경우 "ObjectTypeIndication=0x21(AVC), StreamType=0x04(visual stream)"로 설정하고, 오디오의 경우는 "ObjectTypeIndication=0x40(BSAC), StreamType=0x05(audio stream)"로 설정한다.Audio and video are set to "ObjectTypeIndication = 0x21 (AVC) and StreamType = 0x04 (visual stream)" for video through the Object Descriptor and the ES Descriptor. Set to "ObjectTypeIndication = 0x40 (BSAC), StreamType = 0x05 (audio stream)".

이때, 각각의 객체기술자 ID는 유일한 값을 가지며, 이는 장면기술자 내 URL 값과 동일하게 할당된다. 즉 오디오와 비디오를 표현하기 위하여, 장면기술자는 2개의 노드를 포함하고 있으며, 이는 각각 할당된 객체기술자ID와 연관되어 있다.At this time, each object descriptor ID has a unique value, which is assigned the same as the URL value in the scene descriptor. In other words, to represent audio and video, the scene descriptor includes two nodes, each associated with an assigned object descriptor ID.

그러나, 상기 객체기술자 구조는 2차원 콘텐츠에 초점을 맞춤으로써 카메라로부터 획득된 2시점 이상의 3차원 동영상에 대한 정보를 표현하기에는 한계가 있다.However, the object descriptor structure has a limitation in expressing information on three-dimensional video of two or more viewpoints obtained from a camera by focusing on two-dimensional content.

따라서, 본 발명은 이러한 문제점을 해결하기 위하여 코덱 형태에 따라 기존의 DMB와 호환성을 유지하면서 3차원 입체 방송을 위한 MPEG-4 객체 기술자 구조를 제안한다. 또한, 이하, 비디오만을 고려하며 본 발명을 설명할 것이며, 이는 오디오에도 동일하게 적용될 것이다.Therefore, in order to solve this problem, the present invention proposes an MPEG-4 object descriptor structure for 3D stereoscopic broadcasting while maintaining compatibility with existing DMB according to a codec type. In addition, hereinafter, only the video will be considered and the present invention will be described, which will equally apply to audio.

획득된 3차원 동영상에 대하여는 크게 2가지 형태의 코덱이 고려된다. 즉, 첫째는 각 시점별로 독립적으로 코딩함으로써 시점별 부호화 스트림이 출력되는 방식이고, 둘째는 시점별 연관성을 이용하여 특정 시점 영상을 참조하여 코딩함으로써 시점별 부호화 스트림이 출력되는 방식이다. Two types of codecs are considered for the acquired 3D video. That is, firstly, the encoding stream for each view is output by coding independently for each view, and secondly, the encoding stream for each view is output by coding with reference to a specific view image by using the correlation between views.

도 4 는 본 발명에 따른 2개의 객체기술자를 이용하여 ＤＭＢ 기반의 3차원 동영상 서비스를 제공하기 위한 객체 기술자의 일실시예 구조도로서, 3차원 동영상에 대하여 각 시점별로 독립적으로 코딩할 경우 두 개의 객체기술자를 이용하여 코덱으로부터 출력되는 비트스트림을 표현하는 객체기술자의 구조를 나타낸다. 이때 고려되는 3차원 부가 정보는 도 5와 같다.FIG. 4 is a structural diagram of an object descriptor for providing a 3D video service based on DMV using two object descriptors according to the present invention. Represents a structure of an object descriptor representing a bitstream output from a codec using a descriptor. The 3D additional information considered at this time is shown in FIG. 5.

본 발명에서는, 종래의 DMB와 호환성을 위하여, 2개의 객체기술자를 통하여 기준영상 및 3차원 부가 정보를 각각 독립적인 스트림으로 할당하는 방식을 사용한 다.In the present invention, for compatibility with the conventional DMB, a method of allocating a reference video and three-dimensional additional information as independent streams through two object descriptors is used.

즉, 본 발명에서는 기준영상에 대해서는 기존의 DMB 규격인 AVC(Advanced Video Coding) 코덱을 이용하여 부호화하여 "ObjectTypeIndication=0x21(AVC), StreamType=0x04(visual stream)"로 설정하고, 3차원 부가 정보에 대해서는 AVC 코덱 또는 다른 기존 코덱을 이용하여 부호화하여 "ObjectTypeIndication=0xC0(user private), StreamType=0x04(visual stream)"로 설정한다.That is, in the present invention, the reference video is encoded by using an advanced video coding (AVC) codec, which is an existing DMB standard, and set to "ObjectTypeIndication = 0x21 (AVC) and StreamType = 0x04 (visual stream)". Is encoded using an AVC codec or another existing codec and set to "ObjectTypeIndication = 0xC0 (user private) and StreamType = 0x04 (visual stream)".

또한, 3차원 부가 정보는 해당 객체기술자 내 '3차원 부가 기술자(3D additional descriptor)'를 통하여, 사용되는 3차원 부가정보의 타입을 정의한다. In addition, the 3D additional information defines a type of 3D additional information to be used through '3D additional descriptor' in the object descriptor.

이를 통하여 기존 DMB 수신 단말은 3차원 부가 정보에 대한 ObjectTypeIndication 정보를 인식하지 못하게 되며, 결국 우영상 스트림을 수신하지 못하게 된다. 즉, 기존 DMB 수신 단말은 일반적인 기준영상 스트림만을 인식하게 됨으로써, 사용자는 3차원 동영상을 2차원 동영상으로 볼 수 있게 되고, 이는 기존 DMB 서비스와의 호환성을 유지할 수 있다는 것을 의미한다.Through this, the existing DMB receiving terminal does not recognize the ObjectTypeIndication information for the 3D additional information, and eventually does not receive the right image stream. That is, the conventional DMB receiving terminal recognizes only the general reference video stream, so that the user can view the 3D video as a 2D video, which means that it can maintain compatibility with the existing DMB service.

또한, 3차원 동영상을 서비스할 수 있는 DMB 수신 단말은 두 개의 객체기술자를 인식하여, 기준영상 및 3차원 부가 정보 스트림을 각각 수신하여 디코딩하게 된다.이때, 3차원 동영상 디스플레이를 위하여, 디코딩된 기준영상 및 3차원 부가 영상은 각각 홀(짝)라인 데이터 및 짝(홀)라인 데이터만을 가지는 영상으로 변환된 후, 장면 내 같은 위치에 좌 필드 영상 및 3차원 부가 필드 영상을 동시에 디스플레이한다. In addition, the DMB receiving terminal capable of servicing 3D video recognizes two object descriptors, and receives and decodes the reference video and the 3D additional information stream, respectively. The image and the 3D additional image are respectively converted into an image having only the odd line data and the even line data, and then simultaneously display the left field image and the 3D additional field image at the same position in the scene.

도 5 는 본 발명에 따른 3차원 부가 정보의 타입(Type)에 대한 일실시예 설 명도이다.5 is a diagram illustrating an embodiment of a type of 3D additional information according to the present invention.

기준영상이 좌영상(Left image)인 경우, 디지털방송기반 3차원 서비스를 위하여 사용되는 3차원 부가 정보에는 '디스패러티'(Disparity), '디스패러티와 잉여 데이터'(Disparity + residual data), '깊이정보'(Depth), 깊이정보와 잉여 데이터(Depth + residual data), 전체의 우영상(Right image(full)), 가로절반 우영상(Right image(half of horizontal)), 세로절반 우영상(Right image(half of vertical)), 가로/세로 절반 우영상(Right image(quarter)) 등이 포함된다. 여기서, 잉여 데이터(residual data)는 잉여 텍스쳐 데이터(residual texture data)를 포함한다.When the reference image is a left image, the 3D additional information used for the digital broadcasting based 3D service includes' disparity ',' disparity + residual data ',' Depth information, depth and residual data (Depth + residual data), right image (full), right image (half of horizontal), vertical half image ( Right image (half of vertical), right image (quarter), and the like. Here, the residual data includes residual texture data.

만약에 기준 영상이 좌영상이 아니라, 우영상(Right image)인 경우에는 위의 3차원 부가 정보에는 "Left image(full)", "Left image(half of horizontal)", "Left image(half of vertical)", "Left image(quarter)"가 포함될 것이다.If the reference image is not a left image but a right image, the above three-dimensional additional information includes "Left image (full)", "Left image (half of horizontal)", and "Left image (half of). vertical) "," Left image (quarter) ".

도 6 은 본 발명에 따른 도 4의 객체기술자 구조를 이용하여 ＤＭＢ 기반의 3차원 입체영상 서비스를 제공하기 위한 복호화 장치 및 그 방법에 대한 일실시예 설명도로서, 도 4의 객체기술자 구조를 통해 사용자에게 디스플레이 되는 방법을 나타낸다.FIG. 6 is a diagram illustrating an embodiment of a decoding apparatus and a method for providing a 3D stereoscopic image service based on DMX using the object descriptor structure of FIG. 4 according to the present invention, and through the object descriptor structure of FIG. Indicates how it is displayed to the user.

도 6에 도시된 바와 같이, 3차원 부가 정보(도 5 참조)가 우영상(right image)(half of vertical)일 경우는 그 우영상은 기준영상과 사이즈는 같으나 실제 데이터는 세로 절반만 있는 경우이다.As shown in FIG. 6, when the 3D additional information (refer to FIG. 5) is a right image (half of vertical), the right image has the same size as the reference image but the actual data has only half of the vertical. to be.

본 발명에 따른 3차원 입체영상 서비스를 제공하기 위한 복호화 장치(60)에 서의 디코더(61)는 서로 다른 2개의 객체기술자를 통하여 기준영상 스트림과 3차원부가정보 스트림을 개별적으로 인식하여 각기 독립적으로 디코딩하는 기능을 수행한다.The decoder 61 in the decoding device 60 for providing a 3D stereoscopic image service according to the present invention independently recognizes the reference video stream and the 3D additional information stream through two different object descriptors, respectively. Decode function.

그러면, 3차원 포맷 변환부(62)는, 디코더(61)에서 디코딩된 기준영상(621)에 대하여, 영상의 사이즈를 유지하면서 홀라인 데이터만을 유지하고 나머지 짝라인 데이터는 가비지(Garbage) 데이터로 채운다. 또한, 3차원 포맷 변환부(62)는 디코더(61)에서 디코딩된 3차원 부가 영상(622)에 대해서는, 그에 포함되어 있는 실제 데이터를 이용하여 영상 확대 필터링을 통하여 기준영상과 동일한 영상 사이즈를 유지하면서, 짝라인 데이터만을 유지하고 나머지 홀라인 데이터는 가비지 데이터로 채운다. 이와 달리, 기준영상(621)을 짝라인 데이터로 변환하고, 3차원 부가 영상을 홀라인 데이터로 변환할 수도 있다. Then, the 3D format conversion unit 62 maintains only the line data while maintaining the size of the image with respect to the reference image 621 decoded by the decoder 61, and the remaining pair line data is garbage data. Fill it. In addition, the 3D format converter 62 maintains the same image size as the reference image through image enlargement filtering using the actual data included in the 3D additional image 622 decoded by the decoder 61. While maintaining only the pair line data, the remaining line data is filled with garbage data. Alternatively, the reference image 621 may be converted into paired line data, and the 3D additional image may be converted into holline data.

이러한 방법은 장면기술자 내에 양안식 3차원 동영상(620)을 디스플레이하기 위하여 포함된 2개의 객체기술자ID를 포함하고 있더라도, 한 장면 내에 동일한 시간에 디스플레이 되는 비디오 객체 수는 1개라는 종래의 DMB 규격을 만족하게 된다. Although the method includes two object descriptor IDs included to display the binocular three-dimensional video 620 in the scene descriptor, the conventional DMB standard indicates that the number of video objects displayed at the same time in one scene is one. You will be satisfied.

한편, 사용자가 3차원 동영상에 대하여 2차원 디스플레이를 원할 경우(610), 3차원 포맷 변환부(62)는 장면기술자에서 3차원 부가 정보에 해당하는 노드를 비활성화함으로써, 디코딩된 기준영상만을 아무런 변환없이 그대로 출력하여 디스플레이 되도록 한다.On the other hand, if the user wants a two-dimensional display for the three-dimensional video (610), the three-dimensional format conversion unit 62 deactivates the node corresponding to the three-dimensional additional information in the scene descriptor, thereby converting only the decoded reference image only It is displayed as it is without any output.

다음은, 3차원 콘텐츠에 대한 사용자 인터랙션 방법에 대하여 설명하기로 한 다.Next, a user interaction method for 3D content will be described.

사용자는 재생모드에 따라 3차원 콘텐츠를 2D 또는 3D로 임의로 조절할 수 있다. The user can arbitrarily adjust the 3D content to 2D or 3D according to the playback mode.

사용자가 재생모드 입력 인터페이스를 통하여 3D디스플레이를 설정할 경우, 복원된 기준영상 및 3차원 부가영상을 이용하여 3차원 모니터 특성에 맞게 3차원 영상(620)을 생성할 수 있다. 또는 사용자가 재생모드 입력 인터페이스를 통하여 2D 디스플레이를 설정할 경우, 복원된 기준영상만을 그대로 전송함으로써 2차원 영상(610)을 생성할 수 있다.When the user sets the 3D display through the playback mode input interface, the 3D image 620 may be generated according to the 3D monitor characteristics by using the restored reference image and the 3D additional image. Alternatively, when the user sets the 2D display through the play mode input interface, the 2D image 610 may be generated by transmitting only the restored reference image as it is.

한편, 사용자가 입체감 조절 모드에 따라 3차원 동영상 또는 영상내 객체의 수평 쉬프트(디스패러티 조절)를 통하여 입체감을 조절할 수 있다.Meanwhile, the user may adjust the 3D effect by horizontal shift (disparity control) of an object in the 3D video or the image according to the 3D control mode.

즉, 사용자는 입체감 조절 모드에 따라 3차원 동영상의 디스패러티(disparity)를 임의로 조절하여 입체감 있는 영상을 감상할 수 있는데, 이는 수평방향으로의 좌우 영상의 쉬프트(shift)를 통해 가능하다. 또한, 영상 내의 각 객체별로 디스패러티를 임의로 조절 가능할 경우, 사용자는 원하는 객체를 중심으로 디스패러티를 조절하여 감상할 수 있다. That is, the user can arbitrarily adjust the disparity of the 3D video according to the 3D control mode to view the 3D video, which is possible through the shift of the left and right images in the horizontal direction. In addition, when the disparity can be arbitrarily adjusted for each object in the image, the user can adjust and enjoy the disparity around the desired object.

도 7 은 본 발명에 따른 1개의 객체기술자를 이용하여 ＤＭＢ 기반의 3차원 동영상 서비스를 제공하기 위한 객체 기술자의 일실시예 구조도로서, 3차원 동영상에 대하여 각 시점별 독립적으로 코딩할 경우와 시점별 연관성을 이용하여 특정 시점 영상을 참조하여 코딩할 경우, 하나의 객체기술자를 이용하여 코덱으로부터 출력되는 시점별 비트스트림을 표현하는 객체기술자의 구조를 나타낸다.FIG. 7 is a diagram illustrating an embodiment of an object descriptor for providing a 3D video service based on DMV using one object descriptor according to the present invention. When coding with reference to a specific viewpoint image using the association, it represents the structure of the object descriptor representing the bitstream for each view output from the codec using one object descriptor.

도 4에서는 2개의 객체 기술자를 이용하여 기준영상과 3차원 부가정보를 각각 독립적인 스트림으로 할당하는 방법을 나타내었으나, 도 7에서는 1개의 객체기술자를 이용하여 기준영상은 독립스트림으로 할당하고, 3차원 부가정보는 기준영상의 종속 스트림으로 할당하는 방법을 나타낸다.In FIG. 4, a method of allocating a reference image and three-dimensional additional information as independent streams using two object descriptors is illustrated. In FIG. 7, a reference image is allocated as an independent stream using one object descriptor. The dimensional additional information represents a method of allocating a subordinate stream of a reference video.

도 7에 도시된 바와 같이, 하나의 객체기술자 아래 기준영상과 3차원 부가정보에 대한 2 개의 기초스트림 기술자가 종속 관계로 구성된다. 이러한 종속관계는 MPEG-4 기초스트림 기술자의 "StreamDependanceFlag" 및 "dependsOn_ES_ID"를 이용하여 표현할 수 있다. As shown in FIG. 7, two elementary stream descriptors of a reference image and three-dimensional additional information under one object descriptor are configured in a dependency relationship. This dependency may be expressed using "StreamDependanceFlag" and "dependsOn_ES_ID" of the MPEG-4 elementary stream descriptor.

기준영상은 독립스트림으로서 종래의 DMB 규격인 AVC 코덱을 이용하여 "ObjectTypeIndication=0x21(AVC), StreamType=0x04(visual stream)"로 설정하고, 3차원 부가 정보는 종속스트림으로서 AVC 코덱 또는 기존의 다른 코덱을 이용하여 부호화하여 "ObjectTypeIndication=0xC0(user private), StreamType=0x04(visual stream), StreamDependanceFlag=1, dependsOn_ES_ID=101(기준영상 ES_ID)"로 설정한다. The reference video is set as "ObjectTypeIndication = 0x21 (AVC), StreamType = 0x04 (visual stream)" using the AVC codec, which is a conventional DMB standard, as an independent stream, and the 3D side information is a dependent stream of the AVC codec or other existing information. The codec is encoded using a codec and set to "ObjectTypeIndication = 0xC0 (user private), StreamType = 0x04 (visual stream), StreamDependanceFlag = 1, dependsOn_ES_ID = 101 (reference video ES_ID)".

또한, 3차원 부가 정보는 객체기술자(OD) 또는 기초스트림 기술자(ES_Descriptor) 내의 3차원 부가기술자(3D additional descriptor)를 통하여 사용되는 3D 부가정보 타입을 정의한다. 이를 통하여 기존 DMB 수신 단말은 3차원 부가 정보에 대한 ObjectTypeIndication 정보를 인식하지 못하게 되며, 결국 3차원 부가정보 스트림을 수신하지 못하게 된다.In addition, the 3D additional information defines the 3D additional information type used through the 3D additional descriptor in the object descriptor OD or the elementary stream descriptor ES_Descriptor. As a result, the existing DMB receiving terminal cannot recognize the ObjectTypeIndication information for the 3D side information, and thus cannot receive the 3D side information stream.

즉, 기존 DMB 수신 단말은 일반적인 기준영상 스트림만을 인식하게 됨으로 써, 사용자는 3차원 동영상을 2차원 동영상으로 볼 수 있게 되고, 이는 기존 DMB 서비스와의 호환성을 유지할 수 있다는 것을 의미한다.That is, since the existing DMB receiving terminal recognizes only the general reference video stream, the user can view the 3D video as the 2D video, which means that it can maintain compatibility with the existing DMB service.

상기와 같은 방법은, 3차원 동영상을 하나의 객체로 인식하고, 장면기술자 내 하나의 객체기술자 ID를 포함함으로써, 종래의 DMB에서 비디오를 표현하기 위한 장면 기술자와 동일한 구조를 가진다.The above-described method has the same structure as the scene descriptor for representing a video in a conventional DMB by recognizing a 3D video as one object and including one object descriptor ID in the scene descriptor.

도 8 은 본 발명에 따른 도 7의 객체기술자 구조를 이용하여 ＤＭＢ 기반의 3차원 입체영상 서비스를 제공하기 위한 복호화 장치 및 그 방법에 대한 일실시예 설명도이다.FIG. 8 is a diagram illustrating an embodiment of a decoding apparatus and method for providing a 3D stereoscopic image service based on DMX using the object descriptor structure of FIG. 7 according to the present invention.

도 7의 객체기술자 구조를 이용하는 복호화 장치(80)는 도 8에 도시된 바와 같이, 디코더(81) 및 3차원 포맷 변환부(82)를 포함하여 이루어진다.As illustrated in FIG. 8, the decoding device 80 using the object descriptor structure of FIG. 7 includes a decoder 81 and a 3D format converter 82.

3차원 동영상을 서비스할 수 있는 DMB 수신 단말의 복호화 장치(80)는 하나의 객체기술자를 인식하여, 그에 포함된 독립/종속 형태의 기준영상 및 3차원 부가 정보 스트림을 수신하여 디코딩하게 된다. 그리고, DMB 수신 단말의 복호화 장치(80)는 장면기술자가 3차원 동영상을 디스플레이하기 위하여 하나의 객체기술자ID를 포함하고 있기 때문에, 디코딩된 기준영상 및 3차원 부가 영상을 결합하여 하나의 3차원 영상을 생성하여 디스플레이 한다(820).The decoding apparatus 80 of the DMB receiving terminal capable of servicing a 3D video recognizes an object descriptor, and receives and decodes the independent / dependent reference video and the 3D additional information stream included therein. In addition, since the decoding apparatus 80 of the DMB receiving terminal includes one object descriptor ID for displaying the 3D video, the scene descriptor combines the decoded reference video and the 3D additional video to form one 3D video. Create and display (820).

즉, 디코더(81)는 하나의 객체기술자(Object Descriptor)를 통하여 기준영상 스트림과 3차원 부가영상 스트림을 인식하여 디코딩한다. 그러면, 3차원 포맷 변환부(82)는 사용자로부터 3차원 디스플레이를 요구받은 경우, 디코더(81)에서 디코딩된 기준영상과 3차원 부가영상을 결합하여 하나의 3차원 영상을 생성하게 된다. That is, the decoder 81 recognizes and decodes the reference video stream and the 3D additional video stream through one object descriptor. Then, when the 3D format converter 82 receives a 3D display from the user, the 3D format converter 82 combines the reference image decoded by the decoder 81 and the 3D additional image to generate one 3D image.

한편, 사용자가 3차원 동영상에 대하여 2차원 디스플레이를 원할 경우(810), 3차원 포맷 변환부(82)는 장면기술자의 변경없이, 기준영상만을 아무런 포맷 변환없이 그대로 출력하여 디스플레이 되도록 한다.On the other hand, if the user wants a two-dimensional display for the three-dimensional video (810), the three-dimensional format converter 82 outputs and displays only the reference image as it is without any format conversion without changing the scene descriptor.

다음은, 3차원 콘텐츠에 사용자 인터랙션 방법에 대하여 설명하기로 한다.Next, a user interaction method for 3D content will be described.

사용자는 재생모드에 따라 3차원 콘텐츠를 2D또는 3D로 임의로 조절하거나, 입체감 조절 모드에 따라 3차원 동영상의 디스패러티(disparity)를 임의로 조절하여 감상할 수 있다. 이는 수평방향으로 좌우 영상의 쉬프트(shift)를 통해 가능하다. The user may arbitrarily adjust the 3D content to 2D or 3D according to the playback mode, or may arbitrarily adjust the disparity of the 3D video according to the 3D control mode. This is possible by shifting left and right images in the horizontal direction.

또한, 영상 내 각 객체별로 디스패러티를 임의로 조절 가능할 경우, 사용자는 원하는 객체를 중심으로 디스패러티를 조절하여 감상할 수 있다.In addition, when the disparity can be arbitrarily adjusted for each object in the image, the user can adjust and enjoy the disparity around the desired object.

3차원 포맷 변환부(82)에서 생성되는 3차원 동영상은 3차원 모니터의 특성에 따라 그 포맷이 달라진다.The format of the 3D video generated by the 3D format converter 82 varies according to the characteristics of the 3D monitor.

상기의 본 발명은, DMB기반 3차원 입체 서비스를 위한 시스템 및 3차원 서비스를 제공하기 위한 모든 시스템에 적용 가능하다. The present invention is applicable to a system for DMB-based three-dimensional stereoscopic services and all systems for providing three-dimensional services.

또한, 본 발명은, 3차원 입체영상뿐만 아니라, 3차원 오디오 서비스에 대해서도 동일하게 적용 가능하다.The present invention is equally applicable to not only three-dimensional stereoscopic images but also three-dimensional audio services.

상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(씨디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기 로 한다.As described above, the method of the present invention may be implemented as a program and stored in a recording medium (CD-ROM, RAM, ROM, floppy disk, hard disk, magneto-optical disk, etc.) in a computer-readable form. Since this process can be easily carried out by those skilled in the art will not be described in more detail.

이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.The present invention described above is capable of various substitutions, modifications, and changes without departing from the technical spirit of the present invention for those skilled in the art to which the present invention pertains. It is not limited by the drawings.

상기와 같은 본 발명은, 기존의 DMB 서비스와 호환성을 유지하면서 사용자에게 보다 현실감 있는 3차원 입체영상 서비스를 제공하는 효과가 있다.The present invention as described above has the effect of providing a more realistic three-dimensional stereoscopic image service to the user while maintaining compatibility with the existing DMB service.

즉, 본 발명은, 3차원 입체영상 서비스를 위한 새로운 구조의 MPEG-4 객체 기술자를 제공하고, 이를 통하여 DMB기반으로 3차원 입체영상 서비스 제공함으로써, 기존의 DMB 시스템과의 호환성을 유지하면서도 사용자에게 보다 현실감 있는 3차원 서비스를 제공하는 효과가 있다.That is, the present invention provides a new structure of MPEG-4 object descriptor for 3D stereoscopic image service, and provides 3D stereoscopic image service based on DMB, thereby maintaining compatibility with the existing DMB system. There is an effect of providing a more realistic three-dimensional service.

Claims (17)

디지털 멀티미디어 방송(DMB) 기반의 3차원 입체영상 서비스 제공 방법에 있어서,In the 3D stereoscopic video service providing method based on digital multimedia broadcasting (DMB), '데이터 서비스 컴포넌트 타입(DSCTy: Data Service Component Type)'을 통하여 DMB 서비스임을 정의하고, '사용자 어플리케이션 타입(User Application Type)'을 통하여 상기 DMB 서비스의 차원을 정의하는 서비스 유형/차원 정의 단계; 및A service type / dimension defining step of defining a DMB service through a 'Data Service Component Type (DSCTy)' and defining a dimension of the DMB service through a 'User Application Type'; And 서비스 대상이 되는 3차원 영상에 대한 기준영상과 3차원 부가정보를 서로 다른 객체기술자(Object Descriptor)를 이용하여 각기 다른 독립스트림으로 할당하는 스트림 할당 단계Stream allocation step of allocating the reference image and the 3D additional information about the 3D image to be serviced to different independent streams using different object descriptors 를 포함하는 DMB 기반의 3차원 입체영상 서비스 제공 방법.DMB-based 3D stereoscopic image service providing method comprising a. 제 1 항에 있어서,The method of claim 1, 상기 스트림 할당 단계는,The stream allocation step, 상기 기준영상에 대해서는 "ObjectTypeIndication=0x21(AVC), StreamType=0x04(visual stream)"로 설정하고, 상기 3차원 부가 정보에 대해서는 "ObjectTypeIndication=0xC0(user private), StreamType=0x04(visual stream)"로 설정하는 것을 특징으로 하는 DMB 기반의 3차원 입체영상 서비스 제공 방법.The reference image is set to "ObjectTypeIndication = 0x21 (AVC), StreamType = 0x04 (visual stream)", and for the 3D additional information, "ObjectTypeIndication = 0xC0 (user private), StreamType = 0x04 (visual stream)". DMB-based 3D stereoscopic video service providing method characterized in that the setting. 제 2 항에 있어서,The method of claim 2, 상기 3차원 부가정보는,The three-dimensional additional information, 해당하는 객체기술자(OD) 내의 3차원 부가 기술자(3D additional descriptor)를 통하여 해당 3차원 부가정보 타입(Type)을 정의하는 것을 특징으로 하는 DMB 기반의 3차원 입체영상 서비스 제공 방법.DMB-based 3D stereoscopic image service providing method characterized in that the 3D additional information type is defined through a 3D additional descriptor in the corresponding object descriptor (OD). 디지털 멀티미디어 방송(DMB) 기반의 3차원 입체영상 서비스 제공 방법에 있어서,In the 3D stereoscopic video service providing method based on digital multimedia broadcasting (DMB), '데이터 서비스 컴포넌트 타입(DSCTy: Data Service Component Type)'을 통하여 DMB 서비스임을 정의하고, '사용자 어플리케이션 타입(User Application Type)'을 통하여 상기 DMB 서비스의 차원을 정의하는 서비스 유형/차원 정의 단계; 및A service type / dimension defining step of defining a DMB service through a 'Data Service Component Type (DSCTy)' and defining a dimension of the DMB service through a 'User Application Type'; And 서비스 대상이 되는 3차원 영상에 대한 기준영상과 3차원 부가정보를 하나의 객체기술자(Object Descriptor)를 이용하여, 상기 기준영상은 독립스트림으로 할당하고 상기 3차원 부가정보는 상기 기준영상의 종속스트림으로 할당하는 스트림 할당 단계The reference image and the three-dimensional additional information about the three-dimensional image to be serviced are allocated to an independent stream by using an object descriptor, and the three-dimensional additional information is a dependent stream of the reference image. Stream allocation step 를 포함하는 DMB 기반의 3차원 입체영상 서비스 제공 방법.DMB-based 3D stereoscopic image service providing method comprising a. 제 4 항에 있어서,The method of claim 4, wherein 상기 스트림 할당 단계는,The stream allocation step, 상기 기준영상에 대해서는 "ObjectTypeIndication=0x21(AVC), StreamType=0x04(visual stream)"로 설정하고, 상기 3차원 부가 정보에 대해서는 "ObjectTypeIndication=0xC0(user private), StreamType=0x04(visual stream), StreamDependanceFlag=1, dependsOn_ES_ID=101(기준영상 ES_ID)"로 설정하는 것을 특징으로 하는 DMB 기반의 3차원 입체영상 서비스 제공 방법.The reference image is set to "ObjectTypeIndication = 0x21 (AVC), StreamType = 0x04 (visual stream)", and for the 3D additional information, "ObjectTypeIndication = 0xC0 (user private), StreamType = 0x04 (visual stream), StreamDependanceFlag = 1, dependsOn_ES_ID = 101 (reference image ES_ID) ". 제 5 항에 있어서,The method of claim 5, 상기 3차원 부가 정보는,The three-dimensional additional information, 상기 객체 기술자 또는 기초스트림 기술자(ES_Descriptor) 내의 '3차원 부가 기술자(3D additional descriptor)'를 통하여, 사용되는 3차원 부가정보 타입이 정의되는 것을 특징으로 하는 DMB 기반의 3차원 입체영상 서비스 제공 방법.A method of providing 3D stereoscopic image service based on DMB, wherein the type of 3D additional information used is defined through a '3D additional descriptor' in the object descriptor or the ES_Descriptor. 제 1 항 내지 제 6 항 중 어느 한 항에 있어서,The method according to any one of claims 1 to 6, 상기 3차원 부가정보는,The three-dimensional additional information, 디스패러티(Disparity) 정보, 디스패러티 정보와 잉여데이터(Disparity + residual data), 깊이(Depth)정보, 깊이정보와 잉여데이터(Depth + residual data), 전체의 부가영상, 세로절반의 부가영상, 가로절반의 부가영상, 가로/세로 절반 부가영상(quarter)을 포함하는 것을 특징으로 하는 DMB 기반의 3차원 입체영상 서비스 제공 방법.Disparity information, disparity information and excess data (Disparity + residual data), depth information, depth information and depth data (Depth + residual data), whole additional video, half-length additional video, horizontal A method for providing a 3D stereoscopic image service based on DMB, characterized in that it comprises a half additional image and a horizontal / vertical half additional image. 제 7 항에 있어서,The method of claim 7, wherein 상기 부가영상은,The additional video, 상기 기준영상이 좌영상(Left image)이면 우영상(Right image)이고, 상기 기준영상이 우영상(Right image)이면 좌영상(Left image)인 것을 특징으로 하는 DMB 기반의 3차원 입체영상 서비스 제공 방법.If the reference image is a left image (Left image), the right image (Right image), if the reference image is a right image (Right image) provides a 3D stereoscopic image service based on DMB characterized in that the left image (Left image) Way. ＤＭＢ 기반의 3차원 입체영상 서비스를 위한 복호화 장치에 있어서,In the decoding apparatus for 3D stereoscopic image service based on DMB, 서로 다른 두 개의 객체기술자(Object Descriptor)를 통하여 기준영상 스트림과 3차원 부가정보 스트림을 개별적으로 인식하여 디코딩하기 위한 디코딩 수단; 및Decoding means for separately recognizing and decoding the reference video stream and the 3D additional information stream through two different object descriptors; And 상기 디코딩 수단에서 디코딩된 기준영상과 3차원 부가영상 중에서 어느 하나는 홀라인 데이터만을 가지는 영상으로 변환하고, 나머지 다른 하나는 짝라인 데이터만을 가지는 영상으로 변환하기 위한 3차원 포맷 변환 수단Three-dimensional format converting means for converting any one of the reference image and the three-dimensional additional image decoded by the decoding means into an image having only the line data, and the other to an image having only the paired line data 을 포함하는 DMB 기반의 3차원 입체영상 서비스를 위한 복호화 장치.Decoding apparatus for DMB-based 3D stereoscopic image service comprising a. 제 9 항에 있어서,The method of claim 9, 상기 3차원 포맷 변환 수단은,The three-dimensional format conversion means, 홀라인 데이터 또는 짝라인 데이터만을 가지는 영상으로 변환하는 경우, 대응되는 나머지 라인을 가비지(Garbage) 데이터로 채우는 것을 특징으로 하는 DMB 기반의 3차원 입체영상 서비스를 위한 복호화 장치.The apparatus for decoding 3D stereoscopic image service based on DMB, characterized in that when converting the image having only the only line data or the pair line data, the corresponding remaining line is filled with garbage data. 제 10 항에 있어서,The method of claim 10, 상기 3차원 포맷 변환 수단은, The three-dimensional format conversion means, 사용자로부터 2차원 디스플레이를 요구받으면, 장면기술자에서 3차원 부가 정보에 해당하는 노드를 비활성화함으로써 상기 디코딩 수단에서 디코딩된 기준영상만을 출력하는 기능을 더 수행하는 것을 특징으로 하는 DMB 기반의 3차원 입체영상 서비스를 위한 복호화 장치.When the user requests a two-dimensional display, the scene descriptor further deactivates a node corresponding to the three-dimensional additional information to output only the reference image decoded by the decoding means. Decryption apparatus for service. ＤＭＢ 기반의 3차원 입체영상 서비스를 위한 복호화 장치에 있어서,In the decoding apparatus for 3D stereoscopic image service based on DMB, 하나의 객체기술자(Object Descriptor)를 통하여 기준영상 스트림과 3차원 부가정보 스트림을 인식하여 디코딩하기 위한 디코딩 수단; 및Decoding means for recognizing and decoding the reference video stream and the 3D side information stream through an object descriptor; And 상기 디코딩 수단에서 디코딩된 기준영상과 3차원 부가영상을 결합하여 하나의 3차원 영상을 생성하기 위한 3차원 포맷 변환 수단3D format converting means for generating one 3D image by combining the reference image decoded by the decoding means and the 3D additional image 을 포함하는 DMB 기반의 3차원 입체영상 서비스를 위한 복호화 장치.Decoding apparatus for DMB-based 3D stereoscopic image service comprising a. 제 12 항에 있어서,The method of claim 12, 상기 3차원 포맷 변환 수단은, The three-dimensional format conversion means, 사용자로부터 2차원 디스플레이를 요구받으면, 상기 디코딩 수단에서 디코딩된 기준영상만을 단순히 출력하는 기능을 더 수행하는 것을 특징으로 하는 DMB 기반의 3차원 입체영상 서비스를 위한 복호화 장치.And receiving a two-dimensional display from a user, further performing a function of simply outputting only the reference image decoded by the decoding means. 제 9 항 내지 제 13 항 중 어느 한 항에 있어서,The method according to any one of claims 9 to 13, 상기 3차원 포맷 변환 수단은,The three-dimensional format conversion means, 상기 사용자의 요구에 따라, 영상의 입체감 조절을 위하여 3차원 영상의 디스패러티(Disparity)를 조정하는 것을 특징으로 하는 DMB 기반의 3차원 입체영상 서비스를 위한 복호화 장치.The apparatus for decoding 3D stereoscopic image service based on DMB, characterized in that to adjust the disparity of the 3D image to adjust the 3D effect of the image according to the user's request. ＤＭＢ 수신 단말에서의 3차원 입체영상 서비스 방법에 있어서,In the 3D stereoscopic image service method in a DMV receiving terminal, 서로 다른 두 개의 객체기술자(Object Descriptor)를 통하여 기준영상 스트림과 3차원 부가정보 스트림을 개별적으로 인식하여 디코딩하는 디코딩 단계;A decoding step of separately recognizing and decoding the reference video stream and the 3D additional information stream through two different object descriptors; 사용자로부터 재생모드를 입력받는 재생모드 입력 단계;A play mode input step of receiving a play mode from a user; 상기 입력받은 재생모드가 2차원 디스플레이 재생모드이면, 상기 디코딩 단계에서 디코딩된 기준영상만이 출력되도록 장면 기술자에서 3차원 부가정보에 해당하는 노드를 비활성화하는 2차원 재생 단계; 및If the inputted reproduction mode is a two-dimensional display reproduction mode, a two-dimensional reproduction step of deactivating a node corresponding to three-dimensional additional information in a scene descriptor so that only the reference image decoded in the decoding step is outputted; And 상기 입력받은 재생모드가 3차원 디스플레이 재생모드이면, 상기 디코딩 수단에서 디코딩된 기준영상과 3차원 부가영상 중에서 어느 하나는 홀라인 데이터만을 가지는 영상으로 변환하고 나머지 다른 하나는 짝라인 데이터만을 가지는 영상으로 변환하는 3차원 포맷 변환 단계If the inputted reproduction mode is a 3D display reproduction mode, any one of the reference image and the 3D additional image decoded by the decoding means is converted into an image having only the holline data, and the other is an image having only paired data. 3D format conversion step to convert 를 포함하는 DMB 수신 단말에서의 3차원 입체영상 서비스 방법.3D stereoscopic image service method in a DMB receiving terminal including a. ＤＭＢ 수신 단말에서의 3차원 입체영상 서비스 방법에 있어서,In the 3D stereoscopic image service method in a DMV receiving terminal, 하나의 객체기술자(Object Descriptor)를 통하여 기준영상 스트림과 3차원 부가정보 스트림을 인식하여 개별적으로 디코딩하는 디코딩 단계;A decoding step of recognizing and separately decoding the reference video stream and the 3D additional information stream through an object descriptor; 사용자로부터 재생모드를 입력받는 재생모드 입력 단계;A play mode input step of receiving a play mode from a user; 상기 입력받은 재생모드가 2차원 디스플레이 재생모드이면, 상기 디코딩 단계에서 디코딩된 기준영상만을 단순히 출력하는 2차원 재생 단계; 및A two-dimensional reproduction step of simply outputting only the reference image decoded in the decoding step if the input reproduction mode is the two-dimensional display reproduction mode; And 상기 입력받은 재생모드가 2차원 디스플레이 재생모드이면, 상기 디코딩 수단에서 디코딩된 기준영상과 3차원 부가영상을 결합하여 하나의 3차원 영상을 생성하는 3차원 포맷 변환 단계A three-dimensional format conversion step of generating one three-dimensional image by combining the reference image decoded by the decoding means and the three-dimensional additional image when the input reproduction mode is the two-dimensional display reproduction mode; 를 포함하는 DMB 수신 단말에서의 3차원 입체영상 서비스 방법.3D stereoscopic image service method in a DMB receiving terminal including a. 제 15 항 또는 제 16 항에 있어서,The method according to claim 15 or 16, 상기 사용자의 요구에 따라, 영상의 입체감 조절을 위하여 3차원 영상의 디스패러티(Disparity)를 조정하는 단계Adjusting the disparity of the 3D image to adjust the stereoscopic effect of the image according to the user's request 를 더 포함하는 DMB 수신 단말에서의 3차원 입체영상 서비스 방법.3D stereoscopic image service method in a DMB receiving terminal further comprising.
KR1020060001987A 2005-12-09 2006-01-06 Method for providing three dimensional image service based on DMB, Apparatus and Method of Decoding for three dimensional image service based on DMB KR100747550B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
EP06769273.1A EP1961238A4 (en) 2005-12-09 2006-07-13 Method for providing dmb-based 3d image service, and decoding apparatus and method for dmb-based 3d image service
PCT/KR2006/002756 WO2007066868A1 (en) 2005-12-09 2006-07-13 Method for providing dmb-based 3d image service, and decoding apparatus and method for dmb-based 3d image service

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020050121112 2005-12-09
KR20050121112 2005-12-09

Publications (2)

Publication Number Publication Date
KR20070060951A KR20070060951A (en) 2007-06-13
KR100747550B1 true KR100747550B1 (en) 2007-08-08

Family

ID=38356896

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060001987A KR100747550B1 (en) 2005-12-09 2006-01-06 Method for providing three dimensional image service based on DMB, Apparatus and Method of Decoding for three dimensional image service based on DMB

Country Status (4)

Country Link
EP (1) EP1961238A4 (en)
KR (1) KR100747550B1 (en)
CN (1) CN101366290A (en)
WO (1) WO2007066868A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100913397B1 (en) 2006-12-04 2009-08-21 한국전자통신연구원 Method of object description for three dimensional image service based on dmb, and method for receiving three dimensional image service and converting image format
KR100972792B1 (en) 2008-11-04 2010-07-29 한국전자통신연구원 Synchronizer and synchronizing method for stereoscopic image, apparatus and method for providing stereoscopic image

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100910996B1 (en) * 2006-12-08 2009-08-05 한국전자통신연구원 Method of Providing Three-Dimensional Video Service in Digital Multimedia Broadcasting System
KR100938283B1 (en) * 2007-12-18 2010-01-22 한국전자통신연구원 Apparatus and method for transmitting/receiving three dimensional broadcasting service using separate transmission of image information
KR100955578B1 (en) * 2007-12-18 2010-04-30 한국전자통신연구원 System and Method for stereoscopic contents display
BRPI0822032A2 (en) * 2007-12-20 2015-07-21 Koninkl Philips Electronics Nv Image encoding method that enables stereoscopic rendering, data bearer, image encoder, image decoder, and computer program product
KR100921686B1 (en) * 2008-02-18 2009-10-15 전자부품연구원 Stereoscopic video file format and computer readable recording medium for recording a stereoscopic video file therefore
US20110044664A1 (en) * 2008-06-18 2011-02-24 Maki Yukawa Three-dimensional video conversion recording device, three-dimensional video conversion recording method, recording medium, three-dimensional video conversion device, and three-dimensional video transmission device
KR100963005B1 (en) 2008-07-09 2010-06-10 한국전자통신연구원 Method for file formation according to freeview av service
KR20100040640A (en) * 2008-10-10 2010-04-20 엘지전자 주식회사 Receiving system and method of processing data
EP2319247A4 (en) * 2008-10-27 2012-05-09 Samsung Electronics Co Ltd Methods and apparatuses for processing and displaying image
US8520057B2 (en) 2008-11-04 2013-08-27 Electronics And Telecommunications Research Institute Method and system for transmitting/receiving 3-dimensional broadcasting service
KR101279120B1 (en) * 2009-05-15 2013-06-26 엘지디스플레이 주식회사 Image display device
WO2010151555A1 (en) 2009-06-24 2010-12-29 Dolby Laboratories Licensing Corporation Method for embedding subtitles and/or graphic overlays in a 3d or multi-view video data
TW201119353A (en) 2009-06-24 2011-06-01 Dolby Lab Licensing Corp Perceptual depth placement for 3D objects
KR101781872B1 (en) 2009-10-13 2017-09-26 엘지전자 주식회사 Broadcast receiver and 3d video data processing method thereof
EP2489196A4 (en) * 2009-10-13 2014-03-05 Lg Electronics Inc Broadcast receiver and 3d video data processing method thereof
US8988495B2 (en) 2009-11-03 2015-03-24 Lg Eletronics Inc. Image display apparatus, method for controlling the image display apparatus, and image display system
EP2334088A1 (en) * 2009-12-14 2011-06-15 Koninklijke Philips Electronics N.V. Generating a 3D video signal
US8325757B2 (en) * 2009-12-17 2012-12-04 Silicon Image, Inc. De-encapsulation of data streams into multiple links
US9426441B2 (en) 2010-03-08 2016-08-23 Dolby Laboratories Licensing Corporation Methods for carrying and transmitting 3D z-norm attributes in digital TV closed captioning
US9172991B2 (en) * 2010-04-30 2015-10-27 Lg Electronics Inc. Apparatus of processing an image and a method of processing thereof
KR101883018B1 (en) * 2010-07-21 2018-07-27 톰슨 라이센싱 Method and device for providing supplementary content in 3d communication system
KR101910192B1 (en) * 2010-11-12 2018-10-22 한국전자통신연구원 Method and apparatus determining image compression format of the 3dtv
KR101763941B1 (en) * 2010-12-20 2017-08-01 엘지디스플레이 주식회사 Stereoscpic image display device
EP2697975A1 (en) 2011-04-15 2014-02-19 Dolby Laboratories Licensing Corporation Systems and methods for rendering 3d images independent of display size and viewing distance
EP2753084A4 (en) 2011-08-31 2014-12-31 Lg Electronics Inc Digital broadcast signal processing method and device
JP6192902B2 (en) * 2011-11-11 2017-09-06 サターン ライセンシング エルエルシーＳａｔｕｒｎ Ｌｉｃｅｎｓｉｎｇ ＬＬＣ Image data transmitting apparatus, image data transmitting method, image data receiving apparatus, and image data receiving method
KR102009049B1 (en) 2011-11-11 2019-08-08 소니 주식회사 Transmitting apparatus, transmitting method, receiving apparatus and receiving method

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040074548A (en) * 2003-02-19 2004-08-25 이승현 Apparatus for displaying stereoscopic image
KR20040104777A (en) * 2003-06-04 2004-12-13 주식회사 팬택앤큐리텔 Handset having dual camera

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100523052B1 (en) * 2002-08-30 2005-10-24 한국전자통신연구원 Object base transmission-receive system and method, and object-based multiview video encoding apparatus and method for supporting the multi-display mode
KR100751422B1 (en) * 2002-12-27 2007-08-23 한국전자통신연구원 A Method of Coding and Decoding Stereoscopic Video and A Apparatus for Coding and Decoding the Same
KR100585933B1 (en) * 2003-08-20 2006-06-01 한국전자통신연구원 System ? Method for Digital Multimedia Broadcasting
KR100999768B1 (en) * 2003-09-17 2010-12-08 엘지전자 주식회사 Method for managing additional information in digital mutimedia broadcasting receiver
KR100576544B1 (en) * 2003-12-09 2006-05-03 한국전자통신연구원 Apparatus and Method for Processing of 3D Video using MPEG-4 Object Descriptor Information

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040074548A (en) * 2003-02-19 2004-08-25 이승현 Apparatus for displaying stereoscopic image
KR20040104777A (en) * 2003-06-04 2004-12-13 주식회사 팬택앤큐리텔 Handset having dual camera

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100913397B1 (en) 2006-12-04 2009-08-21 한국전자통신연구원 Method of object description for three dimensional image service based on dmb, and method for receiving three dimensional image service and converting image format
KR100972792B1 (en) 2008-11-04 2010-07-29 한국전자통신연구원 Synchronizer and synchronizing method for stereoscopic image, apparatus and method for providing stereoscopic image

Also Published As

Publication number Publication date
EP1961238A4 (en) 2014-04-30
EP1961238A1 (en) 2008-08-27
WO2007066868A1 (en) 2007-06-14
CN101366290A (en) 2009-02-11
KR20070060951A (en) 2007-06-13

Similar Documents

Publication Publication Date Title
KR100747550B1 (en) Method for providing three dimensional image service based on DMB, Apparatus and Method of Decoding for three dimensional image service based on DMB
KR100864826B1 (en) Method and Apparatus for 3D still image service over digital broadcasting
US9380288B2 (en) System and method for transmitting/receiving three dimensional video based on digital broadcasting
KR100397511B1 (en) The processing system and it's method for the stereoscopic/multiview Video
KR100658222B1 (en) 3 Dimension Digital Multimedia Broadcasting System
KR100556826B1 (en) System and Method of Internet Broadcasting for MPEG4 based Stereoscopic Video
US20110273541A1 (en) Signal transmission method, signal transmission device, and signal reception device
KR100703715B1 (en) Multiview 3D video transmission/receiving system
JP2010512096A (en) Non-real-time digital actual broadcasting transmission / reception system and method
JP2005533433A (en) Apparatus and method for adaptive conversion of 2D and 3D stereoscopic video signals
KR20110123658A (en) Method and system for transmitting/receiving 3-dimensional broadcasting service
KR101490005B1 (en) Method and apparatus for converting two-dimensional video content for insertion into three-dimensional video content
KR20120065943A (en) Methods of signaling for stereoscopic video service and apparatuses for using the same
JP2022000943A (en) 3dtv broadcast sending-receiving device
KR100874226B1 (en) Multi-view Image and 3D Audio Transceiver and Transmit and Receive Method Using the Same
CN104813657A (en) Method for coding and decoding a digital video, and related coding and decoding devices
KR20170130883A (en) Method and apparatus for virtual reality broadcasting service based on hybrid network
KR100826519B1 (en) Method for descripting objects and multiplexing for 3d visual image service based on dmb, apparatus and method for decoding according it
KR20170093637A (en) Method for buffering media transport stream in heterogeneous networks environment and image receiving apparatus using the method
KR20130046404A (en) Transmission apparatus for reproducing 2d mode in digital terminal, 2d mode reproducing apparatus in digital terminal, and methods of executing the transmission apparatus and the 2d mode reproducing apparatus
Lee et al. Rich Media Services for T-DMB: 3-D Video and 3-D Data Applications
Park et al. A Viewpoint Switching Method for Multiview Videos Using the MPEG-4 System

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120730

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20130729

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20140728

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20150728

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20160726

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20170727

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20190725

Year of fee payment: 13