KR20080033433A - 데이터 재생을 위한 방법 그리고 장치, 기록 매체, 그리고데이터 기록을 위한 방법 그리고 장치 - Google Patents

Abstract

하나의 일 실시예로는, 기록 매체로부터 재생된 데이터의 제 1 비디오 스트림은 첫번째 디코더를 사용하여 디코드되고, 재생된 데이터의 제 2 비디오 스트림은 두번째 디코더를 사용하여 디코드된다. 제 2 비디오 스트림은 제 1 비디오 스트림에 관한 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 나타낸다.

광 디스크, BD, 제 2 비디오

Description

데이터 재생을 위한 방법 그리고 장치, 기록 매체, 그리고 데이터 기록을 위한 방법 그리고 장치{Method and apparatus for reproducing data, recording medium, and method and apparatus for recording data}

본 발명은 기록 그리고 재생 방법 그리고 장치들, 그리고 기록 매체에 관한 발명이다.

기록매체로서 대용량의 데이터를 기록할 수 있는 광 디스크가 널리 사용되고 있다. 그 중에서도 최근에는 고화질의 비디오 데이터와 고음질의 오디오 데이터를 장시간 동안 기록하여 저장할 수 있는 새로운 고밀도 기록매체, 예를 들어 블루레이 디스크(BD: Blu-ray Disc)와 고밀도 디지털 비디오 디스크(HD-DVD: High Definition Digital Versatile Disc) 등이 개발되고 있다.

차세대 기록매체 기술인 고밀도 광 기록매체는 기존의 DVD에 비해 훨씬 더 많은 데이타를 저장할 수 있는 차세대 광기록 솔루션으로 고려되고 있다. 근래에 다른 디지털기기와 함께 이에 대한 개발이 진행되고 있다. 또한, 고밀도 기록매체 규격을 응용한 광기록 재생장치의 개발도 시작되고 있다.

고밀도 기록매체와 광기록/재생장치의 개발에 따라, 복수의 비디오를 동시에 재생하는 것이 가능해졌다. 그러나, 아직 복수의 비디오를 효율적으로 동시에 기록 이나 재생을 하는 방법이 없다. 게다가, 고밀도 기록매체 규격이 완전히 완비되지 못한 관계로, 고밀도 기록매체 기반의 완성된 광기록/재생장치를 개발하는 데 어려움이 따르는 것이 사실이다.

상기 본원 발명은 기록 매체로부터 재생된 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 디코딩하는 방법과 관련된다.

하나의 실시예로서, 기록 매체로부터 재생된 데이터의 제 1 비디오 스트림은 첫번째 디코더를 사용하여 디코드되고, 재생된 데이터의 제 2 비디오 스트림은 두번째 디코더를 사용하여 디코드된다. 상기 제 2 비디오 스트림은 제 1 비디오 스트림에 관한 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 나타낸다.

하나의 실시예로서, 상기 방법은 기록 매체에 기록된 데이터 파일로부터 메인 패스 데이터 스트림을 재생하는 것을 더 포함한다. 상기 메인 데이터 스트림은 제 1 그리고 제 2 비디오 스트림들을 포함한다. 이 실시예는 상기 제 1 비디오 스트림을 상기 메인 데이터 스트림으로부터 분리하고, 제 2 비디오 스트림을 상기 메인 데이터 스트림으로부터 분리하는 것을 더 포함할 것이다.

하나의 실시예로서, 기록 매체에 기록된 타입 정보에 기초해 제 2 비디오 스트림이 제 1 비디오 스트림과 동일한 데이터 파일안에 기록될 것인가가 결정되고, he 메인 데이터 스트림은 상기 결정 단계에 기초해 재생된다.

또 다른 실시예로서, 메인 패스 데이터 스트림은 기록 매체에 기록된 첫번째 데이터 파일로부터 재생된다. 상기 메인 패스 데이터 스트림은 상기 제 1 비디오 스트림을 포함한다. 또한, 서브 패스 데이터 스트림은 기록 매체에 기록된 두번째 데이터 파일로부터 재생된다. 상기 두번째 데이터 파일은 상기 첫번째 데이터 파일로부터 분리되고, 상기 서브 패스 데이터 스트림은 상기 제 2 비디오 스트림을 포함한다. 이 실시예는 제 1 비디오 스트림을 상기 메인 패스 데이터 스트림으로부터 분리하고, 제 2 비디오 스트림을 상기 서브 패스 데이터 스트림으로부터 분리하는 것을 포함할 것이다.

하나의 실시예로서, 제 2 비디오 스트림이 제 1 비디오 스트림과 동일한 데이터 파일에 기록될지 또는 데이터 파일이 제 1 비디오 스트림으로부터 분리될지는 상기 기록 매체에 기록된 타입 정보에 기초해 결정된다.

그러나 다른 실시예는 기록 매체에 기록된 타입 정보에 기초해 제 2 비디오 스트림을 제 1 비디오 스트림과 동기화하여 디스플레이하는 것을 더 포함한다.

다른 실시예는 기록 매체에 기록된 타입 정보에 기초해 상기 제 2 비디오 스트림을 상기 제 1 비디오 스트림과 비동기화하여 디스플레이하는 것을 포함한다.

하나의 실시예로서 제 1 또는 제 2 비디오 스트림들의 비트 레이트의 합은 셋된 값(set value)과 동일하거나 더 작다.

다른 실시예로서, 제 2 비디오 스트림은 제 1 비디오 스트림과 동일한 스캔 타입을 가진다.

그러나 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 디코딩하는 방법의 또다른 실시예는 첫번째 디코더를 사용하여 기록 매체로부터 재생된 데이터의 제 1 비디오 스트림을 디코딩하는 것을 포함한다. 상기 방법은, 상기 기록 매체보다 외부 입력 소스로부터 상기 서브 패스 데이터 스트림을 수신하고, 적어도 하나의 제 2 비디오 스트림을 포함하는 상기 서브 패스 데이터 스트림을 저장하고, 상기 제 2 비디오 스트림을 두번째 디코더로 디코딩하는 것을 더 포함한다. 상기 제 2 비디오 스트림은 제 1 비디오 스트림에 관해 픽쳐-인-픽쳐(picture-in-picture) 데이터로서 제공하는 것이 미리 결정된다.

상기 본원 발명은 또한 기록 매체로부터 재생된 픽쳐-인-픽쳐(picture-in-picture)비디오 데이터를 처리하는 방법에 관련한다. 이 방법에 의한 하나의 실시예는, 제 1 비디오 스트림을 상기 기록 매체로부터 재생된 메인 패스 데이터 스트림으로부터 분리하고, 상기 제 1 비디오 스트림을 첫번째 디코더에 제공하는 것을 포함한다. 상기 실시예는 제 2 비디오 스트림을 기록 매체로부터 재생된 메인 패스 데이터 스트림 그리고 서브 패스 데이터 스트림중의 하나로부터 분리하고, 상기 제 2 비디오 스트림을 두번째 디코더에 제공하는 것을 더 포함한다.

상기 본원 발명은 기록 매체에 있는 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 기록하기 위한 방법 그리고 장치, 기록 매체로부터 재생된 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 디코딩하기 위한 장치, 그리고 상기 기록 매체와 더 관련한다.

본 발명에 대한 이해를 제공하고 본 출원에 통합되어 본 출원의 부분을 구성하는 첨부된 도면들은 본 발명 및 본 발명과 관련된 다른 도면을 구체화하여 설명한다. 도면에서:

도 1은 본 발명의 광기록/재생장치와 주변기간의 통합적 사용의 일 실시예를 도시한 것이다.

도 2는 본 발명의 기록매체로서 광 디스크에 기록되는 파일구조를 도시한 것이다.

도 3은 본 발명의 기록매체로서 광 디스크의 데이터 기록구조를 도시한 것이다.

도 4는 본 발명의 제 2 비디오에 관한 개념적 이해를 돕기 위해 도시한 것이다.

도 5는 본 발명의 광기록/재생장치의 전체 구성을 도시한 것이다.

도 6은 본 발명의 재생 시스템(playback system)을 설명하기 위해 도시한 것이다.

도 7은 본 발명의 AV 디코더를 개략적으로 도시한 것이다.

도 8A는 본 발명에 따른 제 2 비디오 인코딩 타입의 제 1 실시예를 도시한 것이다.

도 8B는 본 발명에 따라 제 2 비디오 인코딩 타입의 제 2 실시예를 도시한 것이다.

도 9A 내지 도 9C는 본 발명에 따른 제 2 비디오의 다양한 재생 경로 타입을 도시한 것이다.

도 10은 본 발명에 따른 데이터 재생방법의 일 실시예를 도시한 것이다.

본원 발명의 실시예들을 예로서 들기 위해 관련 도면에서 설명된 레퍼런스(reference)가 상세하게 만들어질 것이다. 가능하면 도면 내의 동일한 또는 유사한 파트들에는 동일한 참조 번호가 쓰일 것이다. 이하, 본 발명은 설명의 편의를 위해 광 디스크(optical disc)를 기록 매체로 설명할 것이다. 특히 "블루레이 디스크(BD)"를 기록 매체의 일례로 하여 설명하고자 하나, 본 발명의 기술사상은 HD-DVD 등 다른 기록매체에도 동일하게 적용가능함은 자명하다 할 것이다.

관련하여, 본 발명에서 "스토리지(Storage)"라 함은, 광 기록/재생장치(10) 내에 구비된 일종의 저장 수단이다(FIG .1). 스토리지는 사용자가 필요한 정보 및 데이터를 자유롭게 저장할 수 있는 요소를 의미한다. 즉, 현재 일반적으로 사용되는 스토리지로는 "하드디스크(hard disk)", "시스템 메모리(system memory)", "플래쉬 메모리(flash memory)"등이 있을 수 있으나, 본 발명이 반드시 이에 한정되는 것은 아니다.

특히, 본 발명과 관련하여, 상기 "스토리지(Storage)"는 기록매체(예를 들어, 블루레이 디스크)와 연관된 데이터를 저장하는 수단으로도 활용되며, 상기 기록매체와 연관되어 스토리지 내에 저장되는 데이터는 외부로부터 다운로드(download) 받은 데이터가 일반적이다.

관련하여, 기록매체로부터 직접 독출하는 것이 부분적으로 허용된 데이터, 또는 기록매체의 기록/재생과 관련되어 생산된 시스템 데이터(예를 들어, 메타데이터(metadata) 등)는 스토리지 내에 저장되는 것이 가능하다.

관련하여, 본 발명에서는 설명의 편의를 위해, 상기 기록매체 내에 기록된 데이터를 "오리지널 데이터(original data)"로 명명하고, 기록매체와 관련되어 스토리지 내에 저장된 데이터를 "어디셔널 데이터(additional data)"로 명명하고자 한다.

또한, 본 발명에서 "타이틀(Title)"이라 함은, 사용자와의 인터페이스를 이루는 재생단위를 말한다. 타이틀들은 특정의 오브젝트(Object)들과 상대적으로 링크(link)되어 있다. 그러므로, 타이틀과 관련되어 디스크내에 기록된 스트림들은 타이틀과 연결된 오브젝트 내의 명령어나 프로그램과 관련되어 재생된다. 특히, 본 발명에서는 설명의 편의를 위해 엠펙(MPEG)압축 방식에 따른 비디오 데이타를 포함하는 타이틀들 중에서, 한결같은 다중-각도(seamless multi-angle) 그리고 다중 스토리(multi story), 언어 신용(language credits), 감독의 컷(director's cut), 3부작 수집(trilogy collections)들을 특히 "HDMV(Hign Definition Movie) 타이틀들(Titles)"이라 명한다. 그리고, 엠펙(MPEG) 압축 방식에 따른 비디오 데이타를 포함하는 타이틀들 중에서, 네트워크 연결성과 함께 완전히 프로그램화된 애플리케이션 환경을 제공하여 컨텐츠 제공자가 높은 상호작용성을 창조하도록 하는 타이틀들은 "BD-J 타이틀(BD-J Title)"이라 명할 것이다.

도 1은 본 발명의 광기록/재생장치와 주변기간의 통합적 사용의 일 실시예를 도시한 것이다.

관련하여, 본 발명의 "광 기록/재생장치(10)"는 여러 가지 규격의 광 디스크에서/로부터 데이타를 기록하거나 재생하는 것이 가능한 기기이다. 설계에 따라서, 광 기록/재생장치(10)는 오직 특별한 규격의 광디스크(예를 들어, BD)를 기록하고 재생하도록 할 수도 있으며, 또한 기록은 제외하고 재생만 하도록 할 수도 있다. 그러나, 특히 본 발명에서 해결하고자 하는 블루레이 디스크(BD)와 주변기기와의 연계성을 고려하여 이하 블루레이 디스크(BD)를 재생하는 플레이어(BD-Player) 또는 블루레이 디스크(BD)를 기록/재생하는 리코더(BD-Recorder)를 예로 하여 설명한다. 관련하여, 본 발명의 광기록/재생장치(10)는 컴퓨터 등에 내장가능한 "드라이브(drive)"가 될 수 있음은 이미 널리 알려진 자명한 사실이다.

본 발명의 광기록/재생장치(10)는 광 디스크(30)를 기록/재생하는 기능 이외에도, 외부입력신호를 수신받아 이를 신호처리한 후 처리된 신호를 외부 디스플레이어(20)를 통한 시각적인 이미지의 형태로 사용자에게 전달하는 기능을 가지게 된다. 이 경우 입력가능한 외부신호에 대해서는 특별한 제한은 없으나, 디지털 멀티미디어 방송(Digital multimedia broadcasting)에 기초한 신호들 및 인터넷(Internet)에 기초한 신호들 등이 대표적인 외부입력신호가 될 것이다. 특히, 인터넷(Internet)에 기초한 신호들에 관해서는, 인터넷이 누구나 손쉽게 접근할 수 있는 매체이기 때문에, 광기록/재생장치(10)를 통해 인터넷(Internet)상의 특정 데이터를 다운로드(download) 받아 활용할 수 있게 된다.

관련하여, 외부입력 소스(external source)로서 콘텐츠(content)를 제공하는 자를 총칭하여 "콘텐츠 제공자(CP: content provider)"로 명명한다.

또한, 본 발명에서 콘텐츠(content)라 함은 타이틀을 구성하는 내용으로서, 관련 기록매체의 제작자(author)에 의해 제공되는 데이터(data)를 의미한다.

오리지널 데이터와 어디셔널 데이터에 대해 구체적으로 설명하면 다음과 같 다. 예를 들어, 특정 타이틀들의 멀티플렉싱된 AV 스트림이 광 디스크에 기록된 것이 광디스크의 오리지날 데이터로 될 것이다. 이 경우에, 오리지널 데이터(예를 들어, 영어)의 오디오 스트림과는 다른 오디오 스트림(예를 들어, 한국어 오디오 스트림)이 인터넷을 통한 어디셔널 데이터로 제공될 것이다. 사용자에 따라서는 인터넷상의 어디셔널 데이터와 대응하는 오디오 스트림(예를 들어, 한국어 오디오 스트림)을 다운로드 받아, 오리지널 테이터에 대응하는 AV스트림과 함께 재생하거나, 또는 어디셔널 데이터만 재생하고자 하는 요구가 존재할 것이다. 이를 가능케 하기 위해서는 상기 오리지널 데이터와 어디셔널 데이터 간의 연관성을 규정하고, 오리지날 데이터와 어디셔널 데이터를 사용자의 요구에 따라 관리/재생하는 체계화된 방법이 필요하게 된다.

상기에서 설명의 편의를 위해 디스크 내에 기록된 신호를 오리지널 데이터로 하고, 디스크 외부에 존재하는 신호를 어디셔널 데이터라고 명명하였다. 그러나, 이는 각각의 데이터를 취득하는 방법에 따라 구분될 따름이지 오리지널 데이터와 어디셔널 데이터가 반드시 특정의 데이터로 한정되는 것은 아니라 할 것이다. 따라서, 광 디스크 외부에 존재하면서, 오리지널 데이터와 함께 기록되어, 오리지널 데이터와 관련을 가지는 한, 임의의 속성의 데이터도 어디셔널 데이터로 가능하게 된다.

관련하여, 상기 사용자의 요구를 실현 가능케 하기 위하여는 오리지널 데이터와 어디셔널 데이터 상호 간에 연관된 파일구조를 가지는 것이 필수적이다. 이하 도 2와 도 3을 통해 블루레이 디스크(BD)에서 사용가능한 파일구조 및 데이터 기록 구조에 대해 상세히 설명하면 다음과 같다.

먼저, 도 2는 BD 내에 기록된 오리지널 데이터를 재생관리 하기 위한 파일구조를 나타낸 것이다.

즉, 본 발명의 파일구조는 루트 디렉토리(root directory)와, 루트 디렉토리 아래에 적어도 하나의 BDMV 디렉토리(BDMV)를 포함한다. 상기 BDMV디렉토리(BDMV)에는, 사용자와의 인터액티브티(interactivity)를 보장하기 위한 정보를 가지는 일반파일(상위파일)로서 인덱스 파일("index.bdmv")과 오브젝트 파일("MovieObjet.bdmv")이 존재한다. 아울러, 실제 디스크 내에 기록된 데이터에 대한 정보와 이를 재생하는 방법 등에 대한 정보를 가지는 디렉토리로서, 플레이리스트 디렉토리(PLAYLIST), 클립인포 디렉토리(CLIPINF), 스트림 디렉토리(STREAM), 보조 디렉토리(AUXDATA), BD-J 디렉토리(BDJO), 메타데이터 디렉토리(META), 백업 디렉토리(BACKUP) 그리고 JAR 디렉토리가 구비되어 있다. 이하 디렉토리 및 디렉토리 내에 포함되는 파일에 대해 상세히 설명하면 다음과 같다.

JAR 디렉토리는 자바 프로그램 파일(JAVA program files)을 포함한다.

메타데이터 디렉토리(META)는 데이터에 대한 데이터(data about a data)인 메타데이터(metadata) 파일을 포함한다. 상기 메타데이터 파일로는 서치(Search)파일, 디스크 라이브러리(Disc Library)를 위한 메타데이터 파일 등을 포함할 수 있다. 데이터의 기록/재생시, 데이터의 효율적 서치 및 관리에 이용되게 된다.

BD-J 디렉토리(BDJO)는 BD-J 타이틀을 재생하기 위한 BD-J 오브젝트 파일을 포함한다.

보조 디렉토리(AUXDATA)는, 디스크 재생에 필요한 부가적인 데이터 파일을 포함한다. 예를 들어, 인터액티브 그래픽(interactive graphic)기능의 실행시에 사운드를 제공하는 "Sound.bdmv" 파일, 디스크 재생시 폰트(font) 정보를 제공하는 "11111.otf" 과 "99999.otf"파일등이 있다.

스트림 디렉토리(STREAM)는, 디스크 내에 특정 포맷으로 기록된 AV 스트림에 대한 파일들을 포함한다. 각각의 스트림은 MPEG-2 방식의 트랜스포트(Transport) 패킷(packet)으로 기록되는 경우가 가장 일반적이다. 스트림 디렉토리인 스트림(STREAM)은 스트림 파일들(예를 들어 01000.m2ts, 02000.m2ts..)의 확장명으로 "*.m2ts" 을 사용한다. 특히, 비디오/오디오/그래픽 정보가 멀티플렉싱된(multiplexed) 스트림을 AV스트림이라 한다. 타이틀(title)은 적어도 하나 이상의 AV스트림 파일들로 구성된다.

클립인포 디렉토리(CLIPINF)는 스트림 디렉토리인 STREAM내에 포함된 스트림 파일("*.m2ts")과 일대일 대응하는 클립인포 파일(01000.clpi, 02000.clpi)들을 포함한다. 특히, 클립인포 파일("*.clpi")은 대응하는 스트림 파일("*.m2ts")의 속성정보 및 타임정보 (timing information)등을 기록하게 된다. 관련하여, 각각의 클립인포 파일("*.clpi")들과 각각의 클립인포 파일에 대응하는 스트림 파일("*.m2ts")을 묶어 이를 "클립(clip)"이라고 명명한다. 즉, "클립(clip)"은 하나의 스트림 파일("*.m2ts")과 하나의 스트림 파일에 대응하는 하나의 클립인포파일("*.clpi")을 모두 포함한 데이터 지시자가 된다.

플레이리스트 디렉토리(PLAYLIST)는 다수의 플레이리스트 파일("*.mpls")들 을 포함한다. 플레이리스트는 클립(clips)의 재생 간격(playing interval)의 조합을 말한다. 각각의 재생 간격을 플레이아이템(PlayItem)이라고 한다. 각각의 플레이리스트 파일("*.mpls")은 적어도 하나 이상의 플레이아이템 및 서브플레이아이템을 포함하고 있다. 플레이아이템 및 서브플레이아이템은 재생을 원하는 특정 클립(clip)의 재생 시작시간(IN-Time)과 재생 종료시간(OUT-Time)에 대한 정보를 포함한다. 따라서, 플레이리스트는 플레이아이템들의 조합이라고 할 수 있다.

관련하여, 플레이리스트 파일 내에서 상기 적어도 하나 이상의 플레이아이템에 의해 재생되는 과정을 "메인 패스(main path)"라 하고, 각각의 서브플레이아이템에 의해 재생되는 과정을 "서브패스(sub path)"라 정의한다. 메인 패스는 관련 플레이리스트의 마스터 재생(master presentation)을 제공하고, 서브패스는 상기 마스터 재생과 관련된 보조적인 재생(auxiliary presentations)을 제공한다. 각각의 플레이리스트 파일은 하나의 메인 패스(main path)를 포함해야 한다. 각각의 플레이리스트 파일은 적어도 하나의 서브 패스를 포함하고, 서브 패스들의 수는 서브플레이아이템들의 출현 및 부재에 따라 결정된다. 결국, 플레이리스트 파일은 적어도 하나 이상의 플레이아이템의 조합에 의해 원하는 클립의 재생을 수행하는 전체 재생관리 파일구조 내의 기본적 재생/관리 파일단위가 된다.

본 발명과 관련하여, 메인 패스에 의해 재생되는 비디오 데이터를 제 1 비디오(primary video)라 하고 서브패스에 의해 재생되는 비디오 데이터를 제 2 비디오(secondary video)라 명명한다. 광기록/재생장치가 제 1 비디오와 제 2 비디오를 함께 재생하는 기능을 "PiP(Picture In Picture)"라고도 한다. 관련하여, 메인 패 스와 함께 재생되는 서브패스 중 본 발명과 관련된 서브패스 타입은 크게 세 가지로 구분될 수 있다. 이에 대해서는 도 9A 내지 도 9C 에서 구체적으로 설명한다.

백업 디렉토리(BACKUP)는, 상기 파일구조상의 파일들 사본중 특히 디스크 재생과 관련된 정보가 기록되는 파일들 사본의 일례인 인덱스파일("index.bdmv"), 오브젝트 파일("MovieObject.bdmv") 그리고 "BD-JObject.bdmv", 단위 키 파일들(unit key files), 플레이리스트 디렉토리 (PLAYLIST)내의 모든 플레이리스트 파일("*.mpls") 및 클립인포 디렉토리(CLIPINF) 내의 모든 클립인포 파일("*.clpi")에 대한 복사본(copy) 파일을 저장하게 된다. 이는 상기 파일들의 손실시 디스크 재생에 치명적임을 고려하여 미리 백업(backup)용으로 별도 저장하기 위해서이다.

관련하여, 본 발명의 파일 구조가 상기 설명한 명칭 및 위치에 제한되는 것은 아님은 자명하다 할 것이다. 즉, 상기 디렉토리 및 파일들은 명칭 및 위치가 아닌 그 의미로서 파악되어야 할 것이다.

도 3은 본 발명에 의해 광디스크에 기록되는 데이터 기록구조를 도시한 것이다. 도 3은 상기 전술한 파일구조에 관련된 정보들이 디스크 내에 기록되는 형태를 보여준다. 디스크는 전체 파일을 관리하기 위한 시스템 정보로서 파일시스템 정보 영역 (File System Information area)과, 인덱스 파일, 오브젝트 파일, 플레이리스트 파일, 클립인포 파일 및 메타 파일들(기록된 스트림의 재생에 요구되는 "*.m2ts")로 기록되는 영역, 오디오/비디오/그래픽 등으로 구성된 스트림 또는 스트림 파일들로 기록되는 스트림 영역, JAVA 프로그램 파일들이 기록되는 JAR 영역을 포함한다. 위의 설명 순서는 디스크의 내주 영역으로부터 본 순서에 의한 것이 다.

디스크내에는 상기 스트림영역 내에 포함된 콘텐츠(content)를 재생하기 위한 파일정보 등을 기록하는 영역이 있다. 이 영역을 " 관리영역 "이라 한다. 파일시스템 정보 영역 (File System Information area) 및 데이터베이스 영역(database area)이 관리 영역에 포함된다.

단, 도 3의 각 영역은 하나의 예로 제시한 것이다. 본 발명이 도 3과 같은 각 영역의 배열구조에 국한되지 않음은 자명할 것이다.

본 발명과 관련하여, 상기 스트림영역에는 제 1 비디오 및/또는 제 2 비디오를 포함하는 스트림데이터가 저장된다. 본 발명에서 상기 제 2 비디오는 상기 제 1 비디오와 같은 스트림으로 인코딩될 수도 있고(in-mux로 언급되는), 다른 스트림으로 인코딩될 수도 있다(out-mux of out-of-mux로 언급되는). 상기 관리영역에는 상기 제 2 비디오가 인코딩된 스트림의 종류를 나타내는 정보, 즉, 제 2 비디오의 인코딩타입정보(out-mux 그리고 in-mux)가 기록될 수 있다.

도 4는 본 발명의 제 2 비디오에 관한 개념적 이해를 돕기 위해 도시한 것이다.

본 발명은 제 2 비디오(secondary video) 데이터를 제 1 비디오(primary video)와 함께 재생하는 방법을 제공하는 데 목적이 있다. 즉, 본 발명은 광기록/재생장치 구현에 있어서, PiP 어플리케이션을 가능하게 함과 아울러 효율적으로 상기 PiP 어플리케이션을 수행할 수 있도록 한다.

도 4를 참조하면, 제 1 비디오(410)가 재생중에 상기 제 1 비디오(410)와 관 련된 다른 비디오 데이터를 같은 디스플레이에(20) 출력하고자 하는 요구가 있을 수 있다. 본원 발명과 관련하여 그러한 PiP 응용(application)이 이루어질 수 있다. 예를 들어, 영화 또는 다큐멘터리의 재생 중에, 그 촬영 과정에 대한 감독의 코멘트 또는 에피소드를 함께 사용자에게 제공하는 것이 가능하다. 상기 코멘트 또는 에피소드를 보여주는 비디오가 제 2 비디오(420)가 된다. 상기 제 2 비디오(420)는 제 1 비디오(410)와 동시에 재생될 수 있고, 제 1 비디오(410)의 재생의 시작으로부터 재생될 수 있다.

제 1 비디오(410)의 재생 중간에 제 2 비디오(420)의 재생이 시작될 수도 있다. 또한, 제 2 비디오(420)를 재생과정에 따라 화면에서 다른 위치 또는 다른 크기로 디스플레이하는 것도 가능하다. 상기 제 2 비디오(420)가 복수로 구성될 수 있다. 이 경우에, 제 2 비디오(420)는 제 1 비디오(410)의 재생에 따라 별개로 재생될 수 있다. 제 1 비디오(410)는 제 1 비디오(410)와 관련된 오디오(410a)와 함께 재생될 수 있다. 제 2 비디오(420)는 제 2 비디오(420)와 관련된 오디오(420a)와 함께 재생될 수 있음은 물론이다.

관련하여, 제 2 비디오를 재생하기 위해서는 상기 제 2 비디오가 멀티플렉싱된 AV 스트림을 구분하고, 제 2 비디오의 디코딩을 위해 AV 스트림으로부터 제 2 비디오를 구분할 필요가 있다. 따라서, 상기 제 2 비디오가 어떤 스트림에 어떻게 인코딩되어 있는지에 관한 정보가 필요하다. 또한, 제 1 비디오와 제 2 비디오가 동기(sync)되어야 하는지에 대한 정보가 필요하다. 이 재생 경로 타입 정보(동기 화 혹은 비동기화된)는 인코딩 타입 정보의 부분으로 제공될 것이다. 아울러, 제 1 비디오를 제 2 비디오와 동시재생하기 위해서는 새로운 디코더 모델이 정의될 필요가 있다. 본 발명은 상기와 같은 문제점을 해결하여 제 2 비디오를 제 1 비디오와 함께 효율적으로 재생하는 바람직한 방법을 제공한다. 도 5 이하에서 본 발명에 대하여 구체적으로 설명한다.

도 5는 본 발명의 광기록/재생장치(10)의 전체 구성에 관한 일 실시예를 나타낸 것이다.

도 5에 따르면, 본 발명의 광기록/재생 장치(10)는 픽업(11), 서보(14), 신호 처리부(13), 그리고 마이크로프로세서(16)을 포함할 수 있다.

픽업(11)은 광 디스크에 기록된 오리지널 데이터와 관리 데이터를 재생한다.관리 데이터는 재생 관리 파일 정보를 포함한다. 서보(14)는 픽업(11)의 동작을 제어한다. 신호 처리부(13)는 상기 픽업(11)으로부터 재생 신호를 수신하고, 수신한 재생 신호를 원하는 신호 값으로 복원해낸다. 신호 처리부(13)는 또한 기록될 신호 예를 들어, 제 1 비디오와 제 2 비디오를 광 디스크에 기록되는 신호로 변조한다. 마이크로프로세서(16)는 픽업(11), 서보(14), 신호 처리부(13)의 기능을 제어한다.픽업(11)과 서보(14), 신호 처리부(13), 마이크로프로세서(16)를 통틀어 "기록/재생부"라고 불리기도 한다. 본 발명에서 기록/재생부는 제어부(12)의 제어에 따라 광 디스크(30) 또는 스토리지(15)부터 데이터를 읽어 AV 디코더(17b)에 제공한다. 또한, 기록/재생부는 AV 인코더(18)에 의해 인코딩된 신호를 받아 수신한 신호를 광 디스크(30)에 기록할 수 있다. 그러므로, 기록/재생부는 비디오와 오디오 데이터를 광 디스크(30)에 기록할 수 있다.

제어부(12)는 사용자명령 등에 의해 광 디스크 외에 존재하는 어디셔널 데이터를 다운로드 받아 이를 스토리지(15)에 저장한다. 제어부(12)는 또한 스토리지(15) 내 어디셔널 데이터 및/또는 광 디스크(30) 내 오리지널 데이터를 사용자의 요구에 따라 재생하게 된다. 또한, 본 발명에서 상기 제어부(12)는 제 2 비디오가 인코딩된 스트림의 종류에 따라 인코딩타입정보를 생성하고, 상기 인코딩타입정보를 비디오 데이터와 함께 광 디스크(30)에 기록하도록 기록/재생부를 제어한다. 제 2 비디오의 인코딩 타입에 대해서는 도 8A 내지 도 8C에서 상술한다.

광 기록/재생장치(10)는 결과적으로 데이터를 디코딩하고, 디코딩된 데이터를 제어부(12)의 제어에 따라 사용자에게 제공하기 위해 재생 시스템(17)을 더 포함한다. 재생 시스템(17)은 AV 신호를 디코딩하기 위해 AV 디코더(17b)를 포함한다. 재생 시스템(17)은 또한 전술한 특정 타이틀의 재생과 관련하여 오브젝트 커맨드 혹은 어플리케이션을 분석하기 위해, 제어부(12)를 통해 입력되는 사용자 명령을 분석하기 위해, 그리고 분석 결과에 따른 재생방향을 결정하기 위해 플레이어 모델(17a)을 포함할 수 있다. 실시예에 따라서는 플레이어 모델(17a)이 AV 디코더(17a)를 포함하는 의미로 사용되기도 한다. 이 경우 본 발명의 재생 시스템(17)이 곧 플레이어 모델이 된다. AV 디코더(18)는 본 발명의 광 기록/재생 장치(10)에 포함되어, 광 디스크(30)에 입력 신호의 기록이 가능하도록 하기 위해, 입력신호를 특정포맷의 신호, 예를 들어 MPEG2 트랜스포트 스트림으로 변환하여 신호 처리부(13)에 제공하게 된다.

도 6은 본 발명의 재생 시스템(playback system)을 설명하기 위해 도시한 것 이다. 본 발명에 따라 제 2 비디오와 제 1 비디오를 함께 재생하게 된다.

"재생 시스템(playback system)"이라 함은, 광기록/재생기 내에 구비되는 프로그램(소프트웨어) 및/또는 하드웨어로 구성되는 집합적 재생처리 수단을 말한다. 즉, 재생 시스템은 광기록/재생장치(10) 내에 로딩된 기록매체를 재생함은 물론, 상기 기록매체에 관련되어 스토리지 내에 저장된(예를 들어, 기록 매체의 외부로부터 다운로드 받은) 데이터를 함께 재생 및 관리하기 위한 시스템을 의미한다.

특히, 재생 시스템(17)은 "사용자 이벤트 관리자(User Event Manager)(171)", "모듈 관리자(Module Manager)(172)", "메타 데이터 관리자(Metadata Manager)(173)" "HDMV Module(174)", "BD-J Module(175)", "재생 제어 엔진(Playback Control Engine)(176)", "프리젠테이션 엔진(Presentation Engine)(177)" 및 "가상 파일 시스템(Virtual File System)(40)"으로 구성되며, 이를 상세히 설명하면 다음과 같다.

우선, HDMV 타이틀과 BD-J 타이틀을 재생하기 위한, 별도의 재생 처리 관리수단으로서, 각각 HDMV 타이틀을 위한 "HDMV Module(174)"과 BD-J 타이틀을 위한 "BD-J Module(175)"이 독립적으로 구성된다. 상기 "HDMV Module(174)" 및 "BD-J Module(175)"은 특히 전술한 오브젝트(Movie Object 또는 BD-J Object) 내의 커맨드(command) 혹은 프로그램을 수신하여, 이를 처리하도록 하는 제어기능을 가진다. 상기 "HDMV Module(174)" 및 "BD-J Module(175)"은 재생 시스템의 하드웨어적 구성으로부터 커맨드(command) 혹은 어플리케이션을 분리하여, 상기 커맨드 혹은 어플리케이션의 이동(portability)을 가능하게 한다. 명령어의 수신 및 처리를 위해, HDMV Module(174)은 명령어 처리자(Command Processor)(174a)를 포함할 수 있다. 어플리케이션의 수용 및 처리를 위해 "BD-J Module(175)"은 "Java Virutal Machine (VM)(175a)" 및 "Application manager(175b)"를 포함할 수 있다.

"Java VM(175a)"은 어플리케이션이 실행되는 "Virtual Machine"이다. "Application manager(175b)"는 BD-J Module(175)에서 처리되는 어플리케이션의 라이프사이클(lifecyle)을 관리하는 어플리케이션 관리 펑션(application management function)을 포함한다.

또한, 상기 "HDMV Module(174)" 및 "BD-J Module(175)"에 사용자 명령을 전달함은 물론, "HDMV Module(174)" 및 "BD-J Module(175)"의 동작을 제어하는 "모듈 관리자(Module Manager)(172)"가 구비된다. 상기 "HDMV Module(174)" 또는 "BD-J Module(175)"의 재생명령에 따라 실제 디스크 내에 기록된 플레이리스트 파일 정보를 해석하고 이에 따른 재생기능을 수행하는 "Playback Control Engine(176)"이 구비된다. 또한, 상기 "Playback Control Engine(176)"에 의해 재생관리되는 특정 스트림을 디코딩하고 화면 내에 디스플레이하기 위한 "프리젠테이션 엔진(Presentation Engine)(177)"이 구비된다. 특히, 상기 "Playback Control Engine(176)"은 실제 모든 재생을 관리하는 "재생 제어 기능(playback control functions)(176a)"과 플레이어의 재생상태 및 재생환경("Player status registers(PSR)" 및 "General purpose register(GPR)"의 정보)을 저장하는 "플레이어 등록자들(Player Registers)(176b)"로 구분된다. 경우에 따라서는 "재생 제어 기능(playback control functions)(176a)"이 "Playback Control Engine(176)"을 의 미하기도 한다.

관련하여, HDMV Module(174)과 BD-J Module(175)은 독립된 방식에 의해 사용자 명령어를 수신한다. HDMV Module(174)과 BD-J Module(175)의 사용자 명령어 처리 방식은 또한 상호간에 독립적이다. 사용자명령을 수신하여 "HDMV Module(174)"과 "BD-J Module(175)"중 어느 하나로 전달하는 수단이 필요한데 별개의 전송 수단이 사용되어야 한다. 본원 발명에서 이 기능은 "사용자 이벤트 관리자(User Event Manager)(171)"가 담당한다. 따라서, 예를 들어, "사용자 이벤트 관리자(User Event Manager)(171)"는, 수신된 명령이 "User Operation(UO)(171a)"에 의한 사용자 명령이면 이를 "모듈 관리자(Module Manager)(172)" 또는 "UO Controller(171a)"로 전송하여 수행케 한다. 수신된 명령이 "Key Event"에 의한 사용자 명령이면 이를 "BD-J Module(175)"내의 "Java VM(175a)"으로 전송하여 수행케 한다.

또한, 본 발명의 재생 시스템(17)은 "메타 데이터 관리자(Metadata Manager)(173)"를 포함할 수 있는데, "메타 데이터 관리자(Metadata Manager)(173)"는 사용자에게 디스크 라이브러리와 인핸스드 서치 메타데이터 어플리케이션(Disc Library and Enhanced Search Metadata application)을 제공한다.

전술한 본 발명의 재생 시스템(playback system)에서 상기 "모듈 관리자(Module Manager)(172)", "HDMV Module(174)", "BD-J Module(175)", "Playback Control Engine(176)"은 소프트웨어적인 처리가 가능하다. 실제 하드웨어 구성보다는 소프트웨어로 처리함이 설계에 더욱 유용하다. 단, "프리젠테이션 엔 진(Presentation Engine)(177)" 및 디코더(19)와 플레인(Plane)은 하드웨어적으로 설계되는 것이 일반적이다. 특히, 소프트웨어적으로 처리되는 구성요소(예를 들어, 도면부호 172, 174, 175, 176)의 경우는 전술한 제어부(12)의 한 부분으로 구성될 수도 있을 것이다. 본 발명의 구성은 그 의미로서 이해하여야 하며, 하드웨어적 구성인지 소프트웨어적 구성인지에 국한되지 않음을 밝혀두고자 한다. 관련하여, 플레인(Plane)이란 제 1 비디오, 제 2 비디오, PG(Presentation Graphics), IG(Interactive Graphics), 텍스트 서브타이틀의 오버레잉 과정을 설명하기 위한 개념적 모델이다. 본 발명에서 제 2 비디오 플레인은 제 1 비디오 플레인 앞에 놓이게 된다. 따라서, 디코딩되어 출력되는 제 2 비디오는 제 2 비디오 플레인 상에 디스플레이된다.

도 7은 본 발명의 AV 디코더(17b)를 개략적으로 도시한 것이다.

본 발명의 AV 디코더(17b)는 제 1 비디오와 제 2 비디오를 함께 재생하기 위해서 즉, PiP 어플리케이션의 구현을 위해서 제 2 비디오 디코더(730b)를 포함한다. 상기 제 2 비디오 디코더(730b)는 제 2 비디오를 디코딩하게 된다. 상기 제 2 비디오는 AV 스트림에 포함되어 기록매체(30)에 기록되어 사용자에게 제공된다. 제 2 비디오는 또한 기록매체 외부로부터 다운로드 되어 사용자에게 제공된다. 상기 AV 스트림은 트랜스포트스트림(Transprort Stream : TS)형태로 상기 AV 디코더(17b)에 제공된다.

관련하여, 본 발명에서는 메인 패스에 의해 재생되는 AV 스트림을 메인트랜스포트스트림(이하, 메인스트림)이라 명하고, 그 외의 AV 스트림을 서브트랜스포트 스트림 또는 sub TS(이하, 서브스트림)이라 명한다.

상기 AV 디코더(17b)에서, 광 디스크(30)로부터 메인 스트림은 스위칭 요소를 버퍼인 RB1에 전송하고, 버퍼된 메인스트림은 소스디패킷타이저(710a)에 의해 디패킷화된다. 상기 디패킷화된 AV 스트림에 포함된 데이터는 데이터 패킷종류에 따라 PID(Packet IDentifier) 필터-1(720a)내의 디패킷화된 AV 스트림으로부터 분리된 후에 대응하는 디코더(730a ~ 730g)에 제공된다. 즉, 상기 메인스트림에 제 2 비디오가 포함된 경우, 상기 제 2 비디오가 PID 필터 1(720a)에 의해 다른 데이터 패킷과 분리되어 제 2 비디오 디코더(730b)에 제공된다. 도시된 바와 같이, PID 필터 1(720a)로부터의 패킷들은 디코더(730a ~ 730g)에 의한 승인(receipt)전에 다른 스위칭 요소들을 전송할 것이다.

관련하여, 도 8A는 제 2 비디오가 인코딩되는 방법의 제 1 실시예를 도시한 것으로서, 제 2 비디오가 제 1 비디오와 함께 인코딩된 경우이다. 이와 같이 제 2 비디오가 제 1 비디오, 즉 메인 스트림과 같은 스트림으로 인코딩되는 인코딩 타입을 "in-mux" 라고 한다. 도 8A의 실시예에서, 플레이리스트는 하나의 메인 패스와 세 개의 서브패스를 포함한다. 상기 메인 패스는 주된 비디오/오디오의 재생경로이며, 상기 서브패스들은 주된 비디오/오디오에 부가되는 비디오/오디오의 재생 경로이다. 메인 패스를 구성하는 플레이아이템('PlayItem-1', 'PlayItem-2')들은 재생되는 클립과 상기 클립의 재생 간격(playing interval)을 지정한다. 플레이아이템의 STN 테이블에는 상기 플레이아이템의 재생(presentation) 동안 본 발명의 광기록/재생장치가 선택할 수 있는 기본 스트림들이 정의되어 있다. 플레이아이템- 1(PlayItem-1)과 플레이아이템-2(PlayItem-2)은 클립-0(Clip-0)을 지정한다. 따라서, 상기 플레이아이템-1과 플레이아이템-2의 재생 간격(playing interval) 동안 클립-0이 재생되게 된다. 상기 클립-0은 메인 패스에 의해 재생되므로 메인스트림으로 AV 디코더(17b)에 제공된다.

상기 메인 패스와 관련된 서브패스들(서브패스-1, 2, 3)은 하나의 서브플레이아이템으로 구성되며 상기 서브플레이아이템은 각각 재생되는 클립을 지정한다. 서브패스-1은 클립-0을, 서브패스-2는 클립-1을, 서브패스-3은 클립-2를 지정한다. 즉, 서브패스-1은 클립-0 내의 제 2 비디오와 오디오 스트림을 사용한다. 서브패스-2와 서브패스-3는 각각의 서브플레이아이템이 지정하는 클립의 오디오, PG, IG 스트림을 사용한다.

도 8A의 실시예에서, 제 2 비디오가 메인 패스에 의해 재생되는 클립-0 으로 인코딩되어 있다. 그러므로, 제 2 비디오는 제 1 비디오와 함께 메인스트림으로 AV 디코더(17b)에 제공된다. AV 디코더(17b)에서는 제 2 비디오가 PID 필터-1을 거쳐 제 2 비디오 디코더(730b)에 제공되고, 제 2 비디오 디코더(730b)에 의해 디코딩되게 된다. 관련하여, 상기 클립-0의 제 1 비디오는 제 1 비디오 디코더(Primary Video 디코더(Decoder) : 730a)에서, 제 1 오디오는 제 1 오디오 디코더(Primary Audio 디코더(Decoder) : 730e)에서, PG는 PG 디코더(730c)에서, IG는 IG 디코더(730d)에서, 제 2 오디오는 제 2 오디오 디코더(Secondary Audio 디코더(Decoder) : 730f)에서 각각 디코딩된다.

도 8B는 제 2 비디오가 인코딩되는 방법의 제 2 실시예를 도시한 것이다. 본 실시예에서 제 2 비디오는 제 1 비디오와 다른 스트림으로 인코딩된다.

도 8B의 플레이리스트는 하나의 메인 패스와 두 개의 서브패스(SubPath-1, SubPath-2)로 구성된다. 플레이아이템-1과 플레이아이템-2는 클립-0에 포함된 기본 스트림(elementary streams)을 재생한다. 서브패스-1과 서브패스-2는 각각 하나의 서브플레이아이템으로 구성되며, 상기 서브플레이아이템들은 각각 클립-1과 클립-2를 지정한다. 서브패스-1이 메인 패스와 함께 재생되는 경우, 상기 서브패스-1에 포함된 제 2 비디오가 메인 패스에 포함된 비디오(제 1 비디오)와 함께 재생된다. 서브패스-2가 메인 패스와 함께 재생되는 경우, 상기 서브패스-2에 포함된 제 2 비디오가 제 1 비디오와 함께 재생된다.

도 8B의 실시예에서, 제 2 비디오는 메인 패스에 재생되는 스트림이 아닌 스트림에 포함되어 있으므로 상기 제 2 비디오가 인코딩된 스트림 즉, 클립-1 또는 클립-2는 서브스트림으로 AV 디코더(17b)에 제공된다. 이와 같이 제 1 비디오와 다른 스트림에 제 2 비디오가 인코딩되는 경우를 'Out-of-mux'타입이라 한다.

AV 디코더(17b)에서, 광 디스크(30)또는 보조 저장소(local storage)(15)는 스위칭 요소를 버퍼인 RB2에 제공하고, 버퍼된 서브 스트림은 소스디패킷타이저(710b)에서 디패킷화된다. 상기 디패킷화된 AV 스트림에 포함된 데이터는 PID(Packet IDentifier) 필터 2(720b)에서 데이터 패킷 종류에 따라 분리되어 대응하는 디코더(730a ~ 730g)에 제공된다. PID(Packet IDentifier) 필터 2(720b)로부터의 패킷들은 디코더(730b-730f)에 의한 인식(receipt)전에 다른 스위칭 요소를 전송할 것이다. 예를 들어, 서브패스-1이 메인 패스와 함께 재생되는 경우, 클립-1 에 포함된 제 2 비디오가 제 2 오디오 패킷과 분리되어 제 2 비디오 디코더(730b)에 제공되어 디코딩된다. 상기 제 2 오디오는 제 2 오디오 디코더(730f)에 제공되어 디코딩될 것이다. 디코딩된 제 2 비디오는 제 1 비디오 디코더(730a)에서 디코딩되어 디스플레이되고 있는 제 1 비디오 위에 디스플레이된다. 따라서, 사용자는 디스플레이어(20)에서 제 1 비디오와 제 2 비디오를 함께 볼 수 있게 된다.

도 7 ~ 도 8b에서 전술한 본 발명에 따르면, 제 2 비디오의 인코딩 방법에 따라 제 2 비디오의 재생경로가 달라진다. 따라서, 제 2 비디오와 제 1 비디오와 동기되는지 여부를 고려하면, 본 발명의 제 2 비디오 재생경로타입은 크게 세 타입으로 구분될 수 있다. 이하 본 발명에 따른 제 2 비디오 재생경로타입을 도 9A ~ 도 9C를 참조하여 설명한다.

도 9A는 제 2 비디오의 인코딩 타입이 'Out-of-mux'타입이고, 제 2 비디오가 제 1 비디오와 동기되는 경우를 도시한 것이다.

도 9A를 참조하면, 제 1 비디오와 제 2 비디오의 재생을 관리하는 플레이리스트는 하나의 메인 패스와 하나의 서브패스를 포함한다. 상기 메인 패스는 네 개의 플레이아이템(PlayItem_id=0, 1, 2, 3)으로 구성되며 상기 서브패스는 복수의 서브플레이아이템으로 구성된다. 상기 서브패스에 의해 재생되는 제 2 비디오는 상기 메인 패스와 동기된다. 구체적으로, 상기 제 2 비디오는 서브플레이아이템과 관련된 플레이아이템을 식별하는 정보(예를 들어, 'sync_PlayItem_id')와 상기 서브플레이아이템의 상기 플레이아이템에서의 표현시간지정(presentation time stamp)정보(예를 들어, 'sync_start_PTS_of_PlayITem')를 이용하여 상기 메인 패스와 동 기된다. 즉, 상기 플레이아이템의 재생지점이 상기 표현시간지정정보에 의해 지정된 값에 도달할 때 상기 서브플레이아이템의 재생이 시작되어, 하나의 서브패스를 통한 제 2 비디오의 재생은 메인 패스를 통한 제 1 비디오의 재생 중에 시작된다.

관련하여, 상기 플레이아이템과 상기 서브플레이아이템은 서로 다른 클립을 참조(refer to)한다. 상기 플레이아이템이 참조하는 클립은 메인스트림으로 AV 디코더(17b)에 제공되고, 상기 서브플레이아이템이 참조하는(refer to) 클립은 서브스트림으로 AV 디코더(17b)에 제공된다. 상기 메인스트림에 포함된 제 1 비디오는 디패킷타이저(710a)와 PID 필터 1(720a)를 거쳐 제 1 비디오 디코더(730a)에서 디코딩되고 상기 서브스트림에 포함된 제 2 비디오는 디패킷타이져(710b)와 PID 필터2(720b)를 거쳐 제 2 비디오 디코더(730b)에서 디코딩된다.

도 9B는 제 2 비디오의 인코딩 타입이 'Out-of-mux'타입이고, 제 2 비디오가 제 1 비디오과 동기되지 않는 경우를 도시한 것이다. 도 9B의 재생경로타입은 도 9A의 재생경로타입과 마찬가지로 서브패스에 의해 사용되는 제 2 비디오 스트림들이, 관련된 플레이아이템에 의해 사용되는 클립과 분리되어 멀티플렉싱된다. 다만, 도 9B의 재생 경로 타입은 상기 서브패스의 재생을 메인 패스의 타임라인 상에서 어느 때라도 시작할 수 있다는 점에서, 도 9A의 재생경로타입과는 차이가 있다.

도 9B를 참조하면, 제 1 비디오와 제 2 비디오의 재생을 관리하는 플레이리스트는 하나의 메인 패스와 하나의 서브패스를 포함한다. 상기 메인 패스는 세 개의 플레이아이템(PlayItem_id=0, 1, 2)으로 구성되며 상기 서브패스는 하나의 서브플레이아이템으로 구성된다. 상기 서브패스에 의해 재생되는 제 2 비디오는 상기 메인 패스와 동기되지 않는다. 상기 서브플레이아이템이 상기 서브플레이아이템과 관련된 플레이아이템을 식별하는 정보와 상기 서브플레이아이템의 상기 플레이아이템에서의 표현시간지정(presentation time stamp)정보를 포함하고 있다고 하더라도, 상기 정보들은 도 9B의 재생경로타입에서는 유효하지 않게 된다. 즉, 사용자는 제 1 비디오가 재생되는 도중 어느 때라도 제 2 비디오의 재생을 시작할 수 있다.

관련하여, 제 2 비디오의 인코딩 타입이 'Out-of-mux'타입이므로, 도 9A에서 설명한 바와 같이, 제 1 비디오는 메인스트림으로 AV 디코더(17b)에 제공되고 상기 제 2 비디오는 서브스트림으로 AV 디코더(17b)에 제공된다.

도 9C는 제 2 비디오의 인코딩 타입이 'In-mux'타입이고, 제 2 비디오와 제 1 비디오가 동기되는 경우를 도시한 것이다. 도 9C의 재생경로타입은 제 2 비디오가 제 1 비디오와 같은 AV 스트림에 멀티플렉싱된다는 점에서 도 9A ~ 도 9B의 재생경로타입과 차이가 있다.

도 9C를 참조하면, 제 1 비디오와 제 2 비디오의 재생을 관리하는 플레이리스트는 하나의 메인 패스와 하나의 서브패스를 포함한다. 상기 메인 패스는 네 개의 플레이아이템(PlayItem_id=0, 1, 2, 3)으로 구성되며 상기 서브패스는 복수의 서브플레이아이템으로 구성된다. 상기 서브패스를 구성하는 서브플레이아이템은, 상기 서브플레이아이템과 관련된 플레이아이템을 식별하는 정보와 상기 서브플레이아이템의 상기 플레이아이템에서의 표현시간지정(presentation time stamp)정보를 포함하고 있다. 도 9A에서 설명한 바와 같이, 상기 정보들에 의해 상기 서브플레이아이템은 관련된 플레이아이템과 동기되어 결국, 제 2 비디오가 제 1 비디오와 동 기되게 된다.

도 9C의 재생경로타입에서 메인 패스를 구성하는 플레이아이템과 서브패스를 구성하는 서브플레이아이템은 동일한 클립을 참조(refer to)한다. 즉, 메인 패스에 의해 관리되는 클립에 포함된 스트림을 사용하여 서브패스가 표현되게 된다. 상기 클립은 메인 패스에 관리되므로, 클립은 메인스트림으로 AV 디코더(17b)에 제공된다. 제 1 비디오와 제 2 비디오를 포함하는 패킷화된 데이터인 메인 스트림은 결과적으로 디패킷타이저(710)로 전송되고, 패킷화된 데이터를 디패킷화한다. 디패킷화된 제 1 비디오와 제 2 비디오는 PID 필터 1(720a)에서 각각의 패킷을 식별하는 정보에 따라 제 1 비디오 디코더(730a)와 제 2 비디오 디코더(730b)에 제공되어 디코딩된다.

관련하여, 상기 메인스트림 또는 상기 서브스트림은 기록매체(30) 또는 스토리지(15)로부터 AV 디코더에(17b)에 제공될 수 있다. 제 1 비디오와 제 2 비디오가 다른 클립에 저장된 경우, 제 1 비디오는 기록매체(30)에 기록되어 사용자에게 제공되고, 제 2 비디오는 기록매체(30) 외부로부터 스토리지(15)로 다운로드 될 수도 있다. 그 반대의 경우도 가능하다. 다만, 제 1 비디오와 제 2 비디오가 모두 기록매체(30)에 기록되어 있는 경우, 제 1 비디오와 제 2 비디오를 함께 재생하기 위해서는 둘 중 하나를 스토리지(15)에 복사한 후 재생을 시작하여야 할 것이다. 제 1 비디오와 제 2 비디오가 같은 클립에 저장된 경우에는 제 1 비디오와 제 2 비디오가 모두 기록매체(30)에 기록되어 제공되나 모두 기록매체(30) 외부로부터 다운로드 되게 될 것이다.

관련하여, 본 발명의 광기록/재생장치(10)는 최대 트랜스포트스트림 비트속도가 특정한 값(예를 들어, 48Mbps)으로 기결정(pre-determined)되어 있다. 따라서, 디코딩되는 트랜스포트스트림의 비트속도는 상기 기결정된 값을 초과할 수 없다. 제 2 비디오가 스토리지(15)로부터 제공되어 제 1 비디오와 동기화되지 않게 재생되는 경우, 상기 기결정된 값이 상기 제 1 비디오를 포함하는 스트림과 상기 제 2 비디오를 포함하는 스트림에 적용된다. 예를 들어, 상기 기결정된 값이 48Mbps이고, 제 1 비디오가 40Mbps의 스트림이고 네트워크로부터 다운로드된 제 2 비디오가 30Mbps인 경우, 총 비트속도가 70Mbps가 되어 상기 기결정된 48Mbps를 초과하게 된다. 이 경우 상기 기결졍된 비트속도에 의해 제한되어 제 2 비디오가 제 1 비디오와 조화롭게 재생될 수 없게 된다. 따라서, 본 발명에서는 동시에 디코딩되는 트랜스포트스트림의 총 비트속도가 기결정된 비트속도를 초과할 수 없도록 한다. 제 2 비디오가 제 1 비디오와 동기되는 경우, 콘텐츠 제공자는 제 1 비디오와 제 2 비디오의 비트속도의 조합(combination)을 고려하여 콘텐츠(content)를 제공하여야 한다. 제 2 비디오의 재생경로가 제 1 12비디오와 동기되지 않는 경우에도 상기 기결정된 비트속도가 고려되어야 한다.

관련하여, 제 1 비디오와 제 2 비디오는 HD(high definition)그레이드(grade) 또는 SD(standard definition)그레이드(grade)로 인코딩될 수 있다. 상기 기결정된 비트속도와 관련하여, HD와 SD 조합에 따라 비트속도를 제한(restriction)을 정하는 것이 가능하다. 예를 들어, HD 그레이드의 제 1 비디오와 HD 그레이드의 제 2 비디오에 대해 최대 비트속도를 각각 20Mbps 이하로 정할 수 있다. 반면에, HD 그레이드의 제1 비디오와 SD 그레이드의 제 2 비디오에 대해 최대 비트 속도를 각각 30Mbps와 15Mbps 이하로 정할 수 있다. SD 그레이드의 제 1 비디오와 HD 그레이드의 제 2 비디오 조합(combination), SD 그레이드의 제 1 비디오와 SD 그레이드의 제 2 비디오 조합에 대해서도 비슷한 제한을 둘 수 있다.

게다가, 제 2 비디오는 제 1 비디오와 동일한 스캔 타입(e.g 진보적이거나 또는 인터레이스드(interlaced))을 가져야한다.

도 10은 본 발명의 데이터 재생방법의 일 실시예를 도시한 것이다.

데이터 재생 방법과 관련하여, 플레이리스트가 실행되면 상기 플레이리스트에 포함된 메인 패스와 서브패스의 재생이 시작된다. 본 발명에 따라 제 2 비디오가 제 1 비디오 위에 디스플레이 되기 위해서는, 상기 제 2 비디오를 재생하는 서브패스가 상기 제 1 비디오를 재생하는 메인 패스와 같이 재생되어야 한다. 따라서, 제어부(12)는 상기 제 2 비디오의 인코딩타입정보로부터 상기 제 2 비디오가 메인스트림으로 인코딩되었는지 아닌지를 확인한다(S10). 예를 들어, 논의된 바와 같이 인코딩 타입 정보는 서브패스(e.g. out-of-mux 또는 in-mux)의 타입을 가리키는 것으로 제공될 것이다. 또다른 방법으로, 서브패스의 타입은 서브패스와 관련된 서브플레이아이템이 동일한 클립을 메인 패스안에서 플레이아이템으로 식별할지 여부에 기초하여 결정된다. 상기 제 2 비디오가 메인스트림으로 인코딩된 경우 즉, 제 2 비디오의 인코딩 타입이 'In-mux'타입인 경우, 메인스트림으로부터 상기 제 2 비디오를 분리하여 제 2 비디오 디코더(730b)에 제공한다(S20). 반면에, 상기 제 2 비디오가 서브스트림으로 인코딩된 경우 즉, 제 2 비디오의 인코딩 타입이 'Out- of-mux'타입인 경우, 서브스트림으로부터 상기 제 2 비디오를 분리하여 제 2 비디오 디코더(730b)에 제공한다(S30). 상기 제 2 비디오는 상기 제 2 비디오 디코더(730b)에서 디코딩(S40)되어 디스플레이(20)에서 디스플레이되고 있는 제 1 비디오 상에 디스플레이되게 된다(S50).

관련하여, 상기 제 2 비디오의 재생경로타입이 도 9A에서 설명한 재생경로타입에 해당하는 경우, 상기 제어부(12)는 상기 제 2 비디오가 제 1 비디오와 동기되어 디코딩되도록 AV 디코더(17b)를 제어한다. 반면에, 상기 제 2 비디오의 재생경로타입이 도 9B에서 설명한 재생경로타입에 해당하는 경우에는, 제어부(12)는 제 1 비디오의 재생동안,예를 들어 사용자의 입력에 대응하여,언제라도 제 2 비디오가 디코딩되도록 AV 디코더(17b)를 제어할 수 있다.

관련하여, 제 1 비디오가 디스플레이(20)에 디스플레이될 때, 인터레이스(interlaced) 또는 프로그레시브(progressive) 방식으로 스캔될 수 있다. 본 발명에서는 제 2 비디오가 상기 제 1 비디오와 같은 스캔타입(스캐닝 방식)을 사용한다. 즉, 제 1 비디오가 프로그레시브 타입으로 스캔되면, 제 2 비디오 역시 프로그레시브 방식으로 디스플레이(20)에 스캔된다. 반면에, 제 1 비디오가 인터레이스드 타입으로 스캔되면 제 2 비디오도 인터레이스드 타입으로 디스플레이(20)에 스캔된다.

위에서 상술한 바와 같이, 기록 매체와 관련하여 본원 발명에 따른 데이터 재생 방법 및 장치, 그리고 데이터 기록 방법 및 장치에서는, 제 2 비디오를 제 1 비디오와 동시에 재생하는 것이 가능해진다. 게다가, 재생을 효율적으로 하는 것이 가능해진다. 그러므로, 사용자가 더욱 다양한 컨텐츠를 경험할 수 있도록 컨텐츠 제공자가 더욱 다양한 컨텐츠를 만들 수 있는 잇점도 있게 된다.

본원 발명의 스피릿(sprit)또는 영역으로부터 벗어나지 않으면서 본원 발명에서 다양한 수정이나 변형이 만들어지는 것은 당업자에게 자명할 것이다. 그러므로, 본원 발명은 이러한 발명의 수정이나 변형을 커버하는 것을 목적으로 한다.

Claims (41)

1. 기록 매체로부터 재생된 데이터에 있는 제 1 비디오 스트림을 제 1 디코더를 이용하여 디코딩하고;

   제 1 비디오 스트림에 관한 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 나타내는 재생 데이터 안의 제 2 비디오 스트림을 제 2 비디오 디코더를 이용하여 디코딩하는 기록 매체로부터 재생된 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터 디코딩 방법.
2. 제 1항에 있어서,

   제 1 비디오와 제 2 비디오 스트림을 포함하는 메인 패스 데이터 스트림을 기록 매체에 기록된 데이터 파일로부터 재생하는 것을 더 포함하는 디코딩 방법.
3. 제 2항에 있어서,

   메인 패스 데이터 스트림의 데이터 패킷에 있는 패킷 식별자들에 기초하여 제 1 비디오 스트림을 메인 패스 데이터 스트림으로부터 분리하고;

   메인 패스 데이터 스트림의 데이터 패킷에 있는 패킷 식별자들에 기초하여 제 2 비디오 스트림을 메인 패스 데이터 스트림으로부터 분리하며;

   상기 디코딩된 제 1 비디오 스트림 스텝은 상기 분리된 제 1 비디오 스트림을 디코드하고; 그리고

   상기 디코딩된 제 2 비디오 스트림 스텝은 상기 분리된 제 2 비디오 스트림을 디코드하는 것을 더 포함하는 디코딩 방법.
4. 제 2항에 있어서,

   기록 매체에 기록된 타입 정보에 기초해 제 2 비디오 스트림이 제 1 비디오 스트림과 동일한 데이터 파일에 기록되는지 결정하고, 상기 재생 단계는 상기 결정 단계에 의해 메인 패스 데이터 스트림을 재생하는 것을 더 포함하는 디코딩 방법.
5. 제 2항에 있어서,

   기록 매체에 기록된 타입 정보에 기초해 제 2 비디오 스트림을 제 1 비디오 스트림과 동기화하여 디스플레이하는 것을 더 포함하는 디코딩 방법.
6. 제 5항에 있어서,

   상기 타입 정보가 제 2 비디오 스트림이 제 1 비디오 스트림과 동기화하여 재생(present)할 것으로 가리키면 기록 매체에 기록된 식별자에 기초해 제 1 비디오 스트림의 플레이아이템과 함께 제 2 비디오 스트림을 재생할 것을 결정하고; 상기 디스플레잉 단계는 상기 타입 정보와 식별자에 기초해 제 2 비디오 스트림을 제 1 비디오 스트림과 동기화하여 디스플레이하는 것을 더 포함하는 디코딩 방법.
7. 제 1항에 있어서,

   기록 매체에 기록된 첫번째 데이터 파일로부터 제 1 비디오 스트림을 포함하는 메인 패스 데이터 스트림을 재생하고,

   첫번째 데이터 파일로부터 분리되어 기록 매체에 기록된 두번째 데이터 파일로부터 제 2 비디오 스트림을 포함하는 서브 패스 데이터 스트림을 재생하는 것을 더 포함하는 디코딩 방법.
8. 제 7항에 있어서,

   메인 패스 데이터 스트림의 데이터 패킷안의 패킷 식별자들에 기초하여 제 1 비디오 스트림을 상기 메인 패스 데이터 스트림으로부터 분리하고;

   서브 패스 데이터 스트림의 데이터 패킷안의 패킷 식별자들에 기초하여 제 2 비디오 스트림을 서브 패스 데이터 스트림으로부터 구별하고;

   상기 제 1 비디오 스트림을 디코딩하는 단계는 상기 분리된 제 1 비디오 스트림을 디코드하고;

   상기 제 2 비디오 스트림을 디코딩하는 단계는 상기 분리된 제 2 비디오 스트림을 디코드하는 것을 더 포함하는 방법.
9. 제 7항에 있어서,

   기록 매체에 기록된 타입 정보에 기초해 제 2 비디오 스트림을 제 1 비디오 스트림과 동일한 데이터 파일안에 기록할지 결정하고;

   상기 메인 패스 데이터 스트림을 재생하는 단계는 상기 결정 단계에 기초해 상기 메인 패스 데이터 스트림을 재생하고;

   상기 서브 패스 데이터 스트림을 재생하는 단계는 상기 결정 단계에 기초해 상기 서브 패스 데이터 스트림을 재생하는 것을 더 포함하는 방법.
10. 제 7항에 있어서,

    기록 매체에 기록된 타입 정보에 기초해 상기 제 2 비디오 스트림을 제 1 비디오 스트림과 동기화하여 디스플레이 하는 것을 더 포함하는 방법.
11. 제 10항에 있어서,

    상기 타입 정보가 제 2 비디오 스트림이 제 1 비디오 스트림과 동기화하여 재생(present)할 것으로 가리키면 기록 매체에 기록된 식별자에 기초해 제 1 비디오 스트림의 플레이아이템과 함께 제 2 비디오 스트림을 재생할 것을 결정하고; 상기 디스플레잉 단계는 상기 타입 정보와 식별자에 기초해 제 2 비디오 스트림을 제 1 비디오 스트림과 동기화하여 디스플레이하는 것을 더 포함하는 디코딩 방법.
12. 제 11항에 있어서,

    상기 타입 정보가 제 2 비디오 스트림이 제 1 비디오 스트림과 동기화하여 재생할것으로 가리키면 상기 기록 매체에 기록된 프리젠테이션 시간 (presentation timing)정보에 기초해 제 2 비디오 스트림의 프리젠테이션 타이밍(presenatation timing)을 결정하고,

    상기 디스플레잉 단계는 상기 타입 정보, 상기 식별자 그리고 상기 프리젠테이션 시간(presentation timing) 정보에 기초해 제 2 비디오 스트림을 제 1 비디오 스트림과 동기화하여 디스플레이하는 것을 더 포함하는 방법.
13. 제 10항에 있어서,

    상기 타입 정보가 제 2 비디오 스트림이 제 1 비디오 스트림과 동기화하여 재생할것으로 가리키면 상기 기록 매체에 기록된 프리젠테이션 시간 (presentation timing)정보에 기초해 제 2 비디오 스트림의 프리젠테이션 타이밍(presenatation timing)을 결정하고,

    상기 디스플레잉 단계는 상기 타입 정보 그리고 상기 프리젠테이션 시간(presentation timing) 정보에 기초해 제 2 비디오 스트림을 제 1 비디오 스트림과 동기화하여 디스플레이하는 것을 더 포함하는 방법.
14. 제 7항에 있어서,

    기록 매체에 기록된 타입 정보에 기초해 제 2 비디오 스트림을 제 1 비디오 스트림과 비동기화하여 디스플레이하는 것을 더 포함하는 방법.
15. 제 1항에 있어서,

    제 1 또는 제 2 비디오 스트림의 비트 레이트(bit rate)의 합이 셋된 값(set value)과 동일하거나 그 이하인 방법.
16. 제 1항에 있어서,

    제 2 비디오 스트림이 제 1 비디오 스트림과 동일한 스캔 타입을 가지는 방법.
17. 첫번째 디코더를 사용해 기록 매체로부터 재생된 데이터의 제 1 비디오 스트림을 디코딩하고;

    기록매체보다 외부 소스로부터 상기 서브 패스 데이터 스트림을 수신하고;

    제 1 비디오 스트림에 관한 픽쳐-인-픽쳐(picture-in-picture) 데이터로 제공되는 것이 미리 결정된 적어도 하나의 제 2 비디오 스트림을 포함하는 서브 패스 데이터 스트림을 저장하고,

    두번째 디코더를 이용해 제 2 비디오 스트림을 디코딩하는 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 디코딩하는 방법.
18. 제 1 비디오 스트림을 기록 매체로부터 재생된 메인 패스 데이터 스트림으로부터 구분하고;

    상기 제 1 비디오 스트림을 첫번째 디코더에 제공하고;

    제 1 비디오 스트림에 관한 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 나타내는 제 2 비디오 스트림을 기록 매체로부터 재생된 상기 메인 패스 데이터 스트림과 서브 패스 데이터 스트림 중의 하나로부터 구분하고;

    상기 제 2 비디오 스트림을 두번째 디코더로 제공하는 기록 매체로부터 재생된 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 처리하는 방법.
19. 제 1 비디오 스트림 그리고 상기 제 1 비디오 스트림에 관한 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 나타내는 제 2 비디오 스트림을 저장하는 데이타 영역; 그리고

    제 2 비디오 스트림이 제 1 비디오 스트림을 디코드하는 디코더와는 다른 디코더를 사용하여 제 1 그리고 제 2 비디오 스트림의 재생을 관리하기 위한 관리 정보를 저장하는 관리 영역을 포함하는 기록 매체에 저장된 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터의 디코딩을 관리하기 위한 데이터 구조를 가지는 기록 매체.
20. 제 19항에 있어서,

    상기 관리 영역은 제 1 그리고 제 2 비디오 스트림들이 동일한 데이터 파일에 저장되어 있는가를 가리키는 타입 정보를 포함하는 기록 매체.
21. 제 20항에 있어서,

    상기 타입 정보는 제 2 비디오 스트림을 제 1 비디오 스트림과 동기화하여 디스플레이할 것인지를 가리키는 기록 매체.
22. 제 19항에 있어서,

    상기 관리 정보는 제 2 비디오 스트림을 제 1 비디오 스트림과 함께 동기화 하거나 비동기화하여 디스플레이할 것인지를 가리키는 타입 정보를 포함하는 기록 매체.
23. 기록 매체로부터 재생된 데이터의 제 1 비디오 스트림을 디코드하는 첫번째 디코더; 그리고

    제 1 비디오 스트림에 관한 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 나타내는 재생된 데이터의 제 2 비디오 스트림을 디코드하는 두번째 디코더를 포함하는 기록 매체로부터 재생된 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 디코딩하기 위한 장치.
24. 제 23항에 있어서,

    제 1 비디오 스트림을 메인 패스 데이터 스팀(steam)으로부터 분리하고 제 2 비디오 스트림을 메인 패스 데이터 스팀(steam)으로부터 분리하는 필터;

    첫번째 디코더는 분리된 제 1 비디오 스트림을 디코드하고;

    두번째 디코더는 분리된 제 2 비디오 스트림을 디코드하는 것을 더 포함하는 장치.
25. 제 24항에 있어서,

    상기 필터는 메인 패스 데이터 스팀(steam)의 데이터 패킷안의 패킷 식별자들에 기초해 제 1 그리고 제 2 비디오 스트림들을 분리하는 장치.
26. 제 24항에 있어서,

    기록 매체에 기록된 타입 정보에 기초해 제 2 비디오 스트림이 제 1 비디오 스트림과 동일한 데이터 파일에 기록되었는가를 결정하고, 상기 결정에 근거해 상기 메인 패스 데이터 스팀(steam)의 재생을 제어하는 제어부를 더 포함하는 장치.
27. 제 24항에 있어서, 상기 두번째 디코더는 제 2 비디오 스트림을 디코드하여 상기 제 2 비디오 스트림이 기록 매체에 기록된 타입 정보에 기초하여 제 1 비디오 스트림과 동기화하여 디스플레이되는 장치.
28. 제 23항에 있어서,

    제 1 비디오 스트림을 메인 패스 데이터 스트림으로부터 분리하는 첫번째 필터; 그리고

    제 2 비디오 스트림을 서브 패스 데이터 스트림으로부터 분리하는 두번째 필터; 그리고

    상기 첫번째 디코더는 상기 분리된 제 1 비디오 스트림을 디코드하고;

    상기 두번째 디코더는 상기 분리된 제 2 비디오 스트림을 디코드하는 것을 더 포함하는 장치.
29. 제 28항에 있어서,

    상기 첫번째 필터는 상기 메인 패스 데이터 스트림의 데이터 패킷들의 패킷 식별자들에 기초하여 제 1 비디오 스트림을 분리하고;

    상기 두번째 필터는 상기 서브 패스 데이터 스트림의 데이터 패킷들의 패킷 식별자들에 기초하여 제 2 비디오 스트림을 분리하는 장치.
30. 제 28항에 있어서,

    기록 매체에 기록된 타입 정보에 기초해 제 2 비디오 스트림이 제 1 비디오 스트림과 동일한 데이터 파일에 기록되었는가를 결정하고, 상기 결정에 근거해 상기 메인 그리고 서브 패스 데이터 스트림의 재생을 제어하는 제어부를 더 포함하는 장치.
31. 제 28항에 있어서,

    상기 두번째 디코더는 제 2 비디오 스트림을 디코드하여 상기 제 2 비디오 스트림이 기록 매체에 기록된 타입 정보에 기초하여 제 1 비디오 스트림과 동기화하여 디스플레이되는 장치.
32. 기록 매체로부터 재생된 데이터의 제 1 비디오 스트림을 디코드하는 첫번째 디코더;

    상기 서브 패스 데이터 스트림을 기록 매체 보다 외부 장치로부터 수신하고, 제1 비디오 스트림에 관해 픽쳐-인-픽쳐(picture-in-picture)데이터로 제공하는 것으로 미리 결정된 적어도 하나의 제 2 비디오 스트림들을 포함하는 상기 서브 패스 데이터 스트림을 저장하는 로컬 스토리지(local storage); 그리고

    상기 제 2 비디오 스트림을 디코딩하는 두번째 디코더를 포함하는 픽쳐-인-픽쳐(picture-in-picture)비디오 데이터를 디코딩하는 장치.
33. 제 32항에 있어서,

    제 1 비디오 스트림을 메인 패스 데이터 스트림으로부터 분리하는 첫번째 필터; 그리고

    제 2 비디오 스트림을 상기 저장된 서브 패스 데이터 스트림으로부터 분리하는 두번째 필터; 그리고

    상기 첫번째 디코더는 상기 분리된 제 1 비디오 스트림을 디코드하고;

    상기 두번째 디코더는 상기 분리된 제 2 비디오 스트림을 디코드하는 것을 더 포함하는 장치.
34. 제 33항에 있어서,

    상기 첫번째 필터는 상기 메인 패스 데이터 스트림의 데이터 패킷들의 패킷 식별자들에 기초하여 제 1 비디오 스트림을 분리하고;

    상기 두번째 필터는 상기 서브 패스 데이터 스트림의 데이터 패킷들의 패킷 식별자들에 기초하여 제 2 비디오 스트림을 분리하는 장치.
35. 제 1 비디오 스트림 그리고 제 1 비디오 스트림에 관한 픽쳐-인-픽쳐(picture-in-picture)비디오 데이터를 나타내는 제 2 비디오 스트림을 기록 매체에 기록하고;

    상기 기록 매체에 상기 제 1 그리고 제 2 비디오 스트림들의 재생을 관리하기 위한 관리 정보를 기록하여 상기 제 2 비디오 스트림이 제 1 비디오 스트림을 디코드하는 데 사용된 디코더와는 다른 디코더를 사용하여 디코드되는 기록 매체에 픽쳐-인-픽쳐(picture-in-picture)비디오 데이터를 기록하는 방법.
36. 제 35항에 있어서,

    상기 관리 정보는 상기 제 1 그리고 제 2 비디오 스트림들이 동일한 데이터 파일에 저장되었는가를 가리키는 타입 정보를 포함하는 방법.
37. 제 35항에 있어서,

    상기 관리 정보는 제 2 비디오 스트림을 상기 제 1 비디오 스트림과 동기화하여 디스플레이할 것인가를 가리키는 타입 정보를 포함하는 방법.
38. 기록 장치가 기록 매체에서 데이터를 기록하도록하는 드라이버;

    상기 드라이버가 기록 매체위에서 제 1 비디오 스트림 그리고 제 1 비디오 스트림에 관한 픽쳐-인-픽쳐(picture-in-picture) 비디오 데이터를 나타내는 제 2 비디오 스트림을 기록하도록 제어하는 제어부; 그리고,

    제 1 그리고 제 2 비디오 스트림들의 재생을 관리하기 위한 관리 정보를 기록 매체 위해서 기록하여 상기 제 2 비디오 스트림이 제 1 비디오 스트림을 디코드하는데 사용된 디코더와는 다른 디코더를 사용하여 디코드되는 상기 제어부를 포함하는 기록 매체에서 픽쳐-인-픽쳐(picture-in-picture)비디오 데이터를 기록하는 장치.
39. 제 38항에 있어서,

    상기 관리 정보는 제 2 비디오 스트림을 제 1 비디오 스트림과 동기화하여 디스플레이할것인가를 가리키는 타입 정보를 포함하는 장치.
40. 제 38항에 있어서,

    상기 관리 정보는 제 1 그리고 제 2 비디오 스트림들이 별개의 데이터 파일들로서 저장될 것인가를 가리키는 타입 정보를 포함하는 장치.
41. 제 40항에 있어서,

    상기 타입 정보는 제 2 비디오 스트림을 제 1 비디오 스트림과 동기화하거나 비동기화하여 디스플레이할 것인가를 가리키는 타입 정보를 포함하는 장치.

Images