CN102232295A - 再现装置、记录介质及集成电路 - Google Patents

再现装置、记录介质及集成电路 Download PDF

Info

Publication number
CN102232295A
CN102232295A CN200980149315XA CN200980149315A CN102232295A CN 102232295 A CN102232295 A CN 102232295A CN 200980149315X A CN200980149315X A CN 200980149315XA CN 200980149315 A CN200980149315 A CN 200980149315A CN 102232295 A CN102232295 A CN 102232295A
Authority
CN
China
Prior art keywords
viewpoint video
stream
mentioned
video stream
reproduction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN200980149315XA
Other languages
English (en)
Inventor
佐佐木泰治
矢羽田洋
上坂靖
持永和宽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN102232295A publication Critical patent/CN102232295A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178Metadata, e.g. disparity information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183On-screen display [OSD] information, e.g. subtitles or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/356Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359Switching between monoscopic and stereoscopic modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362Generation or processing of Service Information [SI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365Multiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347Demultiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348Demultiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/341Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/806Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
    • H04N9/8063Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Library & Information Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

提供一种再现装置,可无缝再现3D影像与2D影像。一种再现装置,再现包含基本视点视频流与从属视点视频流的3D视频流,在使用3D视频流进行立体观察再现的情况下,将解码基本视点视频流与从属视点视频流得到的图片数据输出到显示装置,在使用3D视频流进行平面观察再现的情况下,将解码基本视点视频流得到的各图片数据每重复2次输出到显示装置,将平面观察再现中的输出帧速率变换为与立体观察再现中的输出帧速率相同的帧速率。

Description

再现装置、记录介质及集成电路
技术领域
本发明是涉及3D影像以及2D影像的再现技术的技术领域的发明。 
背景技术
近年来,伴随能欣赏3D影像的立体视觉的电影院的增加,正在追求将3D影像保持高画质地存储到光盘的技术。 
在将3D影像存储到光盘的情况下,追求与仅能对存储了2D影像的光盘的再现装置(以下称为“2D再现装置”)之间的再现兼容性。当2D再现装置不能将3D影像作为2D影像来再现存储了3D影像的光盘的情况下,对同样的内容需要制作3D用盘和2D用盘这两种,成本变高。因此,追求存储了3D影像的光盘,在2D再现装置中作为2D影像来再现,在能够再现2D影像和3D影像的再现装置中(以下称为“2D/3D再现装置”)中,作为2D影像或3D影像来再现。 
作为先行技术,以下的专利文献1记载了如下技术,即确保在存储了3D影像的光盘中的再现兼容性的技术。 
此外,通过使用具有再现兼容性的光盘,在2D/3D再现装置中,能够期待用一个光盘3D影像及2D影像的再现。 
先行技术文献 
专利文献 
专利文献1:日本专利第3935507号公报 
发明的概要 
发明要解决的课题 
但是,在设备间传送3D影像需要宽频带。因此,2D/3D再现装置和显示装置之间的连接大多使用按照能传送宽频带的数据的HDMI(HDMI:High Definition Multimedia Interface)标准的连接。在HDMI标准的连接中,由于在装置间同步并转交数据,因此为了切换影像信号的帧速率,需要在 装置间再同步,其间停止影像输出。 
在此,为了向显示装置输出24Hz的左视点影像和24Hz的右视点影像,3D影像整体以48Hz的帧速率来输出3D影像。与此相对,2D影像仅将24Hz的左视点影像向显示装置输出。因此,在2D/3D再现装置中,在3D影像的再现中切换到2D影像时,会有在显示装置间产生HDMI连接的在同步并在再现中产生延迟这样的问题。 
发明内容
本发明鉴于上述问题,目的在于提供一种再现装置以及记录介质,能够将3D影像和2D影像无缝再现。 
解决课题的手段 
未达成上述目的,本发明所涉及的再现装置对包含有基本视点视频流和从属视点视频流在内的3D视频流进行再现,其特征在于,在使用上述3D视频流进行立体视觉再现的情况下,将解码上述基本视点视频流而得到的图片数据和解码上述从属视点视频流而得到的图片数据向显示装置输出,在使用上述3D视频流进行平面视觉再现的情况下,将解码上述基本视点视频流而得到的各图片数据,至少各重复两次向显示装置输出。 
发明效果 
本发明涉及的再现装置,通过上述构成,能够在使用3D视频流进行平面视觉再现的情况下,将解码基本视点视频流而得到的各图片数据重复向显示装置输出,从而能够使平面视觉再现中的输出帧速率与立体视觉再现中的输出帧速率一致。 
因此,在3D视频流的再现中,即使切换立体视觉再现和平面视觉再现,也能够在再现装置和显示装置之间不需要HDMI连接的再同步而无缝地再现。 
附图说明
图1是表示关于记录介质、再现装置的使用行为的方式的图。 
图2是在左侧描绘用户的脸、在右侧描绘表示作为对象物的恐龙的骨骼的图。 
图3是表示用于立体视觉的左视点视频流和右视点视频流的内部结构的一例的图。 
图4是表示被多层化后的光盘的内部结构的图。 
图5是表示以文件***为前提的光盘的应用格式的图。 
图6是表示记录方法的处理顺序的流程图。 
图7是说明视频流的结构的图。 
图8是表示解码切换器信息的结构的图。 
图9是说明解码计数器的图。 
图10是表示PES数据包序列中如何存储视频流、是否变换成TS数据包以及源数据包的图。 
图11是示意地表示AV流被如何多路复用的图。 
图12是表示通过记录方法得到的区段的内部结构的图。 
图13是表示区段和AV流文件之间的对应的图。 
图14是表示片段信息文件的内部结构的图。 
图15是表示片段信息文件中流属性信息的图。 
图16是表示片段信息中入口映射表的图。 
图17是表示入口映射的入口点的登记的图。 
图18是表示入口映射和GOP之间的关系的图。 
图19是说明3D元数据的结构的图。 
图20是表示没有发生2D播放项目和3D播放项目混合的播放列表的图。 
图21是表示图20的3D播放列表中已经加了一个子路径的播放列表的图。 
图22是表示2D影像和3D影像混合的例子的图。 
图23是说明在2D影像和3D影像混合的例子中实现无缝连接的结构的图。 
图24是表示实现2D播放项目和3D播放项目无缝连接的播放列表的图。 
图25是表示播放列表信息的数据结构的图。 
图26是表示子路径信息表的内部结构的图。 
图27是表示对于左视点、右视点定义什么样的再现区间的图。 
图28是表示流选择表的图。 
图29是在图20的3D播放列表中加入了左视点/右视点识别信息的图。 
图30是表示分别构成左视点图像、右视点图像以及中心图像的两个播放列表信息的图。 
图31是表示2D/3D再现装置的结构的图。 
图32是表示***目标解码器4以及平面存储器单元5a的内部结构的图。 
图33是表示平面加法部的内部结构的图。 
图34是表示PG平面的合成方法的图。 
图35是示意地表示使用偏移值来剪裁而重叠后如何被显示给用户的图。 
图36是表示寄存器单元10的内部结构以及再现控制引擎7b的内部结构的图。 
图37是设定PSR22的显示类型值的流程图。 
图38是表示切换2D播放列表和3D播放列表的再现的数据结构的图。 
图39是切换2D播放列表和3D播放列表的再现的流程图。 
图40是说明3D影像的L·R显示类型和L·L显示类型之间的无缝的切换的图。 
图41表示平面合成部中切换器62的切换控制的流程图。 
图42是表示实现3D影像的再现和2D影像的再现的无缝切换的主视频解码器31的结构的图。 
图43是说明用于实现3D影像的再现和2D影像的再现的无缝切换的再现状态的任务的第二图。 
图44是说明将再现状态适用于对2D影像进行再现的再现区间的图。 
图45是表示入口映射的变形例的图。 
图46是示意地表示与变形例有关的入口点和AV流之间的关系的图。 
图47是表示第2实施方式涉及的再现装置的主视频解码器的结构的图。 
图48是说明在右眼影像的图片缺损的情况下,将2D/左眼影像的图片 作为右眼影像的图片来再现的图。 
图49是说明在右眼影像的图片缺损的情况下,再现一个前的右眼影像的图片的图。 
图50是说明在右眼影像的图片缺损的情况下,再现一个前的左眼影像和右眼影像的图片的图。 
图51是说明在右眼影像的图片缺损的情况下,以黑色等图片来补齐右眼影像的图片的图。 
图52是说明在右眼影像的图片缺损的情况下,以黑色等图片来补齐2D/左眼影像的图片和右眼影像的图片的图。 
图53是说明在右眼影像的图片缺损的情况下,以一个前的右眼影像的图片来补齐左眼影像的图片的图。 
图54是说明在2D影像的再现下的暂时停止处理的图。 
图55是说明在3D影像的再现下的暂时停止处理的图。 
图56是说明用于实现在3D影像的再现下的暂时停止处理的平面加法部的图。 
图57是说明静止画面的GOP结构的图。 
图58是说明3D影像的特殊再现的图。 
图59是说明用于使3D影像的特殊再现简易进行的数据结构的图。 
图60是表示记录装置的内部结构的图。 
图61是说明视频编码器的深度信息制作的图。 
具体实施方式
(第1实施方式) 
下面,参照附图说明具备上述课题的解决手段的再现装置的实施方式。首先,简单说明立体观察的原理。 
通常,由于右眼观察用和左眼观察用的位置差异,从右眼观察到的像和从左眼观察到的像,观看方式存在若干差异。利用这种差异,人们能够将眼睛看到的像识别为立体像。在进行立体显示的情况下,利用人的视差,使平面的图像看起来就好像是立体的图像。 
具体地讲,在平面显示的图像中,右眼观察用图像和左眼观察用图像 具有差异,其程度相当于因人的视差而形成的观看方式的差异,通过以较短的时间间隔切换显示这些图像,使看起来好像就是在进行立体显示。 
这种较短的时间间隔,只要是通过上述的切换显示使人错觉地看成立体状态的程度的时间即可。立体观察的实现方法有采用全息技术的方法、和采用视差图像的方式。 
首先,第一个全息技术的特征是能够以与人识别通常物体时完全相同的方式立体地再现物体,虽然已经建立了关于动态图像生成的技术理论,但是需要伴随有实时地生成全息用的动态图像的庞大运算量的计算机、和具有在1mm之间划出数千条线的析像度的显示装置,当前的技术很难实现,作为商业用途得到实际应用的示例几乎没有。 
采用两个眼睛的视差图像的方式的优点是,只需准备右眼观察用和左眼观察用的两个视点的影像,即可实现立体观察,基于在技术上如何能够使对应的眼睛观看与左右眼睛对应的图案的观点,以继时分离方式为代表的几种技术得到实际应用。 
所说继时分离方式是这样一种方法,在时间轴方向上交替地显示左眼用影像和右眼用影像,并通过眼睛的余像反应使左右的场景在大脑内重合,由此识别为立体影像。 
图1(a)是表示有关记录介质、再现装置的使用行为的图。如该图所示,作为记录介质的一例的BD-ROM100以及再现装置200,与电视机300、3D眼镜400和遥控器500一起构成家庭影院***,并供用户使用。 
BD-ROM100向上述家庭影院***提供例如电影作品。 
再现装置200是与电视机300连接,并再现BD-ROM100的2D/3D再现装置。 
该再现装置200与电视机300的连接采用HDMI连接。 
电视机300通过显示电影作品的再现影像或显示菜单等,向用户提供交互式操作环境。本实施方式的显示装置300用于在用户佩戴3D眼镜400的情况下实现立体观察,但在显示装置300是双凸透镜方式的显示装置时,不需要3D眼镜400。双凸透镜方式的显示装置300在画面中的纵方向同时交替地排列左眼用图片和右眼用图片,在显示装置的画面表面上通过被称为双凸透镜的半圆锥状的透镜,使构成左眼用图片的像素只成像于左眼, 使构成右眼用图片的像素只成像于右眼,由此使观看左右眼睛具有视差的图片,并实现立体观察。 
3D眼镜400具有液晶闸门,用于使用户视听基于继时分离方式或者偏光眼镜方式的视差图像。所说视差图像是指由映入右眼的影像和映入左眼的影像构成的一组影像,以只使与各个眼睛对应的图片映入用户的眼睛的方式进行立体观察。图1(b)表示左眼用影像的显示状态。当在画面上显示有左眼用影像的瞬间,所述3D眼镜400使对应左眼的液晶闸门透射,将对应右眼的液晶闸门遮光。该图(c)表示右眼用影像的显示状态。当在画面上显示有右眼用影像的瞬间,与刚才相反,使对应右眼的液晶闸门透射,将对应左眼的液晶闸门遮光。 
遥控器500是接受用户对被层次化的GUI的操作的设备,为了接受这些操作,遥控器500具有调用构成GUI的菜单的菜单键、使构成菜单的GUI部件的光标移动的箭头键、对构成菜单的GUI部件进行确定操作的确定键、用于使被层次化的菜单返回到更上位层次的返回键、和数值键。 
以上是关于记录介质和再现装置的使用方式的说明。 
在本实施方式中,说明将在进行立体观察时使用的视差图像存储在信息记录介质中的方法。 
视差图像方式是这样一种方法,分别准备映入右眼的影像和映入左眼的影像,以只使与各个眼睛对应的图片映入的方式进行立体观察。图2表示在左侧描绘用户的人脸,在右侧从左眼观看对象物即恐龙的骨骼时的示例,和从右眼观看对象物即恐龙的骨骼时的示例。如果反复进行右眼及左眼的透光、遮光,根据眼睛的余像反应,在用户的大脑内进行左右场景的重合,能够识别到在人脸的中央的延长线上存在立体影像。 
把视差图像中映入左眼的图像称为左眼图像(L图像),把映入右眼的图像称为右眼图像(R图像)。并且,将各个图片成为L图像的动态图像称为左视点视频,将各个图片成为R图像的动态图像称为右视点视频。并且,把将左视点视频、右视点视频数字化并进行压缩编码而得到的视频流称为左视点视频流、右视点视频流。 
图3是表示立体观察用的左视点视频流、右视点视频流的内部结构的一例的图。 
该图的第2段表示左视点视频流的内部结构。在该流中包含图片数据,即图片数据I1、P2、Br3、Br4、P5、Br6、Br7、Br9。按照Decode Time Stamp(DTS:编解码时间戳)对这些图片数据进行解码。第1段表示左眼图像。将这样被解码后的图片数据I1、P2、Br3、Br4、P5、Br6、Br7、Br9,根据PTS并按照I1、Br3、Br4、P2、Br6、Br7、P5的顺序进行再现,由此再现左眼图像。在该图中,把不具有参照图片、只使用编码对象图片进行图片内预测编码的图片称为I图片。图片是指包含帧和字段双方的一个编码的编码。并且,把参照已经处理完毕的一个图片进行图片间预测编码而得到图片称为P图片,把同时参照已经处理完毕的两个图片进行图片间预测编码而得到图片称为B图片,把B图片中被其它图片参照的图片称为Br图片。并且,在此把帧构造中的帧、字段构造的字段称为视频访问组。 
第4段表示左视点视频流的内部结构。该左视点视频流包含被称为P1、P2、B3、B4、P5、B6、B7、P8的图片数据。按照DTS对这些图片数据进行解码。第3段表示右眼图像。将这样被解码后的图片数据P1、P2、B3、B4、P5、B6、B7、P8,根据PTS并按照P1、B3、B4、B6、B7、P5的顺序进行再现,由此再现右眼图像。但是,在继时分离方式的立体观察再现中,对于被赋予了相同PTS的左眼图像和右眼图像的组中一方的显示,将延迟PTS的间隔的一半的时间(以下称为“3D显示延迟”)来进行显示。 
第5段表示使3D眼镜400的状态如何变化。如该第5段所示可知,在视听左眼图像时,关闭右眼的闸门,在视听右眼图像时,关闭左眼的闸门。 
这些左视点视频流、右视点视频流在采用时间方向的相关特性的图片间预测编码的基础上,再通过采用视点间的相关特性的图片间预测编码被实施压缩。参照左视点视频流的相同显示时刻的图片,对右视点视频流的图片进行压缩。 
例如,右视点视频流的第一个P图片参照左视点视频流的I图片,右视点视频流的B图片参照左视点视频流的Br图片,右视点视频流的第二个P图片参照左视点视频流的P图片。 
这种采用视点间的相关特性的视频压缩的方法有被称为Multiview Video Coding(MVC)的MPEG-4 AVC/H.264的修改规格。ISO/IEC MPEG和ITU-T VCEG的共同项目组即Joint Video Team(JVT),在2008年7月 完成了被称为Multiview Video Coding(MVC)的MPEG-4 AVC/H.264的修改规格的策划。MVC是对多个视点的影像一并进行编码的规格,在预测编码中不仅利用影像的时间方向的相似性,也利用视点间的相似性,由此相比多个视点独立的压缩,提高压缩效率。 
并且,将按照MVC进行压缩编码的左视点视频流和右视点视频流中、能够独立进行解码的视频流,称为“基础视点视频流”。并且,将左视点视频流和右视点视频流中的下述视频流称为“从属视点视频流”,该视频流根据与构成基础视点视频流的各个图片数据的帧间相关特性被实施压缩编码,并对基础视点视频流进行解码,由此该视频流能够进行解码。 
下面,对用于制作记录介质的方式、即记录介质的生产行为的方式进行说明。 
图4表示被多层化的光盘的内部结构。 
第1段表示被多层化的光盘即BD-ROM,第2段是将处于各个记录层上的螺旋轨道沿水平方向拉伸描绘的图。将这些记录层中的螺旋轨道作为一个连续的卷(volume)区域进行处理。卷区域由位于最内周的导入(lead-in)区域、位于最外周的导出(lead-out)区域、和位于两者之间的第1记录层的记录区域、第2记录层的记录区域、第3记录层的记录区域构成。利用这些第1记录层的记录区域、第2记录层的记录区域、第3记录层的记录区域构成一个连续的逻辑地址空间。 
卷区域从开头开始按照访问光盘的单位被分配了连续的序号,把该序号称为逻辑地址。通过制定逻辑地址来进行来自光盘的数据的读出。在此,对于诸如BD-ROM100那样的读入专用光盘,逻辑地址基本上连续的扇区在光盘上的物理配置中也是连续的。即,不进行查询即可读出逻辑地址连续的扇区的数据。但是,在记录层的边界处,即使逻辑地址是连续的,也不能进行连续的读出。 
卷区域在紧挨着导入区域的后面记录文件***管理信息,在其之后是利用文件***管理信息进行管理的分隔区域。文件***是指按照被称为目录或者文件的单位来表述盘上的数据的结构,在BD-ROM100中利用UDF(Universal Disc Format:通用盘格式)进行记录。对于日常使用的PC(Personal Computer),通过被称为FAT或者NTFS的文件***,在计算机 上表述利用目录或文件的构造记录在硬盘上的数据,提高用户便利性。利用该文件***,能够使用目录、文件构造来读出与普通PC相同地记录的逻辑数据。 
把存储在文件***中能够访问的文件中的AV流的文件的文件称为“AV流文件”,该AV流是通过将视频流和音频流进行复用而得到的。另一方面,把存储除AV流之外的普通数据的文件称为“非AV流文件”。 
以视频流、音频流为代表的Elementary流被变换为、被复用了PES标题的Packetized Elementary流(PES流),并被变换为TS包,由此进行复用。将按照该TS包的单位进行复用的文件称为“传输流文件”。 
与此不同,将以视频流、音频流为代表的Elementary流的PES流被变换为包串并进行复用的文件,称为“程序流文件”。 
在BD-ROM、BD-RE、BD-R中记录的AV流文件是指前者的传输流文件。在DVD-Video、DVD-RW、DVD-R、DVD-RAM中记录的AV流文件是指后者的***流文件,也被称为Video Object。 
第4段表示利用文件***管理的分隔区域的记录内容。在分隔区域中具有构成AV流文件的区段(extent)、和构成除AV流文件之外的非AV文件的区段。 
区段形成于分隔区域中的在物理上相连续的多个扇区上。分隔区域由“记录了文件组记述符的区域”、“记录了末尾记述符的区域”、“ROOT目录区域”、“BDMV目录区域”、“JAR目录区域”、“BDJO目录区域”、“PLAYLIST目录区域”、“CLIPINF目录区域”、“STREAM目录区域”构成,是被文件***访问的区域。下面,对这些区域进行说明。 
“文件组记述符”包括指示记录了目录区域中的ROOT目录的文件入口的扇区的逻辑块序号(LBN)。“末尾记述符”表示文件组记述符的末尾。 
下面,对目录区域进行详细说明。上述的多个目录区域都具有共同的内部结构。即,“目录区域”由“文件入口”、“目录文件”和“下位文件的文件记录区域”构成。 
“文件入口”包括“记述符标签”、“ICB标签”和“分配记述符”。 
“记述符标签”是表示自身是文件入口的标签。 
“ICB标签”表示与文件入口自身相关的属性信息。 
“分配记述符”包括表示目录文件的记录位置的逻辑块序号(LBN)。以上是有关文件入口的说明。下面,对目录文件进行详细说明。 
“目录文件”包括“下位目录的文件识别记述符”和“下位文件的文件识别记述符”。 
“下位目录的文件识别记述符”是用于访问位于本目录下面的下位目录的参照信息,由以下部分构成:表示该下位目录的识别信息、该下位目录的目录名的长度、表示下位目录的文件入口被记录为哪个逻辑块序号的文件入口地址、和该下位目录的目录名。 
“下位文件的文件识别记述符”是用于访问位于本文件下面的文件的参照信息,由以下部分构成:表示该下位文件的识别信息、该下位文件名的长度、表示有关下位文件的文件入口被记录为哪个逻辑块序号的文件入口地址、和下位文件的文件名。 
这些目录的目录文件中的文件识别记述符表示下位目录和下位文件的文件入口被记录在哪个逻辑块序中,因而如果逆向追踪该文件识别记述符,能够从ROOT目录的文件入口到达BDMV目录的文件入口,并且能够从BDMV目录的文件入口到达PLAYLIST目录的文件入口。同样,也能够到达JAR目录、BDJO目录、CLIPIN目录、STREAM目录的文件入口。 
“下位文件的文件记录区域”是指记录了某个目录下面的下位文件的实体的区域,记录了有关该下位文件的“文件入口”和一个以上的“区段”。 
“文件入口”包括“记述符标签”、“ICB标签”和“分配记述符”。 
“记述符标签”是指表示自身是文件入口的标签。标签包括文件入口记述符、空间位图记述符等类型,关于文件入口,记述了表示文件入口的“261”作为记述符标签。 
“ICB标签”表示与文件入口自身相关的属性信息。 
“分配记述符”包括表示区段的记录位置的逻辑块序号(LBN),该区段构成位于某个目录下面的下位文件。分配记述符包括表示区段长度的数据、和表示区段的记录位置的逻辑块序号。但是,通过将表示区段长度的数据的上位2比特设定为“0”,表示是已分配而且已记录的区段,通过将该上位2比特设定为“1”,表示是已分配但是未记录的区段。在位于某个目录下面的下位文件被分割到多个区段中的情况下,文件入口按照某个区 段具有多个分配记述符。 
通过参照上述的文件入口的分配记述符,能够得知构成AV流文件或非AV流文件的区段的地址。 
例如,AV流文件是指处于该文件所属的目录的目录区域内的文件记录区域,通过逆向追踪目录文件的文件识别记述符和文件入口的分配记述符,能够访问AV流文件。 
图5是表示以文件***为前提的光盘的应用格式的图。 
BDMV目录是指记录了在BD-ROM中处理的AV内容或管理信息等数据的目录。在BDMV目录的下面有被称为“PLAYLIST目录”、“CLIPINF目录”、“STREAM目录”、“BDJO目录”、“JAR目录”的5个子目录,在BDMV目录中配置有“index.bdmv”、“MovieObject.vdmv”这两种文件。 
“index.bdmv(文件名固定)”存储了索引表,该索引表表示能够在BD-ROM中再现的多个文件的标题序号、与规定各个标题的程序文件即BD-J项目或者电影项目的对应关系。索引表是与BD-ROM整体相关的管理信息,在将盘***到再现装置中后,index.bdmv被最先读出,由此再现装置识别到唯一的盘。索引表是定义在BD-ROM中存储的所有标题、主菜单、FirstPlay这些标题结构的最上位置的表。在索引表中,利用普通标题、主菜单标题、FirstPlay标题指定最先执行的程序文件。在每当标题或者菜单被调用时,BD-ROM的再现装置参照索引表来执行规定的程序文件。在此,FirstPlay标题是由内容提供商设定的标题,被设定为在***盘时自动执行的程序文件。并且,主菜单标题用于在根据用户的遥控器操作而执行命令“返回菜单”时,指定被调用的电影项目、BD-J项目。作为与立体观察相关的信息,Index.bdmv具有Initial_output_mode信息。该Initial_output_mode信息是在Index.bdmv被安装的情况下,规定再现装置的输出模式的初始状态应该是何状态的信息,能够对该Initial_output_mode信息规定预先将制作者站点期望的输出模式。 
“MovieObject.vdmv(文件名固定)”存储了一个以上的电影项目。电影项目是指在以命令翻译器为控制主体的动作模式(HDMV模式)中,规定再现制作应该进行的控制步骤的程序文件,在用户进行了一个以上的命令、和针对GUI的菜单调用、标题调用的情况下,还包括规定是否掩盖这 些调用的掩盖标志。 
在“BDJO目录”中具有被赋予了扩展符bdjo程序的文件(XXXXX.bdjo)[“XXXXX.”可变,扩展符“bdjo”固定]。该程序文件存储了BD-J项目,用于规定再现装置在以字节码翻译器即Java假想设备为控制主体的动作模式(BD-J模式)中应该进行的控制步骤。该BD-J项目包括“应用管理表”。BD-J项目内的“应用管理表”是用于使再现装置进行以标题为生命周期的应用信令的表。应用管理表包括特定在与BD-J项目对应的标题成为当前标题时应该动作的应用的“应用识别符”、“控制码”。把利用应用管理表规定了生命周期的BD-J项目称为“BD-J应用”。控制码在被设定为AutoRun的情况下,表示在将该应用安装到堆内存中后自动起动,在被设定为Present的情况下,表示在将该应用安装到堆内存中后等待来自其它应用的调用而起动。另一方面,在BD-J应用中,存在即使标题结束但其动作未结束的应用。把这种应用称为“无标题约束应用”。 
虽然涉及到该Java(注册商标)应用的实体,却是在BDMV目录下面的JAR目录中存储的Java(注册商标)归档文件(YYYYY.jar)。 
应用例如是Java(注册商标)应用,由被安装在假想设备的堆区域(也称为工作存储器)中的一个以上的xlet程序构成。利用被安装在该工作存储器中的xlet程序和数据构成应用。 
在PLAYIST目录中具有被赋予了扩展符“mpls”的程序信息文件(xxxxx.Mpls[“xxxxx”可变,扩展符“mpls”固定])。 
“播放列表”是指如下所述规定的再现路径,即在AV流的时间轴上规定再现区间,同时在逻辑上指定该再现区间彼此的再现顺序,“播放列表”具有规定再现多个AV流中的哪个AV流的哪个部分,并按照哪种顺序进行场景展开的作用。播放列表信息文件存储了定义这种播放列表的播放列表信息。再现控制用的Java(TM)应用通过命令Java(TM)假想设备生成用于再现该播放列表信息的JMF播放实例,能够使开始AV再现。JMF(Java Media Frame work)再现装置实例是指以JMF播放类别为基础,在假想设备的对内存上生成的实际数据。 
在“CLPIINF目录”中具有被赋予了扩展符clip的素材信息文件(xxxxx.Clip[“xxxxx”可变,扩展符“clip”固定])。 
“STREAM目录”是存储了AV流文件的目录,在该目录中,要xxxxx.m2ts(“xxxxx”可变,扩展符“m2ts”固定)的形式存储有AV流文件。 
STREAM目录中的AV流文件是MPEG-2传输流(TS)形式的数字流,是将视频流、音频流、图形流等多个基础流复用而形成的。 
并且,在AV流文件中,把存储了左视点再现用的多种PES流的包的集合体称为“左视点AV流文件”,所述包包括:存储了左视点视频流的包、存储了左视点用的图形流的包、存储了应该与这些包同时再现的音频流的包等。如果该左视点AV流文件能够实现包括基础视点视频流在内的平面观察再现,该左视点AV流文件被称为“2D/左视点AV流”。另外,在后面的说明中,只要没有特别说明,左视点视频流就是指基础视点视频流,包括左视点视频流在内的左视点AV流就是指2D/左视点AV流。 
另外,在AV流文件中,把存储了右视点再现用的多种PES流的包的集合体称为“右视点AV流文件”,所述包包括:存储了右视点视频流的源包、存储了右视点用的图形流的源包、存储了应该与这些源包同时再现的音频流的源包等。 
在CLIPINF目录中存储的素材信息文件是指按照各个AV流文件,分别表示该AV流文件是哪种包的集合体等、AV流文件的详细情况的信息,是在对应的AV流文件被再现之前被读出到存储器中,并且在该AV流文件被持续再现的期间中在再现装置内被用来参照的信息。 
以上是关于记录介质的内部结构的说明。下面,对图4及图5所示的记录介质的制作方法、即记录方法的形式进行说明。 
本实施方式的记录方法不仅包括实时地生成上述的AV流文件、非AV流文件,并且直接写入到卷区域中的实时录制,而且包括事前生成应该在卷区域中记录的比特流的整体像,以该比特流为基础来生成坯料盘,对该坯料盘进行冲切,由此批量生产光盘的预格式录制。本实施方式的记录介质是利用基于实时录制的记录方法、以及基于预格式录制的记录方法而特定的记录介质。 
图6是表示记录方法的处理步骤的流程图。 
步骤S301是确定BD-ROM的标题构造的步骤。由此生成标题构造信 息。标题构造信息是使用树构造来规定BD-ROM中的再现单位的关系的信息,例如规定标题、电影项目、BD-J项目、播放列表之间的关系。具体地讲,标题构造信息规定与想要制作的BD-ROM的“盘名”对应的节点、在该BD-ROM中与能够从Index.bdmv再现的“标题”对应的节点、与构成该标题的“电影项目及BD-J项目”对应的节点、以及从该电影项目及BD-J项目再现的“播放列表”的节点,利用边缘(edge)将这些节点相连接,由此规定标题、电影项目、BD-J项目、播放列表之间的关系。 
步骤S302是进行标题中使用的动态图像、声音、静态图像、字幕信息的输入的步骤。 
步骤S303是对标题构造信息实施用户利用GUI进行操作的编辑处理,由此生成BD-ROM脚本数据的步骤。在此,BD-ROM脚本数据是指在再现AV流时,使再现装置进行标题单位的再现的信息,在BD-ROM中被定义为索引表、电影项目、播放列表的信息相当于脚本。在BD-ROM脚本数据中包括构成流的素材信息、再现区间、表示再现路径的信息、菜单画面配置、来自菜单的推移信息等。 
步骤S304是编码步骤,根据BD-ROM脚本数据进行编码,并得到PES流。 
步骤S305是基于BD-ROM脚本数据的复用步骤,通过该步骤对PES流进行复用,并得到AV流。 
在步骤S306得到用于向BD-ROM记录的数据库。该数据库是指前面叙述的在BD-ROM中定义的索引表、电影项目、播放列表、BD-J项目等的总称。 
在步骤S307,将Java(TM)程序、通过复用步骤得到的AV流、BD-ROM数据库作为输入,在依据于BD-ROM的文件***平台中生成AV流文件、非AV文件。 
步骤S308是应记录到BD-ROM中的数据中的非AV文件写入路程,步骤S309是AV流文件的写入路程。 
步骤S305的多路复用路程包括将视频流、音频流、图形流变换为PES流之后,变换为传输流(Transport Stream)的第1变换行程、以及将构成传输流的各个TS包变换为源包的第2变换路程,并且将构成运动图像、声 音、图形的源包序列进行多路复用。 
步骤309的AV流文件写入路程中将源包序列作为AV流文件的区段,写入记录媒体的连续区域。 
作为写入对象的流如下。 
·视频流 
视频流表示电影的主(primary)视频及辅(secondary)视频。这里,主视频表示在画中画(picture in picture)中显示为主图像的通常的影像,辅视频表示在画中画中显示为小画面的影像。主视频有左视点视频、右视点视频这两种,辅视频有左视点视频、右视点视频这两种。 
·音频流 
音频流表示电影的主声音部分。音频流中以Dolby AC-3、Dolby Digital plus、MLP、DTS、DTS-HD、或线性PCM等方式被压缩、编码记录着。音频流中有主音频流、辅音频流这两种。主音频流是在进行混合再现时应作为主声音的音频流,辅音频流是在进行混合再现时应作为辅声音的音频流。 
·演示图形(Presentation Graphics) 
演示图形流(PG流)是表示电影的字幕、字符(character)等应严格与图片同步的图形的图形流,存在对英语、日语、法语等多个语言的流。 
PG流由PCS(Presentation Control Segment)、PDS(Pallet Define Segment)、WDS(Window Define Segment)、ODS(Object Define Segment)等一连的功能段构成。ODS(Object Define Segment)是定义作为字幕的图形对象的功能段。 
WDS(Window Define Segment)是定义画面中的图形对象的比特量的功能段,PDS(Pallet Define Segment)是描绘图形对象时的规定显色的功能段。PCS(Presentation Control Segment)是规定字幕显示中的页控制的功能段。该页控制中有Cut-ln/Out、Fade-ln/Out、Color change、Scroll、Wipe-ln/Out等,通过伴随基于PCS的控制,能够实现将某些字幕逐渐消除、并且显示下一字幕的显示效果。 
在图形流的再现中,图形解码器以流水式(pipeline)执行将属于某个显示单位的ODS进行解码并将图形对象写入对象缓冲器中的处理、以及通过将属于先行显示单位的ODS进行解码来得到的图形对象写入到平面存储 器中的处理,并通过全驱动硬盘来实现上述的严格的同步。 
AV流文件中没有多路复用、但呈现字幕的流中,除了PG流之外还有文本字幕(textST)流。textST流是以字符码来表现字幕的内容的流。该PG流与textST流的组在BD-ROM规格中被称作“PGTextST流”。 
·交互式图形(Interactive graphics)流 
交互式图形流(IG流)是实现基于遥控器的对话控制的图形流。由IG流定义的对话控制是与DVD再现装置上的对话控制有互换性的对话控制。该IG流由称为ICS(Interactive Composition Segment)、PDS(Palette Difinition Segment)、ODS(Object Definition Segment)的功能段构成。ODS(Object Definition Segment)是定义图形对象的功能段。该图形图像被集中多个而描绘对话画面上的按钮。PDS(Palette Difinition Segment)是描绘图形对象时的规定显色的功能段。ICS(Interactive Composition Segment)是实现使按钮的状态按照用户操作来变化的状态变化的功能段。ICS包括没有对按钮的确定操作时应执行的按钮指令。交互式图形流表示通过在画面上配置GUI部件来制作的对话画面。 
视频流由多个GOP(Group of Pictures:图片组)构成,通过将其作为编码处理的基本单位,能够编辑运动图像或随机访问。 
图7(a)表示图片怎样保存在GOP中的对应关系。该图的第1段表示左视点视频流的图片与GOP的对应关系,第2段表示右视点视频流的图片与GOP的对应关系。在图中,左视点视频流及右视点视频流中,显示时刻对齐相同的图片来描绘。左视点视频流、右视点视频流的GOP开头都是I图片。此外,右视点视频流的GOP开头的图片是在再现立体视影像时与左视点视频流的GOP开头的I图片成对显示的图片,是显示时刻与左视点视频流的GOP开头的I图片的显示时刻相同的图片。 
图7(b)表示GOP的构造。GOP由一个以上的视频访问单元构成。视频访问单元是保存图片的编码数据的单位,在帧构造的情况下保存1帧的数据,在场构造的情况下保存1场的数据。 
GOP开头的视频访问单元由序列头、图片头、补充数据、压缩图片数据构成,保存I图片的数据。序列头是保存该GOP中共通的信息的头,保存分辨率、帧速率、纵横比、比特率等信息。这里,右视点视频流的GOP 的序列头的帧速率、分辨率、纵横比的值与对应的左视点视频流的GOP的序列头的帧速率、分辨率、纵横比相同。图片头是保存图片整体的编码方式等的信息的头。补充数据是在压缩图片数据的解码中不是必需的附加信息,例如有与影像同步而显示在TV上的隐藏字幕(closed caption)的文字信息或时间码信息。压缩图片数据是被压缩编码的图片数据。GOP开头以外的视频访问单元由图片头、补充数据、压缩图片数据构成。 
这里,序列头、图片头、补充数据、压缩图片数据的内容结构根据视频的编码方式而不同。例如,MPEG-4 AVC的情况下,序列头对应于SPS(序列参数集)、补充数据对应于SEI(Supplemental Enhancement Information:附加增强信息)。 
图8表示与左视点视频流和右视点视频流的各视频访问单元赋予的解码切换信息。在视频解码器中,一边将左视点视频流的视频访问单元和右视点视频流的视频访问单元进行切换一边进行解码处理。通常的视频解码器能够通过对视频访问单元赋予的DTS的时刻来确定接着要解码的视频访问单元。但是,忽视DTS而提前进行解码的视频解码器也很多。此时,优选在视频流的各视频访问单元中有确定接着要解码的视频访问单元的信息。图8所示的解码开关信息是用于职员视频访问单元的切换处理的信息。 
图8的上图表示解码切换信息的构造,图8的下图表示一个视频访问单元的数据构造。解码切换信息按照每个视频访问单元,保存在视频访问单元内的补充数据区域(MPEG-4AVC时SEI)中。 
解码切换信息由下一访问单元类型、访问单元尺寸以及解码计数器构成。 
下一访问单元类型是表示接着要解码的视频访问单元是左视点视频流和右视点视频流中的哪一个的信息。在值为“1”时表示是左视点视频流的视频访问单元,在值为“2”时表示是右视点视频流的视频访问单元,在“0”时表示当前的视频访问单元是流末端的视频访问单元。 
下一访问单元尺寸是接着要解码的视频访问单元的尺寸信息。如果,接着要解码的视频访问单元的尺寸不明确,则在从保存了解码前的视频访问单元的缓冲器中抽出视频访问单元时,需要对访问单元的构造进行解析后确定尺寸。但是,通过具有下一访问单元尺寸,视频解码器不用对下一 视频访问单元的构造进行解析而确定尺寸。因此,能够简单地进行从保存了解码前的图片的缓冲器的抽出处理。 
解码计数器是如图9(a)所示,在将左视点视频流的GOP开头的I图片设为0时,将作视点视频流和右视点视频流的视频访问单元按照解码顺序增加的计数器。
若使用该信息,则能够适当地进行因某种原因而未能读入视频访问单元时的纠错处理。例如,如图9(a)所示,若假设左视点视频流的第三个视频访问单元(Br图片)因读入错误而未能读入,则在没有任何信息的情况下,右视点视频流的第三个视频访问单元(B图片)参照右视点视频流的第三个视频访问单元,因此有可能进行错误的解码、解码出有噪声的图像。此时,若保持右视点视频流的第二个视频访问单元(P图片)的解码计数器的值,则能够预测下一个应到来的访问单元的解码计数器的值,因此解码器能够进行适当的纠错处理。在图9(a)的例子中,右视点视频流的第二个视频访问单元(P图片)的解码计数器4为“4”,因此虽然下一个应到来的解码器计数器为“5”,但实际读入的视频访问单元为左视点视频流的第四个视频访问单元(P图片),解码计数器变成“7”。因此,在视频解码器中能够判断出视频访问单元跳跃了一个。由此,例如进行如下处理:判断为右视点视频流的第三个视频访问单元(B图片)没有参照目的地的图片而跳过解码。 
另外,如图9(b)所示,也可以将解码计数器设为每个影像视频流完结的值。此时,也在刚刚解码的是左视点视频流的视频访问单元的的情况下,能够将下一个应到来的视频访问单元的解码计数器预测为与紧前的解码计数器相同。在刚刚解码的是右视点视频流的视频访问单元的的情况下,能够将下一个应到来的视频访问单元的解码计数器预测为紧前的解码计数器中加1的数,因此同样能够进行适当的纠错处理。 
图10(a)更详细地表示视频流怎样保存在PES包序列中。该图的第1段表示视频流的视频帧序列。第2段表示PES包序列。第3段表示通过对这些PES包序列进行变换而得到的TS包序列。如该图的箭头yy1、yy2、yy3、yy4所示,作为视频流中的多个Video Presentation Unit的I图片、B图片、P图片被按照每个图片分割而保存于PES包的有效载荷中。各PES 包具有PES头,PES头中保存了图片的显示时刻即PTS(Presentation Time-Stamp)或图片的解码时刻即DTS(Decoding Time-Stamp)。 
<TS包序列> 
图10(b)表示最后写入到AV流中的TS包的形式。第1段表示TS包序列,第2段表示源包序列。第3段表示AV流。 
如第1段所示,TS包是分为具有识别流的PID等的信息的4字节的“TS头”、以及保存数据的184字节的“TS有效载荷”的固定长度的包,前面说明的PES包被分割并保存于TS有效载荷中。 
根据第2段,TS包以被赋予4字节的TP_Extra_Header、并变换为192字节的源包的状态写入到AV流中。TP_Extra_Header中记载了ATS(Arrival_Time_Stamp)等信息。ATS表示向该TS包的PID滤波器的输送开始时刻。AV流中,如第3段所示,排列有源包,从AV流的开头增加的号码被称作SPN(源包号码)。 
<AV流的多路复用> 
图11是示意地表示左视点AV流怎样被多路复用的图。首先,将左视点视频流及音频流(第1段)分别变换为PES包序列(第2段)源包序列(第3段)。同样,左视点演示图形流及左视点交互图像(第7段)分别变换为PES包序列(第6段),进而变换为源包序列(第5段)。由此得到的构成视频、音频、图形的源包按照其ATS的顺序排列。这是因为源包应按照其ATS读入至读缓冲器。这样,若源包按照ATS排列,则得到左视点AV流。该左视点AV流被决定成读缓冲器不下溢(underflow)的尺寸,成为向记录媒体记录的对象。 
在Arrival Time Clock(ATC)中,将ATS连续的源包的集合称作ATC序列,在System Time Clock(STC)时间轴中,将解码时间戳(DTS)、演示时间戳(PTS)连续的源包的结合称作STC序列。 
图12表示通过记录方法得到的区段。第1段表示构成AV流文件的区段EXT_L[i]、EXT_L[i+1]、EXT_R[i]、EXT_R[i+1]。 
第2段表示属于各区段内的源包序列。 
该第1段的区段是隔行配置构成右视点AV流的源包的组、构成左视点AV流的源包的组而成的。该图的隔行配置是指构成右视点AV流的源包集 合、构成左视点AV流的源包集合作为一个区段以“右视点”、“左视点”、“右视点”、“左视点”…的规则记录。 
这里,括号中的变量i,i+1表示作为第几个区段来再现。从这个记述方法来看,可知由变量i指示的两个区段、即EXT_L[i]、EXT_R[i]同时被再现。 
将EXT_L[i]的尺寸称作SEXT_L[i],将区段EXT_R[i]称作SEXT_R[i]。 
说明怎样决定这些SEXT_L、SEXT_R的尺寸。这里的区段在再现装置中交替读出到左视点用读缓冲器、左视点用读缓冲器这两个缓冲器中并提供至视频解码器。于是,需要考虑使右视点用读缓冲器及左视点用读缓冲器为缓冲器为满的时间来决定SEXT_L、SEXT_R的尺寸。即,将右视点用读缓冲器的容量必须决定为:若将向右视点用读缓冲器的输送速率设为Rmax1,则满足 
右视点用读缓冲器=Rmax1ד伴随跳跃而使左视点用读缓冲器为满的时间” 
这里,跳跃与盘寻道同义。因为在BD-ROM中能够对记录确保的连续区域有限,左视点视频流及右视点视频流不一定被相邻记录,而有可能被记录在随机的区域中。 
接着考虑“伴随跳跃而使左视点用读缓冲器为满的时间”。作视点用读缓冲器中的TS包储存以Rud-Rmax2的传输速率进行。这意味着来自左视点用缓冲器的输出速率Rmax2与向左视点用读缓冲器的输入速率Rud的差分。这样,使左视点用读缓冲器为满的时间为RB/(Rud-Rmax2)。RB2是左视点用读缓冲器的容量。 
在将数据读出到左视点用缓冲器中时,需要考虑从右视点AV流向左视点AV流的跳跃时间(Tjump)与从左视点AV流向右视点AV流的跳跃时间(Tjump),因此左视点用读缓冲器的储存需要(2×Tjump+RB2/(Rud-Rma×2))的时间。 
若将右视点用读缓冲器的输送速率设为Rmax1,则在上述的左视点用缓冲器的储存时间中,必须以Rmax1的输送速率输出右视野用读缓冲器内的所有的源包,因此右视点用读缓冲器的尺寸RB1为 
RB1≥Rmax1×[2×Tjump+RB2/(Rud-Rmax2)] 
若以同样的步骤求左视点用读缓冲器的容量RB2,则为 
RB2≥Rmax2×[2×Tjump+RB1/(Rud-Rmax1)] 
右视点用读缓冲器和左视点用读缓冲器的存储容量的具体值为1.5Mbyte以下,在本实施方式中,将区段容量SEXT_R、SEXT_L设定为与该右视点用读缓冲器和左视点用读缓冲器的容量相同的容量,或者设定为与其大致相等的容量。通过这样的区段的物理的文件配置,能够使AV流的影像和声音在途中无中断地无缝再现。以上是左视点AV流和右视点AV流的记录方法的说明。接着,说明左视点AV流及右视点AV流的内部结构。参照图12的第1段说明区段EXT_R[i]和区段EXT_L[i]的内部结构。 
区段EXT_L[i」由以下的源数据包构成。 
具有0x0100的数据包ID的源数据包构成Program_map,具有0x1001的数据包ID的TS数据包构成PCR。 
具有0x1011的数据包ID的源数据包构成左视点视频流, 
具有0x1220~123F的数据包ID的源数据包构成左视点PG流, 
具有0x1420~143F的数据包ID的源数据包构成左视点IG流, 
具有从0x1100到Ox111F为止的PID的源数据包构成音频流。 
区段EXT_R[i」通过以下的源数据包构成。 
0x1012的TS数据包构成右视点视频流,0x1240~125F的源数据包构成右视点PG流,0x1440~145F的源数据包构成右视点IG流。、 
在包含AV流的源数据包中,除影像·声音·图形等各流以外还有PAT(Program Association Table)、PMT(Program Map Table)、PCR(Program Clock Reference)等。PAT表示AV流中所利用的PMT的PID是什么,PAT自身的PID在0x0000登记。PMT具有AV流文件中中包含的影像·声音·图形等各流的PID和与各PID相对应的流的属性信息,或者与AV流相关的各种描述符。在描述符中有指示许可/不许可AV流文件的复制的复制控制信息等。为了取得作为ATS的时间轴的ATC(Arrival Time Clock)和作为PTS·DTS的时间轴的STC(System Time Clock)的同步,PCR具有与该PCR数据包所被传送到解码器的ATS相对应的STC时间的信息。 
具体而言,在PMT的开头配置有记录有该PMT中含有的数据的长度等的PMT头。在其后面配置有多个与AV流相关的描述符。上述的复制控 制信息等作为描述符被记载。在描述符的后面配置有多个与AV流文件中包含的各流相关的流信息。流信息由流描述符构成,该流描述符记载有用于识别流的压缩编解码器等的流类型、流的PID、流的属性信息(帧速率、宽高比等)。流描述符存在AV流中存在的流的数量。 
说明在文件***中图12所示的区段怎样进行处理。 
图13是表示区段和AV流文件的对应关系的图。 
第1段表示右视点的区段和左视点的区段。第2段表示作为隔行形式的AV流文件的XXXXX.m2ts。虚线的箭头h1,h2,h3,h4,h5表示区段EXT_R[i],EXT_L[i],EXT_R[i+1],EXT_L[i+1]是归属于哪个文件的由分配标识符表示的归属于关系。根据箭头h1,h2,h3,h4,h5所示的归属关系,可知区段EXT_R[i],EXT_L[i],EXT_R[i+1],EXT_L[i+1]作为XXXXX.m2ts的区段被登记。 
以上是容纳有AV流的AV流文件的说明。接着说明片段(clip)信息文件。 
<片段信息文件> 
图14是表示片段信息文件的内部结构的图。片段信息文件如本图所示是AV流文件的管理信息,与AV流文件1对1地对应。引出线ch1将片段信息文件的内部结构扩大表示。如该引出线所示,片段信息文件由“片段信息”,“流属性信息”,“入口映射表”,“3D元数据”构成。、 
片段信息如引出线ch21所示,由“***速率”,“再现开始时间”、“再现结束时间”构成。***速率表示将构成AV流文件的TS数据包传输到后述的***目标解码器的PID文件夹的最大传输速率。AV流文件中包含的ATS的间隔被设定为***速率以下。再现开始时间是AV流文件的开头的视频帧的PTS,再现结束时间是在AV流文件的终端的视频帧的PTS中到达1帧的量的再现间隔。 
图15是表示片段信息文件中的流属性信息的图。 
图中的引出线ah1将流属性信息的内部结构扩大表示。 
如该引出线所示,由PID=0x1011的TS数据包构成的左视点视频流的流属性信息、由PID=0x1012的TS数据包构成的右视点视频流的流属性信息、由PID=0x1100、PID=0x1101的TS数据包构成的音频流的流属性信息、由PID=0x1220,0x1221的TS数据包构成的PG流的流属性信息,像这样将 由多个种类的源数据包构成的PES流具有何种属性表示在该流属性信息中。如该引出线ah1所示,AV流文件中包含的各流的属性信息按照每个PID登记。各流的属性信息按照每个流的种类而具有不同的信息。视频流属性信息具备如下信息,即,该视频流是由哪个压缩编解码器压缩的,构成视频流的各个图片数据的分辨率有多少,宽高比有多少,帧速率有多少等。音频流属性信息具备如下信息,即,该音频流是由哪个压缩编解码器压缩的,该音频流中含有的声道数是多少,与哪种语言对应,采样频率是多少等。这些信息用于播放器再现之前的解码器的初期化等 
说明视频流属性信息。左视点视频流的PID=0x1011的视频流属性信息的编解码器、帧速率、宽高比、分辨率必须对应的右视点视频流的PID=0x1012的视频流属性信息的编解码器、帧速率、宽高比、分辨率一致。编解码器不同的情况下,视频流间的参照关系不成立,或者为了与显示器同步而作为3D影像再现,如果帧速率、宽高比、分辨率不一致则给用户带来不适感。 
此外,在右视点视频流的视频流属性信息中,也可以在解码中加入表示参照左视点流的视频流的标志。此外,也可以含有参照目标的视频流的信息。通过做成这样的结构,检证作成的数据是否是按照规定的格式做成的工具,能够判断视频流的对应关系。 
图16是表示片段信息文件中入口映射表的图。本图(a)是表示入口映射表的概略结构的图。引出线eh1将入口映射表的内部结构扩大表示。如该引出线所示,入口映射表包含“入口映射头信息”,“区段开始类型”,“关于PID=0x1011的入口映射”,“关于PID=0x10121的入口映射”,“关于QPID=0x1220的入口映射”,“关于PID=0x1221的入口映射”。 
“入口映射头信息”存储有指示入口映射的视频流的PID和入口点数等的信息。 
“区段开始类型”表示在左视点视频流及右视点视频流之中从哪个区段开始配置区段。通过参照该信息,2D/3D再现装置能够简单地判断左视点AV流的区段和右视点AV流的区段之中应该从哪个区段向BD-ROM驱动发出再现要求。 
“关于PID=0x1011的入口映射”,“关于PID=0x1012的入口映射”,“关 于PID=0x1220的入口映射”,“关于PID=0x1221的入口映射”是由多个种类的源数据包构成的PES流的各自的入口映射。在入口映射中,成为一对的PTSSPN的信息称为入口点。此外,将开头作为“0”对各入口点将增量后的值称为入口点ID(以下EP_ID)。在左视点视频流的各入口点登记左视点视频流的GOP开头的I图片的PTS和SPN。同样地,在右视点视频流的各入口点登记右视影像视频流的右视GOP开头的图片的PTS和SPN。通过利用该入口映射,再现设备能够确定与视频流的时间轴上的任意的地点相对应的源数据包位置。例如,在快进·退回的特殊再现时,通过确定入口映射中登记的I图片并选择而再现,能够不必解析AV流文件而高效地进行处理。此外,入口映射在AV流文件内被多路复用的每个各视频流被制作,由PID管理。 
引出线eh2将PID=1011的入口映射的内部结构扩大表示。由与EP_ID=0对应的入口点,与EP_1D=1对应的入口点,与EP_ID=21对应的入口点,与EP_ID=3对应的入口点构成。与EP_ID=0对应的入口点表示被设定为开通的is_anglg_change标志SPN=3和PTS=80000的对应关系。与EP_ID=1对应的入口点表示被设定为关闭的is_angle_change标志、SPN=1500和PTS=270000的对应关系。 
与EP_ID=2对应的入口点表示被设定为关闭的is_angle_change标志、SPN=3200和PTS=360000的对应关系。与EP_ID=3对应的入口点表示被设定为关闭的is_angle_change标志、SPN=4800和PTS=450000的对应关系。is_angle_change标志是表示能否从该入口点独立并解码的标志。视频流以MVC或MPEG4-AVC编码,在入口点存在IDR图片时,该彪孩子被设定为开通。在入口点存在Non-IDR图片时,该标志被设定为关闭。 
该图(b)表示通过图(a)所示的与PID=1011的TS数据包对应的入口映射内的多个入口映射,哪个源数据包被指示。与EP_ID=0对应的入口映射指示SPN=3,将该源数据包号码与PTS=80000建立对应关系。与EP_ID=1对应的入口映射指示SPN=1500,将该源数据包号码与PTS=270000建立对应关系。 
与EP_ID=2对应的入口映射指示SPN=3200的源数据包,将该源数据包号码与PTS=360000建立对应关系。与EP_ID=3对应的入口映射指示 SPN=4800的源数据包,将该源数据包号码与PTS=450000建立对应关系 
图17表示入口映射的入口点的登记。第1段表示由STC序列规定的时间轴。第2段表示片段信息中的入口映射。第3段表示构成ATC序列的源数据包列。入口映射在指定ATC序列中=n1的源数据包时,对该入口映射的PTS预先设定为STC序列中的PTS=t1。这样,使用PTS=t1这个时刻,能够使再现装置执行从ATC序列中的=n1开始的随机访问。此外,入口映射在指定ATC序列中=n21的源数据包时,对该入口映射的PTS预先设定STC序列中的PTS=t21。这样,使用PTS=t21这个时刻,能够使再现装置执行从ATC序列中的=n21开始的随机访问。 
通过利用该入口映射,再现设备能够确定与视频流的时间轴上的任意的时刻对应的AV流文件的文件位置。例如,在快进,退回的特殊再现时,通过确定入口映射中登记的I图片并选择从而再现,能够不解析AV流文件而高效地进行处理。 
在此,在左视点视频流的GOP开头的I图片和与该GOP对应的右视点视频流的GOP开头的I图片之中只有一个未登记在入口映射中的情况下,在随机再现等的随机访问时,难以作为立体影像来再现。例如,图18(b)的BL1、BL3、BL5分别是指示左视点视频流的GOP#L1、GOP#L3、GOP#L5的开头的I图片的入口点。在此,飞入BL3而再现的情况下,由于不存在与GOP#L3对应的右视点流的GOP,即指示GOP#R3的图片的入口点,所以不能从片段信息文件取得GOP#R3的开头图片的SPN信息。因此,在3D影像的再现时从GOP#L3的开头随机再现的情况下,根据位于比右视点流的GOP#R3靠前的入口点BR2所指示的GOP#R2的图片的SPN解析数据,需要取得GOP#R3的开头图片的开始SPN,在随机再现时的响应变差。 
因此,如图18(a)所示,左视点视频流的GOP开头的I图片和与该GOP对应的右视点视频流的GOP开头的图片始终都被登记在入口映射中。通过这样构成,能够从两个入口映射取得左视点视频流的GOP开头的SPN和与该GOP对应的右视点视频流的GOP开头的SPN,所以能够防止在随机再现时的相应的恶化。 
以上是入口映射表的说明。接着,说明3D元数据的详细。 
3D元数据是指,规定了立体再现所需的各种信息的元数据群,包含多 个偏移入口。各个偏移入口与多个PID、多个表示时刻建立对应关系。然后,在再现某个PID的PES流时,在该PES流的多个显示时刻,能够按照每个PID每及显示时刻规定应该使用多少偏移来实现立体视点。 
3D元数据是用于在演示图形流、交互图形流、辅影像视频流的2D图像中追加进深信息的信息。如图19的上段所示,3D元数据是按照每个AV流文件内包含的演示图形流、交互图形流、辅影像视频流的PID,记载有表示3D影像的显示时刻的PTS和表示右视左目的像素的偏差的偏移值的表信息。偏移值是向X轴方向的像素数,也可以是负值。在此,以表的1行表示的成对的PTS和偏移值的信息称为偏移入口。如图19的下段所示,偏移入口的有效区间是从该偏移入口的PTS到下一个偏移入口的PTS为止。例如,偏移入口#1的PTS为180000,偏移入口#2的PTS为270000的情况下,偏移入口#1的偏移值为从180000到270000为止有效。后述的2D/3D影像装置的平面加法部5b基于该信息值,将PG平面、IG平面、辅影像平面向左右以偏移值错移而合成平面。由此,能够做出视差图像,能够对于2维影像附加立体的进深。关于平面合成的方法详细,用平面加法部5b来说明。另外,在此,3D元数据按照每个PID进行了设定,但是也可以例如按照各平面来设定。由此,2D/3D再现装置的3D元数据的解析处理能够简洁化。另外,除实现2D/3D再现装置的合成処理的性能之外,也可以进行使偏移入口的间隔例如称为1秒以上等的制约。 
以上是片段信息文件的说明。接着,说明播放列表信息文件的详细。 
<播放列表信息文件> 
播放列表表示AV流文件的再现路径。播放列表由1个以上的播放项目构成,表示各播放项目相对于AV流的再现区间。各播放项目分别以播放项目ID来识别,记述播放列表内应再现的顺序。此外,播放列表包含表示再现开始点的入口标记。入口标记能够对于用播放项目定义的再现区间内来赋予,对于播放项目赋予成为再现开始点的位置,用于寻源再现。例如,在电影标题中,通过对成为章节的开头的位置赋予入口标记,能够进行章节再现。 
图20表示不发生2D播放项目和3D播放项目的混在的播放列表。通过消除混在,使再现装置的再现环境不发生切换。本图的播放列表由“主路 径”和1个以上「子路径」构成。 
“主路径”由1个以上播放项目构成。在图中的例中,可以由播放项目#1、#2、#3构成。 
“子路径”表示与主路径一起再现的一连的再现路径,按照播放列表中登记的顺序分配ID(子路径ID)。子路径ID用于识别子路径。在子路径中,有与主路径的再现同步再现的同步型、能够与主路径的再现非同步再现的非同步型,其类型记为子路径类型。辅播放项目由1个以上的辅播放项目信息构成。 
此外,“播放项目”包含流选择表。流选择表是表示播放项目及辅播放项目中被许可再现的基本流的流号码的信息。播放列表信息、播放项目信息,辅播放项目信息、流选择表的详细在后面的实施方式中说明。、 
“AV片段#1,#2,#3”是作为2D影像再现的AV流,同时也是作为3D影像再现时作为左视点再现AV流。 
“AV片段#4、#5、#6”是再现3D映像时作为右视点进行再现的AV流。 
2D播放列表的主路径如符号rf1、2、3所示那样参照存储有左视点AV流的AV片段#1、#2、#3。 
3D播放列表具有如符号rf4、rf5、rf6所示那样参照左视点AV流的包含有播放项目的主路径,并具有用于存储右视点的子路径,该子路径如符号rf7、8、9所示那样参照存储有右视点的AV片段#4、#5、#6。该子路径设定与主路径之间在时间轴上同步。通过该构造,在2D播放列表和3D播放列表中能够共有存储有左视点的AV片段,能够在3D播放列表中使左视点和右视点在时间轴上同步地相关联。 
本图的3D播放列表、2D播放列表都是播放项目信息#1~#3参照共同的AV片段即AV片段#1~#3,因此,在继续对这些3D播放列表、2D播放列表进行定义的播放列表信息时,通过共同的记述就足够了(参照符号df1、df2)。因此,对实现该3D播放列表的播放列表信息进行记述,在再现装置的显示类型为L·R显示类型时作为3D播放列表起作用,在再现装置的显示类型为L·L显示类型时作为2D播放列表起作用。本图的2D播放列表、3D播放列表通过记述有1个播放列表信息,对应于对其进行解释的再现装 置的显示类型,来解释为2D播放列表、3D播放列表,因此,能够减轻进行编辑的人员的工作。 
图21示出了在图20的3D播放列表中再增加了1个子路径之后的播放列表。相对于图20的播放列表只具有子路径ID=0的子路径,图21的播放列表中的第2个子路径通过子路径ID“=1”而被识别,因此,参照AV片段#7、#8、#9。通过设置2以上的子路径信息而进行定义的多个的右视点,是从右眼看到被摄体的角度不同的多个右视点,AV片段群准备了该角度的数量,按照角度分别设置子路径。 
在图21的例子中,AV片段#4、#5、#6和AV片段#7、#8、#9都存储有右视点,但是从右眼观看被摄体的角度不同。子路径ID为“0”的子路径如符号rf7、8、9所示那样参照AV片段#4、#5、#6,子路径ID为“1”的子路径如符号rf10、rf11、rf12所示那样参照AV片段#7、#8、#9。基于显示装置的画面的大小或使用者的喜好,来切换与存储有左视点的主路径同步进行再现的子路径,由此,利用对使用者而言舒适的视差图像来显示立体映像。 
能够实现该3D播放列表的播放列表信息,在再现装置的显示类型为L·R显示类型时作为3D播放列表起作用,在再现装置的显示类型为L·L显示类型时作为2D播放列表起作用。只要记述有图21的2D播放列表、3D播放列表中的1个播放列表信息,就能够与解释该播放列表信息的再现装置的显示类型相对应地解释为2D播放列表、3D播放列表,能够适当实现最佳的再现,因此能够减轻进行编辑的人员的工作。 
接着,说明混有2D播放项目和3D播放项目的播放列表。在该播放列表中,需要对2D播放项目和3D播放项目进行无缝连接。 
存储有3D映像的内容不限于整篇都是3D映像结构,也有时2D映像与3D映像混合存在。因此,需要对2D映像和3D映像无缝地进行再现。图22(a)是表示2D映像和3D映像混合存在的例子。再现区间#1是再现3D映像的区间,再现左视点视频流和右视点视频流这两者,交替地显示左眼图像和右眼图像。若将左视点视频流的帧速率设为每1秒N帧的帧速率,则右视点视频流的帧速率也是每1秒N帧的帧速率,交替地显示左视点视频流的帧和右视点视频流的帧,因此,3D映像整体的帧速率是每1秒N× 2帧的帧速率(N×2Hz)。另一方面,再现区间#2是再现2D映像的区间,由于只再现左视点视频流,因此帧速率为每1秒N帧的帧速率(NHz)。在图21(a)的例子中,再现区间#2是每1秒钟24帧的帧速率(24Hz)。此外,再现区间#1和再现区间#3是相同结构,帧速率为24×2Hz即48Hz。 
在此,在依次对再现区间#1、再现区间#2、再现区间#3进行再现时,再现区间中帧速率不同。若帧速率不同,则需要重新设定再现装置与电视机的HDMI连接,所以,产生起因于重新设定的延迟,而不能够保证无缝再现。如图21(b)的再现区间#5所示,在再现2D映像的区间,为了与其他3D映像再现区间(再现区间#4和再现区间#6)的帧速率相配合,考虑了将与左视点视频流相同的映像作为右视点视频流来存储的方法。在该情况下,再现区间#5以与3D映像的再现相同的帧速率被再现,所以,即使依次对再现区间#4、再现区间#5、再现区间#6进行再现,也不会产生因帧速率的奇幻引起的HDMI连接的重新设定的延迟。但是,在该结构中,再现区间#5中,虽然是2D映像,却要准备有左视点视频流和右视点视频流这两个视频流,导致数据量增加,并且数据制作繁琐。 
因此,如图23所示,在各再现区间中,准备识别再现方法的场即重复标志,在再现3D映像的区间中,准备用于再现3D映像的左视点视频流和右视点视频流,在再现2D映像的区间只准备用于再现2D映像的左视点视频流。再现方法有两种,即“一张一张地再现图片(以后称为通常再现)”和“每一张图片分别再现两次(以后称为重复再现)”。再现装置按照该场进行各再现区间的再现处理。通过设置成这样的结构,只要在再现3D映像的区间中,重复标志指示“通常再现”,在再现2D映像的区间中,重复标志指示“重复再现”,则由于再现3D映像的区间和再现2D映像的区间的帧速率相同,所以在再现区间切换时不会发生因HDMI连接的重新同步引起的延迟,能够无缝地再现。此外,只要在再现3D映像的区间重复标志指示“通常再现”,在再现2D映像的区间中重复标志指示“通常再现”,则由于再现3D映像的区间和再现2D映像的区间的帧速率相同,因此,在再现区间的切换时发生延迟而不能够进行无缝再现,但是,在以高帧速率进行再现而对电视机侧的处理施加了负载的情况下(例如电力量等),能够减轻2D映像的再现时的处理的负载。 
例如在图23的例子中,再现3D映像的再现区间#1和再现区间#3的重复标志指示“通常再现”,再现2D映像的再现区间#2的重复标志指示“重复再现”。在再现区间#1和再现区间#3中,准备有用于再现3D映像的左视点视频流和右视点视频流,而在再现区间#2中仅准备有用于再现2D映像的左视点视频流。再现装置,在再现区间#1和再现区间#3中如往常一样对左视点视频流的图像和右视点视频流的图像交替地进行再现表示,而在再现区间#2中,对左视点视频流的各图片分别再现显示2次。 
利用图24说明具体的3D播放列表的数据构造。3D播放列表的3D映像的再现区间即播放项目#1和播放项目#3,参照存储有左视点视频流的左视点AV流,并且与该播放项目同步进行再现的子播放项目#1和子播放项目#2参照存储有右视点视频流的右视点AV流。此外,2D映像的再现区间即播放项目#2仅参照存储有左视点视频流的左视点AV流。此外,设定成这些播放列表内的各播放项目的连接条件为无缝连接。在此,各播放项目中准备有该播放项目的再现区间的重复标志。在重复标志为“0”时表示“通常再现”,在重复标志为“1”时表示“重复再现”,再现装置参照各播放项目的重复标志进行再现处理。 
另外,在图24中,在播放项目中设置了重复标志这样的场,但是也可以构成为,不设置这样明示的场,则将“再现区间是否存储2D映像”设为再现方法的识别信息。例如,也可以设定成在没有与再现2D映像的播放项目同步地进行再现的子播放项目所参照的AV流时表示“重复再现”,或者设定成在与再现2D映像的播放项目同步地进行再现的子播放项目所参照的AV流是左视点AV流时表示“重复再现”,再或者设置成与再现2D映像的播放项目同步地进行再现的子播放项目不存在时表示“重复再现”。 
另外,也可以禁止在播放列表内混合存在有2D播放项目和3D播放项目。通过这样设置,能够容易地避免因2D映像和3D映像切换时的帧速率变更引起的延迟问题。 
图25是表示播放列表信息的数据构造的图,在本图中,如引出线mp1所示,播放列表信息包含有“主路径信息”、“子路径信息表”、“扩展数据”、“标记信息”。 
首先说明主路径信息。引出线mp1详细表示地示出了主路径信息的内 部结构。MainPath如箭头mp1所示那样根据多个PlayItem信息#1····#N被定义。PlayItem信息定义了构成MainPath的1个逻辑再现区间。PlayItem信息的结构通过引出线mp2详细地表示。如该引出线所示,PlayItem信息包括:表示再现区间的IN点及Out点所隶属的AV流文件的再现区间信息的文件名的“Clip_lnformation_file_name”、表示AV流的编码方式的“Clip_codec_identifier”、表示PlayItem是否构成为多角度的“is_multi_angle”、表示该PlayItem(当前PlayItem)与之前的PlayItem(previousPlayItem)的连接状态的“connection_condition”、唯一地表示该PlayItem的对象的STC_Sequence的“ref_to_STC_id[0]”、表示再现区间的始点的时间信息“ln_time”、表示再现区间的终点的时间信息“Out_time”、表示在该PlayItem中应给被屏蔽的使用操作者是哪个人的“UO_mask_table”、“STN_table”、“左视点/右视点识别信息”、“multi_clip_entry”、以及“重复标志”。 
接下来说明“STN_table”、“左视点/右视点识别信息”、“multi_clip_entry”。 
“STN_table(STreamNumber_table)”是对包含有包ID的流入口及流属性的组合分配逻辑流号码的表。STN_table中的流入口及流属性的组合的顺序表示对应的流的优选顺序。该STNtable用于2D再现,用于3D再现的STN_table另外存在。 
“左视点/右视点识别信息”是用于对左视点视频流、右视点视频流中哪个是基础视点视频流进行指定基础视点视频流指定信息,如果是0则表示左视点视频流是基础视点视频流,如果是1则表示右视点视频流是基础视点视频流。 
“connection_condition”表示与前方播放项目之间的连接类型。在播放项目的connection_condition为“1”时,表示播放项目所指示的AV流不能够保证与该播放项目的之前的播放项目所指示的AV流之间进行无缝连接。在播放项目的connection_condition为“5”或“6”时,表示播放项目所指示的AV流能够确保与该播放项目的之前的播放项目所指示的AV流之间的无缝连接。 
在connection_condition为“5”时,在播放项目之间STC的连续性可 以中途断开,也就是说,可以是在连接前播放项目的AV流末端的视频显示时刻之后,连接后播放项目的AV流开头的视频显示时刻开始时刻不连续。其中,在将连接前播放项目的AV流输入后述的***目标解码器的PID过滤器之后,接着将连接后播放项目的AV流输入***目标解码器的PID过滤器进行再现时,需要以使***目标解码器的解码不被破坏的方式制作AV流。此外,具有连接前播放项目的AV流的音频的末端帧与连接后播放项目的音频的开头帧之间在再现时间轴上不重叠等制约条件。 
此外,在connection_condition为“6”时,在结合了连接前播放项目的AV流和连接后播放项目的AV流时必须要能够以1个AV片段进行再现。也就是说,在连接前播放项目的AV流和连接后播放项目的AV流之间STC连续,并且ATC也连续。 
“Multi_clip_entries”是在播放项目中形成多角度区间时,用于确定哪个表示各个角度映像的AV流的信息。 
以上说明了主路径信息。接着,说明子路径信息表的详细情况。 
图26是表示子路径信息表的内部结构的图。引出线su1详细表示地示出了子路径信息的内部结构。如引出线su1所示,子路径信息表包含有多个子路径信息1、2、3…m。这些子路径信息是从1个等级的构造体派生出来的多个实例,其内部结构相同。引出线su2详细表示地示出了Subpath信息的共同的内部结构。如该引出线所示,各Subpath信息包括表示子路径的类型的SubPath_type、以及1个以上的子播放项目信息(…子播放项目信息#1~VOB#m…)。引出线su3详细表示地示出了SubPlayItem的内部结构。如该引出线所示,子播放项目信息包括“Clip_information_file_name”、“Clip_codec_identifier”、“ref_to_STC_id[0]”、“SubPlayItem_ln_time”、“SubPlayItem_Out_time”、“sync_PlayItem_id”、“sync_start_PTS_of_PlayItem”。接着说明SubPlayItem的内部结构。 
“Clip_information_file_name”是通过记述片段信息的文件名来唯一地指定与SubPlayItem对应的SubClip的信息。 
“Clip_codec_identifier”表示AV流文件的编码方式。 
“ref_to_STC_id[0]”是唯一地表示该SubPlayItem作为对象的STC_Sequence。 
“SubPlayItem_ln_time”是表示SubClip的再现时间轴上的、SubPlayItem的始点的信息。 
“SubPlayItem_Out_time”是表示SubClip的再现时间轴上的、SubPlayItem的终点的信息。 
“sync_PlayItem_id”是表示唯一地指定构成MainPath的PlayItem中的应该与本SubPlayItem同步的PlayItem的信息。SubPlayItem_ln_time存在于该sync_PlayItem_id所指定的PlayItem的再现时间轴上。 
“sync_start_PTS_of_PlayItem”以45KHz的时间精度来表示在sync_PlayItem_id所指定的PlayItem的再现时间轴上,SubPlayItem_ln_time所指定的SubPlayItem的始点存在于何处。 
图27是表示对左视点、右视点定义有什么样的再现区间。在本图中,以图17为基础进行作图,在该成为基础的图的第2段的时间轴上描绘PlayItem的In_Time及Out_Time。在第1段的时间轴上描绘SubPlayItem的In_Time及Out_Time。第3段至第4段与图17的第2段至第3段相同。左视点、右视点的1个图片在时间轴上位于相同时刻。以上说明了播放列表信息的数据构造 
以上说明了子路径信息。接着说明入口标记信息的详细情况。 
入口标记信息能够对播放项目所定义的再现区间内赋予,相对于播放项目定位在可能成为再现开始点的位置,在寻源再现中利用。例如,在电影标题中,通过将入口标记赋予给成为章节的开头的位置,能够实现章节再现。 
以上说明了入口标记信息。接着说明扩展数据的详细情况。 
扩展数据与2D播放列表之间不具有互换性,是3D播放列表特有的扩展部分,其中存储有STN_table_SS#1~#N。STN_table_SS是分别与多个播放项目信息的每个相对应地,对3D再现用的流入口及流属性的组合分配逻辑流号码的表。STN_table_SS中的流入口及流属性的组合的顺序表示所对应的流的优选顺序。通过对播放项目信息内的STN_table和扩展数据内的STN_table_SS进行组合,构成流选择表。 
接着,说明上述PlayItem信息的内部结构中的流选择表的详细情况。 
图28(a)示出了流选择表。流选择表具有多个流入口。该流入口如图 中的括号标记“I”所示那样,具有在STN_table内定义的流入口和在STN_table_SS内定义的流入口。 
在STN_table的流入口登记有在设定2D再现时能够再现的2D用音声/PG/IG。因此,在STN_table中,存在有2D视频流入口群、2D音频流入口群、2DPG流入口群、2DIG流入口群,在这些流群中能够记述频流、音频流、PG流、IG流的包识别符。 
在STN_table_SS的流入口登记有在设定立体视再现时能够再现的3D用音声/PG/IG。因此,在STN_table_SS中,存在有3D视频流入口群、3D音频流入口群、3DPG流入口群、3DIG流入口群、流组合信息,在这些流入口群中能够记述视频流、音频流、PG流、IG流的包识别符。 
该图(b)是表示流入口的共同结构的图。如该图所示,流选择表中的流入口包括“流选择号码”、“流路径信息”、“流识别信息”。 
流选择号码是从流选择表中所包含的基本流入口1的开头开始顺序增加的号码,用于对再现装置中的基本流进行识别。 
流路径信息是表示根据流识别信息所表示的流被多路复用为怎样的AV流的信息,例如若为“主路径”,则表示对应的播放项目的AV流,若为″子路径ID=1″,则表示在该子路径ID所示的子路径中,与该播放项目的再现区间对应的子播放项目的AV流。 
流识别信息为PID等的信息,表示被多路复用为参照的AV流文件的基本流。并且,在基本流入口,各基本流的属性信息也被同时记录。这里所谓的属性信息是指,表示各基本流的性质的信息,例如在音频,显示图像,交互图像的情况下,包括言语属性等。 
在STN_table_SS中,对于左视点视频流流的基本流入口与右视点视频流流的基本流入口而言,例如帧速率及分辨率、视频格式等为相同值。在基本流入口,存在能够区分左视点视频流流、右视点视频流流的标记。 
上面是对流选择表的说明。接着,对左视点/右视点识别信息进行详细说明。 
到此为止的记载是以将左视点用作为关键、2D显示时用左视点表示为前提进行的说明,但也可以将右视点作为关键。根据判断包含在播放列表的左视点/右视点的哪一个是关键、并在2D的情况下被显示的信息,将某 一个作为基本视点视频流流。该判别的信息为左视点/右视点识别信息。 
一般,对摄像室(studio)而言,考虑将左视点影像作为2D电影来制作,可能考虑在其中将左视点作为2D电影制作更好。因为存在那样的可能性,因此能够按照每个播放项目信息,对表示将左视点以及右视点之中哪一个设定为基本视点的左视点/右视点识别信息进行设定。 
图29为在图20的3D播放列表中,写入左视点/右视点识别信息的图。根据该信息,在右视点视频流流被作为基本视点视频流被指定的情况下,例如即使通过子路径信息,指定为右视点,首先将该右视点视频流流投入影像解码,得到非压缩的图像数据。然后,基于通过对该右视点视频流流进行解码得到的非压缩的图像数据进行运动补偿。这样,对于能够将哪一个作为基本视点这样的选择,具有灵活性。 
各流与左视点/右视点的识别信息能够在向显示装置的输出中使用,显示装置侧为了分别区分2个基本流而使用。对于使用闸门方式的眼镜的情况等,由于若不了解播放项目参照的主电影是左视点的还是右视点的,则不能同步眼镜与显示装置的显示,因此在显示左视点时,使闸门方式眼镜的左眼侧的光透过,在显示右视点时使闸门方式眼镜的右眼侧的光透过,来向眼镜发送切换信号。 
并且,即使是在双凸透镜状的显示装置的画面中组装有棱镜的裸眼立体视方式,由于需要区别左视点与右视点,因此使用该信息进行区别。 
上面为对左视点/右视点识别信息进行的说明。该左视点/右视点识别信息是以能够将视差图像之中左视点或右视点的哪一个作为平面视电影再现作为前提。但是根据视差图像的内容,存在对于这样的平面视图像而无法使用的情况。 
下面,对于不适用于平面视图像的利用的左视点图像、右视点图像进行说明。 
图30表示分别由左视点图像、右视点图像与传感器图像构成的2个播放列表信息。图中右下表示意图达到电影中的恐龙一直追赶到用户眼前的那样的画面效果的立体视图像。该立体视图像如上所述,由L图像,R图像构成。构成跳出效果较大的立体视图像的L图像、R图像成为,将跳出表现图像中的对象(本图为恐龙)从侧面显示。这些之中,在将左视点视 频流流作为平面视用的影像基本流使用的情况下,横长的物体看起来更横,变得奇怪。因此在被设定为2D再现时,设定为将指定表示中心图像的影像基本流的播放列表信息作为客户播放列表选择。 
本图中,00005.mpls将跳出程度大的左视点视频流流以及右视点视频流流作为主路径信息以及子路径信息指定。 
00003.mpls通过主路径描定中心图像的影像基本流。然后本图左上的电影对象按照再现装置中的3D再现的能力(3D-Capability),记载选择00005.mpls,00003.mpls之中哪一个来再现(图中的if语句)。 
上面是读记录介质的实施行为以及记录方法的实施行为进行的说明。接着,对再现装置进行详细说明。 
图31表示2D/3D再现装置的构成。2D/3D再现装置200由BD驱动器1,读缓冲器2a,读缓冲器2b,开关3,***目标解码器4,平面存储器单元5a,平面加法部5b,HDM1发送接收部6,再现控制部7,管理信息存储器9,寄存器单元10,程序执行部11,程序存储器12,HDMV模块13,BDJ平台14,中间件15,模式管理模块16,用户事件处理部17,本地存储器18,非易失性存储器19构成。 
BD-ROM驱动器1,与2D再现装置相同地,根据来自再现控制部7的要求读出来自原始BD-ROM盘的数据,从BD-ROM盘读出的AV流文件向读缓冲器2a或读缓冲器2b传送。 
在再现3D电影时,从再现控制部7送出指示以区段为单位交互地读出2D/左视点AV流与右视点AV流为主旨的读出要求。BD-ROM驱动器1将构成2D/左视点AV流区段读出到读缓存器2a,将构成右视点AV流区段读出到读缓存器2b。由于在再现3D电影时,需要同时读入2D/左视点AV流与右视点AV流两者,因此要求有2D再现装置的BD-ROM驱动器以上的速度性能。 
读缓冲器2a为由保存BD-ROM驱动器1读入的2D/左视点AV流的数据的双通道存储器等构成的缓冲器。 
读缓冲器2b为由保存BD-ROM驱动器1读入的右视点AV流的数据双通道存储器等构成的缓冲器。 
开关3为将相对于读缓冲器的数据输入源切换为BD-ROM驱动器1或 本地存储器18的某一个的开关。 
***目标解码器4进行基本流的解码处理,该基本流的解码处理对被读出到读缓冲器2a的源包与被读出到读缓冲器2b的源包进行多重分离处理。 
平面存储单元5a由多个平面存储器构成。在平面存储器中,具有诸如左视点影像平面,右视点影像平面,辅视频平面,交互图像平面(1G平面),表现图像平面(PG平面)。 
平面加法部5b瞬间重叠左视点影像平面、右视点影像平面,辅视频平面、IG平面,PG平面,GFX平面,并显示到TV等的画面中。在该显示中平面加法部5b使用3D中间数据在左眼用与右眼用交互地剪裁辅视频平面、PG平面,并与左视点影像平面或右视点影像平面合成。合成后的电影被传送到GFX平面的重叠处理。 
平面加法部5b使用由API指定的偏移(offset)信息对左眼与右眼用交互地剪裁IG平面中的图像,并将重叠左视点影像平面或右视点影像平面与辅视频平面与PG平面与IG平面的图像输出到电视。 
向电视等输出时,进行与3D的方式匹配地输出。在需要利用闸门眼镜来交互地再现左眼图·右眼图的情况下原样输出,例如向双凸透镜状的电视输出的情况下,准备暂时性的缓冲器,将先被传送的左眼图存储到暂时缓冲器中,在右眼图被传送后同时输出。 
HDM1发送接收部6包含例如以HDM1规格(HDM1:High Definition Multimedialnterface)为基准的接口,以再现装置与HDM1连接的装置(本例中为电视300)与HDM1规格为基准,进行发送接收,经由HDMI发送接收部6对保存在影像中的图片数据与根据音频解码器9译码的非压缩的音频数据发送到电视300。电视300保持有例如与立体视显示是否对应相关的信息、与可平面显示的分辨率相关的信息、与可立体显示的分辨率相关的信息,若有来自再现装置经由HDMI发送接收部6的要求,则将电视300所要求的需要的信息(例如与立体视显示是否对应相关的信息,与可平面显示的分辨率相关的信息,与可立体显示的分辨率相关的信息)返回给再现装置。如此通过经由HDM1发送接收部6,能够从电视300取得电视300是否与立体视显示对应的信息。 
若3D播放列表的再现从程序执行部11等得到命令,则再现控制部7确定3D播放列表的中成为再现对象的播放项目的2D/左视点AV流,并确定于该播放项目同步地被再现的3D用的子路径的子播放项目的右视点AV流。之后,解释对应的片信息文件的入口映射,基于表示先从哪一个区段开始配置区段的区段开始型,对BD-ROM驱动器1提出要求,以使从再现开始地点交互地读出2D/左视点AV流的区段与右视点AV流的区段。在再现开始时,将最初的区段读到读缓冲器2a或读缓冲器2b后,从读缓冲器2a与读缓冲器2b向***目标解码器4开始传送。并且,在再现3D播放列表的情况下,再现控制部7将包换在与3D/左视点AV流对应的片信息文件中的3D中间数据通知给平面加法部5b。 
如上所述那样的控制中,再现控制部7通过执行用于文件平面的***调用,能够将这些文件读出到存储器。 
所谓文件平面是指,通过文件***在***调用时被赋予的文件名来进行目录检索,若文件存在则确保FCB(File Control Block),并返回文件控制号码的处理。FCB通过目的文件的目录入口的内容被复制到存储器上而生成。之后,再现控制部7根据向BD-ROM驱动器1提示该文件控制,从而能够使目的文件从BD-ROM向存储器传送。 
再现引擎7a执行AV再现功能。所谓AV再现功能是指从DVD再现装置、CD再现装置沿袭的功能群,即为如下的处理:再现开始、再现停止、暂时停止、暂时停止的解除,静止画功能的解除,以确定值指定再现速度的快放,以确定值指定再现速度倒带,声音切换,辅视频用的图片数据的切换,角切换等。 
再现控制引擎7b为作为HDMV模式的动作主体的命令翻译器,按照来自作为BD-J模式的动作主体的Java平台的系数呼出,执行播放列表的再现功能。所谓播放列表再现功能是指根据构成客户播放列表的客户播放列表信息,执行客户片信息,上述的AV再现功能中的再现开始及再现停止。 
管理信息存储器9是指用于保存客户播放列表信息及客户片信息的存储器。所谓客户播放列表信息是指来自BD-ROM或可移动介质驱动器,内置介质驱动器能够访问的多个播放列表信息之中的现在处理对象的信息。客户片信息是指成为来自BD-ROM或内置介质驱动器,可移动介质驱动器 的能够访问的多个片信息中的现在处理对象的信息。 
再现状态/设定寄存器(PlayerStatus/SettingRegister)单元10为包含以下寄存器的合集:储存播放列表的再现状态的再现状态寄存器,保存表示再现装置中的复杂性的复杂性信息的再现设定寄存器,能够保存内容使用的任意的信息的通用寄存器。所谓播放列表的再现状态是指表现:利用播放列表中记载的各种AV数据信息的中的哪个AV数据,再现播放列表的哪个位置(时刻)等的状态。 
在播放列表的再现状态变化时,再现控制引擎14对于寄存器单元10保存其内容。并且,根据来自作为HDMV模式的动作主体的命令翻译器或作为BD-J模式的动作主体的Java平台所执行的程序的指示,能够保存程序制定的值,将保存的值传递到应用。 
程序执行部11为执行保存在BD程序文件中的程序的处理器。根据所保存的程序进行动作,进行接下来的控制。(1)对再现控制部7命令播放列表再现。(2)对***目标解码器传送用于菜单或游戏的图像的PNG·JPEG并显示画面。通过基于制作工序的BD-J应用的程序工序决定按照这些制作的程序能够自由进行怎样的控制。 
程序存储器存有客户动的脚本,提供作为HDMV模式的动作主体的HDMV模块,作为BD-J模式的动作主体的Java平台的处理的存储器。所谓客户动的脚本是指,成为记录在BD-ROM中的Index.bdmv,BD-J对象,电影对象中的现在执行对象。并且动的脚本寄存器12包含堆式存储器。 
堆式存储器是配置有***应用的字节码,BD-J应用的字节码,***应用利用的***参数,BD-J应用利用的应用参数的区域 
HDMV模块13是成为HDMV模式的动作主体的DVD假想播放器,成为HDMV模式的执行主体。本模块,具备命令翻译器,通过解读并执行构成电影目标的导航命令来执行HDMV模式的控制。导航命令以类似DVD-Video的句法被记述,因此通过执行该导航命令,能够实现DVD-Video喜好的再现控制。 
BD-J平台14为作为BD-J模式的动作主体的Java平台,对Java2Micro_Edition(J2ME)Personal sis Profile(PBP 1.0),Globally Executable MHPspecification(GEM1.0.2)for package mediatargets进行满(full)实装, 由加载器,字节码翻译器,应用管理器构成。 
加载器为***应用的一种,从JAR存档文件中存在的类(class)文件读出字节码,通过保存在堆式存储器31中,进行BD-J应用的加载。 
字节码翻译器为所谓的Java假想机器,将构成保存在堆式存储器中的BD-J应用的字节码、构成***应用的字节码变换为本地代码而在MPU中执行。 
应用管理器为***应用的一种,基于BD-J对象内的应用管理表,执行启动BD-J应用、结束BD-J应用等BD-J应用的应用信令。以上对BD-J平台部的内部构成的说明结束。 
中间件15,是用于结构软件的操作***,由核心、设备驱动组成。核心,响应于于来自BDJ的应用程序界面(API)的呼叫,向BD-J应用提供再现装置特有的功能。此外,实现经由***信号而启动处理器部等的硬件控制。 
模式管理组件16保持从BD-ROM或者是内置介质驱动器、移动介质驱动器读出的Index.bdmv,进行模式管理以及分叉控制。所谓的模式管理组件的模式管理是将动态的台词让BD-J平台22、HDMV组件的任意一个执行的组件的分配。 
用户事件处理器17,响应于经由遥控器的用户的操作,将处理的执行委托给程序执行部16或是再现控制部7。例如,在遥控器上按下按钮的情况下,向程序执行部16委托执行该按钮所包括的命令。例如,当遥控器的快进、倒退按钮被按下的情况下,向再现控制部7发出执行将正在再现的播放列表的AV流进行快进·倒退处理的的命令。 
本地存储器18具有用于进入硬盘的内置介质驱动器、用于进入半导体存储器卡的移动介质驱动器,用于保存下载来的追加内容或是应用所使用的数据等。追加内容的保存区域按照每个BD-ROM分开,此外,能够用于保持应用的的保持的区域按照每个应用进行分开。 
非易失性存储器19为可写入存储器等的记录介质,即使没有提供电源仍然能够保持记录内容,如闪存,FeRAM等。其用于寄存器组10中的记忆内容的备份。 
接下来,对***目标解码器4以及平面存储器组5a的内部构成进行说 明。图32表示***目标解码器4以及平面存储器组5a的内部构造图。如本图所示,***目标解码器4以及平面存储器组5a,由ATC计数器21、源解包器22、PID过滤器23、STC计数器24、ATC计数器25、源解包器26、PID过滤器27、主视频解码器31、左视点视频平面32、右视点视频平面33、辅视频解码器34、辅视频平面35、PG解码器36、PG平面37、IG解码器38、IG平面39、主音频解码器40、辅音频解码器41、混合器42、绘制引擎43、GFX平面44构成。 
ATC计数器21生成Arrival Time Clock(ATC),调整再现装置内的动作定时。 
源去包器22在源数据包存储在读缓冲器2a中的情况下,在ATC计数器生成的ATC的值与源数据包的ATS值相同的瞬间,根据AV流文件的记录速率,仅将该TS数据包传输到PID过滤器。在该传输中,对应于各源数据包的ATS,调整至解码器的输入时刻。 
PID过滤器23根据PID,将从源去包器22输出的TS数据包中TS数据包的PID与再现所需的PID一致的TS数据包传输到主视频解码器31、次视频解码器34、IG解码器38、PG解码器36、主音频解码器40、次音频解码器41。 
STC计数器24生成System Time Clock(STC),调整各解码器的动作定时。 
ATC计数器25生成Arrival Time Clock(ATC),调整再现装置内的动作定时。 
源去包器26在源数据包存储在读缓冲器2b中的情况下,在ATC计数器生成的ATC的值与源数据包的ATS值相同的瞬间,根据AV流文件的***速率,仅将该TS数据包传输到PID过滤器。在该传输中,对应于各源数据包的ATS,调整至解码器的输入时刻。 
PID过滤器27根据PID,将从源去包器26输出的TS数据包中TS数据包的PID与当前播放项目的流选择表格中记载的PID一致的TS数据包传输到主视频解码器。 
主视频解码器31解码左视点视频流,将作为解码结果的非压缩视频帧写入字节代码编译器32。 
左视点视频平面32例如是可以1920×2160(1280×1440)的分辨率存储图片数据的平面存储器。 
右视点视频平面33例如是可以1920×2160(1280×1440)的分辨率存储图片数据的平面存储器。 
次视频解码器34具有与主视频解码器一样的构成,执行输入的次视频流的解码,以显示时刻(PTS)的定时将图片写出到次视频平面。 
次视频平面35输出由***目标解码器4解码次视频流的次视频用图片数据用数据。 
PG解码器36从由源去包器输入的多个TS数据包中抽取介绍图形流并解码,以显示时刻(PTS)的定时将非压缩的图形数据写出到PG平面。 
PG平面37中存储通过解码介绍图形流得到的非压缩的图形对象。 
IG解码器38从由源打包器输入的多个TS数据包中抽取交互图形流并解码,以显示时刻(PTS)的定时将非压缩的图形对象写出到IG平面。 
IG平面39中存储通过解码交互图形流得到的图形。 
主音频解码器40解码主音频流。 
次音频解码器41解码次音频流。 
混频器42合成主音频解码器40的解码结果与次音频解码器41的解码结果。 
打底引擎43解码JPEG、PNG等BD-HJ应用程序在菜单描绘中利用的图形数据。 
GFX平面44是解码JPEG、PNG等图形数据后写入的平面存储器。 
下面说明主视频解码器31的内部构成。主视频解码器31由TB51、MB52、EB53、TB54、MB55、EB56、视频解码器57、缓冲器开关58、DPB59、图片开关60构成。 
Transport Buffer(TB)51是当从PID过滤器23输出包含左视点视频流的TS数据包时、以TS数据包原样暂时存储的缓冲器。
Multiplexed Buffer(MB)52是在从TB向EB输出视频流时、用于暂时存储PES数据包的缓冲器。当从TB向MB传输数据时,去除TS数据包的TS头。 
Elementaly Buffer(EB)53是存储处于编码状态的视频访问单元的缓冲 器。当从MB向EB传输数据时,去除PES头。 
Transport Buffer(TB)54是当从PID过滤器输出包含右视点视频流的TS数据包时、以TS数据包原样暂时存储的缓冲器。
Multiplexed Buffer(MB)55是在从TB向EB输出视频流时、用于暂时存储PES数据包的缓冲器。当从TB向MB传输数据时,去除TS数据包的TS头。 
Elementaly Buffer(EB)56是存储处于编码状态的视频访问单元的缓冲器。当从MB向EB传输数据时,去除PES头。 
视频解码器57通过以规定的解码时刻(DTS)解码视频基本流的各个视频访问单元,制作帧/字段图像。由于多路复用于AV流文件的视频流的压缩编码形式中有MPEG2、MPEG4AVC、VC1等,所以对应于流的属性,切换视频解码器57的解码方法。在解码构成基础视点视频流的图片数据时,视频解码器57利用未来方向或过去方向中存在的图片数据,作为参照图片,进行动作补偿。之后,在解码构成从属视点视频流的各个图片数据中,视频解码器57利用构成基础视点视频流的图片数据作为参照图片,进行动作补偿。若如此解码图片数据,则视频解码器57将解码后的帧/字段图像传输到DPB59,在显示时刻(PTS)的定时将对应的帧/字段图像传输到图片开关。 
缓冲器开关58使用视频解码器57解码视频访问单元时取得的解码开关信息,决定从EB53、EB56哪个中抽取下一访问单元,以分配给视频访问单元的解码时刻(DTS)的定时,将存储在EB53、EB56中的图片传输到视频解码器57。因为左视点视频流与右视点视频流的DTS在时间轴上以图片单位交互到来地进行设定,所以例如在忽视DTS向前倒退地解码的情况下,期望以图片单位将视频访问单元传输到视频解码器57。 
Decoded Picture Buffer(DPB)59是暂时保持解码的帧/字段图像的缓冲器。视频解码器57用于当解码图片间预测编码的P图片或B图片等视频访问单元时,参照已解码的图片。 
图片开关60在将从视频解码器57传输的已解码的帧/字段图像写入视频平面的情况下,将其写入对象切换为左视点视频平面、右视点视频平面。在左视点流的情况下,将非压缩的图片数据瞬时写出到左视点视频平面,在右视点流的情况下,将非压缩的图片数据瞬时写出到右视点视频平面, 
图33是表示平面加法部的内部构成的图。由根据3D元数据剪切存储在平面中的非压缩图片数据、图形数据的剪切部61a、b、c、根据程序API剪切存储在平面中的非压缩图形数据的部61d、以左视点视频平面与右视点视频平面切换输出内容的开关62、执行平面彼此的合成的加法部63、64、65、66构成。 
平面存储器组5a中有左视点视频平面、右视频视频平面、次视频平面、IG平面、PG平面、GFX平面,它们按左视点视频平面、右视点视频平面、次视频平面、IG平面、PG平面、GFX平面的顺序排列。从***目标解码器4以PTS的定时向左视点视频平面与右视点视频平面写出影像数据。 
开关62根据PSR22中设定的值及再现中的播放项目的重复标志,将路径切换为左视点视频平面、右视点视频平面之一,选择切换路径侧的平面,传输到与次视频平面、IG平面、PG平面的重叠处理。 
这些平面存储器可分别通过以左视点、右视点存储各不相同的内容来实现立体观察。但是,即便左视点中的存储内容与右视点中的存储内容相同,只要使平面存储器中的象素的坐标以左视点、右视点分别变化,则也可实现虚拟的立体观察。在上述平面存储器中,PG平面通过使平面存储器中的象素的坐标变化,实现立体观察。下面,说明PG平面中的立体观察的实现方式。 
图34是表示PG平面的合成方式的图。 
用图34的PG平面的实例来说明平面合成的方式。平面加法部5b从3D元数据内存在的偏移入口中当前再现的介绍图形之PID所对应的偏移入口中,取得对应于当前显示时刻的偏移值。之后,平面加法部5b在重叠的影像平面是左视点视频平面的情况下,将存储在PG平面中的图像数据的坐标向X轴的正方向错位+偏移值。之后,在剪切PG平面以不溢出到左视点视频平面之后,供与其他平面的合成(参照图34的上段)。 
平面加法部5b在重叠的影像平面是右视点视频平面的情况下,将PG平面向X轴的负方向错位偏移值,在剪切PG平面以不溢出到左视点视频平面之后重叠(参照图34的下段)。IG平面、次视频平面也同样进行处理。 
图35是模式表示在使用偏移值剪切重叠后如何显示给用户的图。若使用偏移值错位平面后剪切,则可对左眼与右眼用作出视差图像,所以可对 平面图象加上深度。若存在这种深度,则用户可看到平面图片从显示装置的画面上浮的表现。 
以上是对平面合成的说明。接着说明寄存器组10的内部构成及再现控制引擎7b的细节。 
图36是表示寄存器组10的内部构成及再现控制引擎7b的内部构成的图。 
该图的左侧示出寄存器组10的内部构成。右侧示出再现控制引擎7b的内部构成。 
存储在PSR中的这些存储值由电影对象及BD-J应用程序适当参照,或受到基于电影对象及BD-J应用程序的更新。这样,PSR的存储值是由电影对象及BD-J应用程序参照的参数,所以也称为***参数。 
首先,说明PSR中有代表性的PSR。 
PSR1是音频流用的流号码寄存器,存储当前的音频流号码。 
PSR2是PG流用的流号码寄存器,存储当前的PG流号码。 
PSR4通过设定为1-100的值,表示当前的标题号码。 
PSR5通过设定为1-999的值,表示当前的章节号码,通过设定为0xFFFF,表示再现装置中章节号码无效。 
PSR6通过设定为0-999的值,表示当前播放列表的号码。 
PSR7通过设定为0-255的值,表示当前播放项目的号码。 
PSR8通过设定为0-0xFFFFFFFF的值,使用45KHz的时间精度来表示当前的再现时刻(当前PTM)。以上是对PSR的说明。 
PSR10是IG流用的流号码寄存器,存储当前的IG流号码。 
PSR21表示用户是否打算执行立体观察再现。对PSR21的值的设定通过BD程序文件的导航指令或API、或通过播放器的OSD来进行。另外,在遥控器500中设置‘3D/2D切换按钮’,在3D播放列表的再现中等任意定时从用户事件处理部17通知该按钮按下的情况下,将PSR21的值交互再设定为表示立体观察再现的值与表示2D再现的值。通过如此构成,可取入用户的嗜好。 
PSR22表示显示种类值。 
PSR23是“Display Capability for 3D”的设定。其表示作为再现装置连 接对方的显示装置中是否存在执行立体观察再现的能力。 
PSR24是“Player Capability for 3D”的设定。其表示再现装置中是否存在执行立体观察再现的能力。PSR24中的Player Capability for 3D意味着涉及再现装置的3D再现的全部能力,所以有时简单表述为“3D-Capability”。 
另一方面,在再现控制引擎7b的内部具备过程执行部8,参照寄存器组10中的PSR4、PSR6、PSR21、PSR23、PSR24与管理信息存储器9中的当前播放列表信息的流选择表格,唯一确定当前播放的显示种类。 
另外,过程执行部在3D播放列表的再现中变更PSR21的值的情况下,利用图37所示的处理步骤,再设定PSR22的显示种类值。具体地,PSR24的“Player Capability for 3D”的值为1、即再现装置具有立体观察再现能力(步骤S111:是),PSR21的显示种类用户设定是表示‘立体观察再现’的值(步骤S112:是),并且PSR23的“Display Capability for 3D”的值为1、即作为再现装置连接对方的显示装置中存在执行立体观察再现的能力(1113:是)的情况下,将PSR22设定为‘L·R显示种类’(步骤S114)。另一方面,在PSR21、PSR23、PSR24设定为上述以外的值的情况下,将PSR22设定为‘L·L显示种类’(步骤S115)。 
以上是对寄存器组10的说明。 
另外,根据本实施方式的再现装置200由于是3D/2D再现装置,所以可再现3D影像,但2D再现装置仅参照记载了再现2D影像的路径的2D播放列表来再现2D影像。 
下面说明2D再现装置中再现2D播放列表的方式。 
图38表示索引文件(Index.bdmv)与BD程序文件(AAA.PRG)的关系。在存储3D影像的BD-ROM中,记录记载了再现2D影像的路径的2D播放列表与记载了再现3D影像的路径的3D播放列表。调查由用户选择标题、执行的BD程序文件在程序中,再现装置是否对应于影像再现,在对应的情况下,用户是否选择3D影像再现,切换再现的播放列表。 
图39表示BD程序文件的程序中2D播放列表与3D播放列表的选择流程。 
在S1中,检查PSR24的值,在值为0的情况下,由于该再现装置是2D再现装置,所以再现2D播放列表,在值为0的情况下,前进到S2。 
在S2中,显示菜单画面,询问用户希望再现2D影像还是希望再现3D影像。用户利用遥控器等的选择结果,在希望再现2D影像的情况下,再现2D播放列表,在希望再现3D影像的情况下,前进到S3。 
在S3中,检查显示器是否对应于3D影像的再现。例如,由HDMI进行加线,再现装置询问显示器是否对应于3D影像再现。在不对应于3D影像再现的情况下,再现2D播放列表,但也可以菜单画面等提示用户未整备电视侧的准备。在对应于3D影像再现的情况下,再现3D播放列表。 
2D播放列表与3D播放列表的文件名的前缀号码(若为XXX.mpls,则为XXX)也可连号。由此,对应于2D播放列表的3D播放列表的特定变容易。以上是对2D播放列表与3D播放列表的选择的说明。 
<立体观察再现与2D再现的无缝切换> 
要求在立体观察再现中通过用户的选择将3D影像以任意的定时切换为2D再现或从2D再现无缝切换到立体观察再现。例如可假设因眼睛的疲劳感而将立体观察再现切换为2D再现等的方式。 
作为切换3D影像再现与2D影像再现的第1方法,考虑如下方法,即从存储3D影像再现路径的3D播放列表的再现切换到存储2D影像再现路径的2D播放列表的再现。在该方法中,例如在以3D播放列表再现3D影像中,经由BD程序文件显示的菜单等,用户执行从3D影像的再现向2D影像的再现切换的命令。与之对应,BD程序文件首先使3D播放列表的再现中断,特定并选择对应于该3D播放列表的2D播放列表,接着特定对应于3D播放列表中断时刻的2D播放列表再现开始地点,执行飞入再现,从3D影像的再现执行2D影像的再现迁移。此时,执行播放列表的再现的中断处理,必需BD程序文件的执行处理,所以上述方法存在不能执行无缝切换的问题。 
并且,在再现3D影像中切换到2D影像的再现的情况下,由于从交互输出左视点视频流与右视点视频流的图片的处理迁移到仅输出左视点视频流的图片的处理,所以从再现装置输出的帧速率从48Hz变化为24Hz。结果,再现装置与电视之间必需HDMI连接的再同步,切换时会发生延迟。必需不发生帧速率的切换的方式。 
下面,说明无缝切换3D影像的立体观察再现与2D再现的方法。 
因此,如图40所示,在参照由3D播放列表再现3D影像用的左视点视频流与右视点视频流的情况下,也根据PSR22的设定,变更输出到电视的影像。此时,在‘L·R显示种类’中,交互以48Hz输出24Hz的左视点视频流与24Hz右视点视频流双方的图片。在‘L·L显示种类’中,通过仅重复再现作为基础视点流的左视点视频流,即以48Hz将1个图片输出2次,使显示种类切换前后的帧速率一致。 
PSR22的值伴随PSR21的显示种类用户设定通过BD程序文件的导航指令或PAI、或通过播放器的OSD或遥控器500的按钮操作变更而变更,所以可在再现中状态变更。在图40所示的实例中,由于在基于3D播放列表的再现中变更输出状态,所以在显示种类为‘L·R显示种类’的t1之前的期间,在电视中显示3D影像,在t1-t2的期间,将显示种类变更为‘L·L显示种类’,据此在电视中显示2D影像。再在t2之后,显示种类再次变更为‘L·R显示种类’,在电视中显示3D影像。但是,由于通过全部期间后向电视的输出速率为48Hz,所以在再现装置与电视之间不发生HDMI连接的再同步,无缝切换3D影像的立体观察再现与2D再现。 
通过如此构成,当执行从3D影像向2D影像的再现切换时,可不执行播放列表的切换地,在3D播放列表再现中用户动态执行从3D影像向2D影像的再现切换。另外,通过以重复再现的处理执行2D影像的再现,不发生3D影像的再现与帧速率的切,所以可不延迟地无缝切换。 
图40所示的3D影像的立体观察再现与2D再现的无缝切换可通过平面加法部5b的动作来实现。此时,视频解码器以DTS的定时交互解码如通常那样由3D播放列表参照的左视点视频流的图片与右视点视频流的图片,分别在PTS的定时存储在对应的平面存储器中。 
另一方面,平面加法部5b中,开关62按图41所示的步骤,切换取得图片数据的平面存储器。图41是表示开关62的切换控制的流程图。开关62在PSR22中的显示种类的值表示L·R显示种类的情况下(步骤S101:是),将连接路径切换为当前视点的平面存储器侧(步骤S102)。在步骤S101中PSR22的显示种类值表示L·L显示种类的情况下(步骤S101:否),开关62将连接路径切换到左视点平面32侧(步骤S103)。 
在开关62切换之后,从平面存储器组5a的各平面存储器中读出存储 数据,传送到重叠处理。之后,变更当前视点(步骤S104),从步骤S101重复处理。平面加法部5b以48Hz重复执行该步骤S101-步骤S105的一连串处理。另外,当前视点在视频流再现开始时是左视点,每当执行步骤S105,则交互变更为左视点与右视点。 
通过如此切换开关62,在‘L·R显示种类’中,3D影像以48Hz的帧速率输出,在‘L·L显示种类’中,2D影像以48Hz的帧速率输出。 
图40所示的3D影像的立体观察再现与2D再现的无缝切换也可通过不改变平面加法部5b中的处理而改变主视频解码器31的处理来实现。图42是表示实现3D影像再现与2D影像再现的无缝切换的主视频解码器31的构成图。 
主视频解码器31从再现控制部7接受设定为PSR22的显示种类的通知。在显示种类是在L·R显示种类的情况下,图片开关60将从解码器57传输的已解码的左视点视频流的图片及右视点视频流的图片分别以PTS的定时输出到对应的视频平面。在显示种类是L·L显示种类的情况下,图片开关60将从解码器57传输的已解码的左视点视频流的图片以PTS的定时输出到左视点视频平面的同时,以该PTS+3D显示延迟的定时将相同的已解码的左视点视频流的图片输出到右视点视频平面。 
通过以上构成,实现3D影像的立体观察再现与2D再现的无缝切换。 
如上所述,根据本实施方式,在再现装置的显示种类变为L·R显示种类的情况下,交互输出由左视点视频流得到的图片数据与由右视点视频流得到的图片数据,但在再现装置的显示种类变为L·L显示种类的情况下,将由左视点视频流得到的图片数据对1个图片重复2次输出。由此,L·R显示种类下的3D影像与L·L显示种类下的2D影像的帧速率一致。因此,当3D影像与2D影像切换时不产生HDMI连接的再同步,可无缝再现。 
在本实施方式中,说明2D再现装置将左眼影像作为2D影像再现的构成,但不用说,2D再现装置将右眼影像作为2D影像再现的构成也可得到同样的效果。 
本发明说明为用于存储3D影像的方法,但也可用于存储高帧速率的影像。在高帧速率影像中,准备抽取并存储奇数帧的奇数帧影像与抽取并存储偶数帧的偶数帧影像,将奇数帧影像作为2D/左眼影像,将偶数帧影像作 为右眼影像,若以本实施方式中说明的数据构造记录,当存储3D影像时,得到相同的效果。即,在本实施方式中存储高帧速率影像的BD-ROM可由2D再现装置再现奇数帧影像,可由2D/3D再现装置再现奇数帧影像或高帧速率影像,所以可确保互换再现。 
<第1实施方式的变形例1> 
如图43所示,也可构成为将PSR22所示的显示种类的种类设为‘L·R显示种类’、‘L·L显示种类’及‘2D通常显示种类’三种。这里,‘L·R显示种类’、‘L·L显示种类’是与图40中所示的‘L·R显示种类’、‘L·L显示种类’一样的显示种类,‘2D通常显示种类’是仅一个个地再现左视点视频流的图片数据的显示种类。 
根据如此构成,与帧速率为48Hz的‘L·R显示种类’或‘L·L显示种类’的区间相比,在显示种类为‘2D通常显示种类’的区间,帧速率低至24Hz。因此,其交界必需HDMI连接的帧速率的切换,产生延迟,不能无缝切换。但是,这种构成在以高帧速率再现时对电视侧的处理施加负荷的情况下(例如电量等),具有可减轻2D影像再现时的处理负荷的优点。 
如图44所示,PSR22中设定的显示种类不仅适用于再现存储左视点视频流与右视点视频流的3D影像的再现区间,也可适用于再现仅存储左视点视频流的2D影像的再现区间。显示种类中存在上述‘L·R显示种类’、‘L·L显示种类’及‘2D通常显示种类’,但再现仅存储左视点视频流的2D影像的再现2中不适用‘L·R显示种类’的状态。2D/3D再现装置根据显示种类进行再现处理。各再现区间以播放项目等区分,设定成各个播放项目由连接条件无缝连接。通过如此构成,即便3D播放列表中混合存在再现3D影像的再现区间与再现2D影像的再现区间,用户也可自由地切换3D影像与2D影像的再现。 
在将显示种类设定为‘L·R显示种类’的状态下,在迁移到再现仅存储左视点视频流的2D影像的再现区间的情况下,PSR22的设定变更为‘L·L显示种类’。通过如此构成,可以再现3D影像时的帧速率原样再现2D影像,所以可不切换帧速率地再现。 
另外,在显示种类为‘L·R显示种类’不变、迁移到再现仅存储左视点视频流的2D影像的再现区间的情况下,也可构成为优先赋予再现该2D 影像的再现区间的重复标志。例如,也可如上述重复标志那样优先分配给再现区间的信息,变更显示种类。若重复标志是‘重复再现’,则将PSR22的设定变更为‘L·L显示种类’,若重复标志是‘通常再现’,则将PSR22的设定变更为‘2D通常显示种类’。 
<第1实施方式的变形例2> 
入口映射也可构成为如图45所示向各个入口点的信息中追加区段开始标志(EXTSTART)。区段开始标志在入口点所指的SPN是AV流文件的区段开头的情况下设定‘1’,在入口点所指的SPN不是AV流文件的区段开头的情况下设定‘0’。由此,由于可从入口映射的信息中取得各区段的尺寸,所以2D/3D再现装置可简易地执行以区段单位交互执行AV流再现的处理。图46中模式地示出入口点与AV流的关系。例如,如下执行将图46的AV流文件从开头起作为3D影像再现。首先,根据左眼AV流的区段开始标志为‘1’的入口点#1的SPN与其下一区段开始标志为‘1’的入口点#2的SPN的差分,计算读入尺寸,向BD-ROM驱动器要求该区段的读入处理。接着,根据右视点AV流的区段开始标志为‘1’的入口点#3的SPN与其下一区段开始标志为‘1’的入口点#4的SPN的差分,计算读入尺寸,向BD-ROM驱动器要求该区段的读入处理。通过如此以左视点AV流与右视点AV流交互执行读入处理,即便不知道文件***的区段信息,也可交互以区段单位读入,所以BD-ROM驱动器可不发生跳跃地连续再现。 
另外,在左视点AV流的左视点视频流的GOP开头的I图片中、包含该I图片开头的TS数据包是区段开头的情况下,还必需制作入口点。同样,在右视点AV流的右视点视频流的右眼GOP开头图片中、包含该图片开头的TS数据包是区段开头的情况下,必需制作入口点。 
向入口映射的各入口点追加区段开始标志,但在入口映射中准备表示称为角度切换标志的多角度下角度切换定时的1位的标志。由此,为了削减位数量,区段开始标志也可与该标志共用。在入口映射头信息中准备表示该1位的字段是‘区段开始标志’还是‘角度切换标志’的标志,通过检查该标志,2D/3D再现装置也可翻译入口映射上的该1位的字段含义后转换处理。 
另外,向入口映射的各入口点追加区段开始标志,但若是特定各AV流 的区段尺寸的信息,则不限于该构成。例如,也可列表化AV流的区段尺寸,作为元数据,存储在片段信息文件中,或在入口映射的入口点中另外准备以1∶1对应的比特序列,若比特序列是‘1’,则意味着区段开头,若为‘0’,则不是区段开头。 
(第2实施方式) 
在第2实施方式中,说明由于再现BD-ROM中存储的3D影像、图片缺失后不能解码时的再现方法和再现装置。 
图48上段以显示顺序表示作为3D影像再现时的左视点视频流与右视点视频流的图片实例,表示存在再现中发生Syntax异常等任何异常而不能解码的图片。将该发生Syntax异常等任何异常而不能解码的图片称为缺失图片6501。在右视点视频流的图片内存在缺失图片6501的情况下,若仍缺失地显示图片,则用户会产生大的不适感。 
因此,如图48下段所示,根据第2实施方式的再现装置在3D影像再现中右视点视频流中存在缺失图片6501的情况下,代替缺失图片6501,显示与该缺失图片6501成对显示的左视点视频流的图片(下面称为缺失对图片6701)。 
说明该方法中的再现装置的改良部分。根据本实施方式的再现装置改良了由第1实施方式说明的再现装置200的主视频解码器。图47是表示根据第2实施方式的再现装置的主视频解码器的构成的图。与缺失图片6501成对显示的左视点视频流的缺失对图片6502的PTS是从缺失图片的PTS中减去3D显示延迟的值。因此,***目标解码器4在将右视点视频流的图片是缺失图片6501的通知从视频解码器57通知给图片开关60的情况下,将从缺失图片6501的PTS中减去3D显示延迟的左视点视频流的图片输出到右视点平面。通过如此构成,可避免向用户显示缺失的图片,可减轻视听者的不适感。 
作为本实施方式的变形例,如图49下段所示,再现装置在3D影像再现中右视点视频流中存在缺失图片6501的情况下,也可显示该缺失图片6501之前的右视点视频流的图片,代替缺失图片6501。说明该方法中的再现装置的扩展部分。***目标解码器4在将右视点视频流的图片是缺失图片6501的通知从视频解码器57通知给图片开关60的情况下,不输出到右 视点视频平面地废弃缺失图片6501。在右视点视频平面中残留之前的右视点视频流的图片,将该图片作为缺失图片6501的代替,在平面加法部30中用于重叠处理。通过如此构成,可避免向用户显示缺失的图片,可减轻视听者的不适感。 
另外,作为其他变形例,如图50的下段所示,2D/3D再现装置在3D影像再现中右视点视频流中存在缺失图片6501的情况下,也可显示该缺失图片6501之前的右视点视频流的图片,代替缺失图片6501,另外,显示与该缺失图片6501成对显示的左视点视频流的缺失图片6502之前的左视点视频流的图片,代替该缺失图片6502。说明该方法中的2D/3D再现装置的扩展部分。***目标解码器4在将右视点视频流的图片是缺失图片6501的通知从视频解码器57通知给图片开关60的情况下,不输出到右视点视频平面地废弃缺失图片6501。在右视点视频平面中残留之前的右视点视频流的图片,将该图片作为缺失图片6501的代替,在平面加法部30中用于重叠处理。另外,***目标解码器4在将右视点视频流的图片是缺失图片6501的通知从视频解码器57通知给图片开关60的情况下,还特定PTS与缺失图片6501相同、与缺失图片6501成对显示的缺失对图片6502,不输出到左视点视频平面地废弃该图片。在左视点视频平面中残留之前的左视点视频流的图片,将该图片作为缺失对图片6502的代替,在平面加法部30中用于重叠处理。通过如此构成,可避免向用户显示缺失的图片,可减轻视听者的不适感。 
作为再一变形例,如图51下段所示,2D/3D再现装置在3D影像再现中右视点视频流中存在缺失图片6501的情况下,也可显示由单色的黑等构成的事先准备的补充图片6801,作为缺失图片6501的代替。说明该方法中的2D/3D再现装置的扩展部分。***目标解码器4在将右视点视频流的图片是缺失图片6501的通知从视频解码器57通知给图片开关60的情况下,以缺失图片6501的PTS的定时将补充图片6801输出到右视点视频平面。通过如此构成,可避免向用户显示缺失的图片,可减轻视听者的不适感。 
作为又一变形例,如图52下段所示,2D/3D再现装置在3D影像再现中右视点视频流中存在缺失图片6501的情况下,也可显示补充图片6801,代替缺失图片6501,显示补充图片6801,代替缺失对图片6701。说明该方法 中的2D/3D再现装置的扩展部分。***目标解码器23在右视点视频流的图片是缺失图片6501的情况下,以缺失图片6501的PTS的定时将补充图片6801输出到右视点视频平面。另外,***目标解码器23在右视点视频流的图片是缺失图片6501的情况下,特定与缺失图片6501成对显示的缺失对图片6701,以该图片的PTS的定时将补充图片6801输出到左视点视频平面。通过如此构成,可避免向用户显示缺失的图片,可减轻视听者的不适感。 
作为又一变形例,如图53下段所示,2D/3D再现装置在3D影像再现中右视点视频流中存在缺失图片6501的情况下,也可根据之前的右视点视频流的图片与缺失对图片6701来制作补充图片6801,显示该补充图片6801,代替缺失图片6501。说明该方法中的2D/3D再现装置的扩展部分。***目标解码器23在右视点视频流的图片是缺失图片6501的情况下,根据之前的右视点视频流的图片与缺失对图片6701来制作补充图片6801,以缺失图片6501的PTS的定时将补充图片6801输出到右视点视频平面。通过如此构成,可避免向用户显示缺失的图片,可减轻视听者的不适感。 
在图片缺失不能解码时的再现方法和再现装置的说明中,说明了缺失图片6501位于右视点视频流中的情况,但不用说,也可以同样的构成(交换左视点视频流与右视点视频流)来对应于其位于左视点视频流中的情况。但是,如本实施方式中所述,在右视点视频流的各图片为参照左眼影像视频流的图片的构成的情况下,左眼影像视频流的图片为缺失图片的情况下,由于对应的右视点视频流的图片也变为缺失图片,所以在左视点视频流内存在缺失图片的情况下,以缺失图片与缺失对图片两个不同的图片来置换的方法是有效的。即,用图50与图52说明的方法有效。 
(第3实施方式) 
在第3实施方式中,说明保存在BD-ROM中的3D影像的暂时停止(暂停)处理的再现方法及再现装置。 
在2D影像的再现中,在根据来自用户的命令进行再现的再现停止命令的情况下,如图54所示的再现装置对暂时停止时刻的2D影像的图片进行解码,并以视频流的帧速率输出该图片,直到进行暂时停止解除命令。3D影像的再现中,在按照来自用户的命令进行再现的暂时停止命令的情况下,有如下两种方法,即:如图55(a)所示,对暂时停止时刻的左视点视频或 右视点视频中的某一个图片进行解码,并输出该图片,直到进行暂时停止解除命令的方法;以及如图55(b)所示,对与暂时停止时刻的左视点视频的图片成对的右视点视频的图片进行解码,并输出该两个图片,直到进行暂时停止解除命令的方法。另外,这两种方法也可以分为命令暂时停止的指令及API,以能够与BD程序文件等区分。 
说明3D影像中的暂时停止指令的方法中2D/3D再现装置的扩展部分。 
首先,说明暂时停止时刻的2D/显示左眼影像或右眼影像中的某个图片的情况的再现装置的扩展部分。2D/3D再现装置200的再现控制部7若从用户事件处理部17或程序执行部11接收暂时停止命令,则执行对BD-ROM驱动器1和***目标解码器4的解码停止命令。BD-ROM驱动器1若接收到解码停止命令,则停止从BD-ROM盘读出。***目标解码器4若接收到解码停止命令,则停止解码,停止向扬声器输出声音。此时,***目标解码器4如果处于将图片写入左视点视频平面或右视点视频平面的途中,则等待到结束,向平面加法部5b通知暂时停止状态。平面加法部5b如图56所示,从***目标解码器接收暂时停止状态。暂时停止状态中保存了表示最后由***目标解码器输出的图片吸入到左视点视频平面或右视点视频平面中的哪个平面的标记。平面加法部5b的开关62在最后由***目标解码器进行解码并输出的图片为左视点视频平面时,将进行重叠处理的视频平面选择为左视点视频平面。平面加法部5b的开关62在最后由***目标解码器进行解码并输出的图片为右视点视频平面时,将进行重叠处理的影像平面选择的右视野视频平面。平面加法部5b以3D影像的帧速率(2D影像的2倍的帧速率)的间隔进行所选择的影像平面与其他平面的重叠处理。 
接着,说明还显示暂时停止时刻的2D/左眼影像和右眼影像的两个图片的情况的再现装置的扩展部分。2D/3D再现装置200的再现控制部27若从用户事件处理部17或程序执行部11接收暂时停止命令,则执行对BD-ROM驱动器1和***目标解码器4的解码停止命令。BD-ROM驱动器21若接收到解码停止命令,则停止从BD-ROM盘读出。***目标解码器23若接收到解码停止命令,则停止解码,停止向扬声器输出声音。此时,***目标解码器4如果处于将图片写入左视点视频平面或右视点视频平面的途中,则等待到结束,在最后输出到影像平面的图片是左视点视频流的情况下, 等待到对与该图片成对显示的右视点视频流的图片进行解码并输出到右视点视频平面为止,并向平面加法部5b通知暂时停止状态。平面加法部5b若从***目标解码器接收到暂时停止状态,则将左视点视频平面与右视点视频平面交替切换,并以3D影像的帧速率的间隔进行与其他平面的重叠处理。 
以上是3D影像的暂时停止处理的说明。 
(第4实施方式) 
在第4实施方式中,对3D影像的静止图像的数据结构、再生方法和再生装置进行说明。 
首先,对用于实现3D影像的静止图像的数据结构和再生方法进行说明。 
图57是在静止图像的GOP结构。在左视点视频流的GOP中储存有I图片的视频访问单元,在该I图片的视频访问单元的终止储存有用于使主视频解码器31通知视频序列的终止的序列终止代码6401(MPEG-2的情况下为Sequence_end_code、MPEG-4 AVC的情况下为EndOfSequence)。在右视点视频流的右眼GOP中储存有左视点视频流的GOP前头的I图片和成对显示的图片的视频访问单元,附于表示与左视点视频流的GOP前头的I图片的PTS相同时刻的PTS。在右眼GOP的前头图片的终止中也储存有用于使视频解码器31通知视频序列的终止的序列终止代码6402。 
接下来,说明用于实现3D影像的静止图像的2D/3D再生装置的扩张部。再生作为2D影像的图57所示的静止图像的左视点视频流的情况下,在2D/3D再生装置的主视频解码器31中,存在序列终止代码6401的情况下,解码其视频访问单元之后,停止解码处理。通过这样将接下来的视频访问单元输入到主视频解码器31的情况下,也能实现未解码的静止图像。转移到接下来的静止图像的再生的情况下,从再生控制部等执行解码开始命令,再次开始解码。 
但是,再生作为3D影像的图57所示的静止图像的左视点视频流和右视点视频流的情况下,主视频解码器31,无视附加到左视点视频流的视频访问单元的序列终止代码6401,只参照附加到右视点视频流的视频访问单元的序列终止代码6402。即,在右视点视频流的视频访问单元中有序列终 止代码6402的情况下,主视频解码器31解码其视频访问单元后,停止解码黑醋栗。通过这样的构成,能够并立2D影像和3D影像的静止图像。 
另外,在右视点视频流的右眼GOP的前头图片的终止中,储存有与左视点视频流相同的序列终止代码6402,该序列终止代码6402也可以成为右视点视频流独自的格式。例如,也可以定义止代码6402,也可以以补足数据定义右视点视频流的序列终止代码6402。 
而且,作为序列终止代码6402,也可以在图8中说明的解码切换信息中追加表示是否是GOP终止的视频访问单元的标志。通过这样的构成,左视点视频流的序列终止代码6401和右视点视频流的序列终止代码6402的区别变得明确,主视频解码器31再生静止图像作为3D影像的情况的处理变得容易。 
(第五实施方式) 
在第三实施方式中,说明了存储在BD-ROM中的3D影像的特殊再现的再现方法和再现装置。 
图58(a)的块示出了左视点AV流和右视点AV流交织后的区段。白色的块表示左视点AV流,斜线的块表示右视点AV流的区段,三角形的记号表示入口点的位置。7109A、7109C、7109E表示左视点AV流中包含的左视点视频流的入口点,7109B、7109D表示右视点AV流中包含的右视点视频流的入口点。箭头7101、7102、7103、7104、7105表示存储有入口点所指的图片的TS包的范围。如果读取该范围的TS包,则能够对入口点所指的图片解码。将该范围称为入口图片TS尺寸。入口图片TS尺寸作为入口点信息与SPN、PTS一起加以存储。 
在将3D影像原样快进地进行再现的情况下,需要再现左视点视频流的入口点所指的I图片和与该I图片成对显示的、右视点视频流的入口点所指的图片。在这种情况下,如图58(a)的3D影像的再现路径所示,每次再现各入口点所指的图片时,会发生跳跃,所以表现变差。 
因此,如图58(b)所示,在作为3D影像而与右视点视频流的入口点的图片成对显示的、左视点视频流的入口点的I图片的配置场所相接近的场所,配置右视点视频流的入口点的图片。并且,在左视点视频流的入口点中存储的入口图片TS尺寸表示:与右视点视频流的入口点所指的图片相同 的图片和左视点视频流的入口点所指的I图片存储到左视点AV流的区段中形成的TS包的范围。 
在图58(b)的开头的I图片的例子中,与右视点视频流的入口点的图片(存储在入口图片TS尺寸7102中的图片)相同的图片配置在与作为3D影像而成对显示的左视点视频流的入口点的I图片连续的场所。存储在左视点视频流的入口点中的入口图片TS尺寸成为与右视点视频流的入口点所指的图片相同的图片和左视点视频流的入口点所指的I图片存储到左视点AV流中形成的TS包的范围(7106的箭头)。通过这样构成,在将3D影像原样快进地进行再现的情况下,能够同时读取左视点视频流的I图片和右视点视频流的I图片,所以能够减少再现中的跳跃。 
为了实现该构成,如图59(a)所示,也可以为了在左视点AV流中实现特殊再现而分配PID,仅存储右视点视频流的I图片。2D/3D再现装置在执行快进、倒退等再现入口点所指的图片时,仅读取左视点AV流,在从左视点AV流读取的左视点视频流的图片到达PID过滤器23时,2D/3D再现装置的***目标解码器23将该数据传送到TB54,进行左视点视频流的解码处理。 
此外,为了实现该构成,如图59(b)所示,也可以为了在左视点AV流中实现特殊再现而将左视点视频流的入口点所示的图片存储到成对进行显示的右视点视频流的GOP开头的I图片的右眼用视频访问单元7201中。该右眼用视频访问单元7201存储在能够以2D再现装置不能再现的方式作为视频访问单元的预留加以定义的区域中。2D/3D再现装置在执行快进、倒退等再现入口点所指的图片时,仅读取左视点AV流,在左视点视频流的右眼用视频访问单元7201到达PID过滤器23时,2D/3D再现装置的***目标解码器23将该数据传送到TB54,进行左视点视频流的解码处理。 
(第6实施方式) 
在本实施方式中,对于用来实施以第一实施方式叙述的记录方法的记录装置进行说明。 
在通过实时记录技术实现记录方法的情况下,执行该记录方法的记录装置实时地制作AV流文件,记录到BD-RE或BD-R、硬盘、半导体存储卡中。 
这种情况下,AV流文件也可以是将通过记录装置实时地对模拟输入信号进行编码而得到的传输流,也可以是记录装置将数字输入的传输流进行局部化而得到的传输流。 
进行实时记录的记录装置,包括对视频信号编码而得到视频流的视频编码器、对音频信号编码而得到音频流的音频编码器、对视频流、音频流等进行多路复用而得到MPEG2-TS形式的数字流的多路转换器、以及将构成MPEG2-TS形式的数字流的TS数据包变换成源数据包的源打包器。将变换成源数据包形式的MPEG2数字流存储到AV流文件中并写入到BD-RE、BD-R等中。写入数字流的同时,记录装置的控制部进行在存储器上生成片段信息或播放列表信息的处理。具体而言,由用于请求录像处理时,控制部将AV流文件以及片段信息文件制作到BD-RE、BD-R上。 
接着,根据从装置外部输入的传输流来检测视频流中的GOP的起始位置,如果由编码器生成视频流的GOP,则记录装置的控制部在该GOP中取得位于起始位置的帧内图片的PTS,和存储该GOP的起始部分的源数据包的数据包号,将该PTS和数据包号的组作为EP_PTS入口以及EP_SPN入口的组追加到片段信息文件的入口地图中。以后,每当生成GOP,都将EP_PTS入口以及EP_SPN入口的组片段信息文件的入口地图。这时,在GOP的起始为IDR图片的情况下,将被设定为“ON”的is_angle_change标志追加到EP_PTS入口以及EP_SPN入口的组中。如果GOP的起始不是IDR图片的话,则将设定为“OFF”的is_angle_change标志追加到EP_PTS入口以及EP_SPN入口的组中。 
此外,关于片段信息文件中的流的属性信息,按照应该记录的流的属性来设定。以上,如果生成AV流文件、片段信息并写入到BD-RE,BD-R中,则经由该片段信息内的入口地图,生成对再现路径进行定义的播放列表信息,并写入到BD-RE,BD-R中。通过在实时记录的技术中执行这样的处理,能够在BD-RE,BD-R上得到AV流片段信息-播放列表信息这样的层级结构。 
以上是执行了实时记录的记录方法的记录装置。接着,对执行预格式记录的记录方法的记录装置进行说明。 
这里说明的记录装置被设置在用于电影内容的颁布的制作工作室,供 制作团队的使用。根据来自制作团队的操作,生成按照MPEG标准来压缩编码后的数字流以及标记如何再现电影标题的脚本,生成包含这些数据的面向BD-ROM的量比特流这样的方式是与本发明有关的记录装置的使用方式。 
图60是表示记录装置的内部结构的图。如本图所示的那样,涉及本发明的记录装置,由视频编码器501、素材制作部502、脚本生成部503、BD程序制作部504、多路复用处理部505以及格式处理部506构成。 
视频编码器501根据左视点的非压缩的比特地图等的图像图和右视点的非压缩的比特地图等的图像图,按照MPEG4-AVC或MPEG2等的压缩方式来编码,制作左视点视频流和右视点视频流。这时,右视点视频流在左视点视频流的显示时刻通过对应的帧和帧内预测编码来被编码。该帧内预测编码的处理的过程中,根据左视点的图和右视点的图的运动矢量来提取3D影像时的深度信息,并写入到帧深度信息存储部501a。视频编码器501为了进行利用了图片间的相关特性的图像压缩,以8x8或16x16的宏块为单位提取运动矢量来进行图像压缩。 
图61示出的宏块下的抽出运动矢量的处理中,背景中有家,前景中有人的动态图像,作为运动矢量抽出的对象。此时,在左眼图像和右眼图像中进行图片间预测,于是,“家”的图的场所未检测出运动矢量,但是“日元”的场所检测出运动矢量。 
抽取检测到的动作矢量,如图61下段所示,制作显示3D影像时的帧单位的进深信息。进深信息考虑例如采用与具有8位深度的帧的分辨率相同的图象。 
素材制作部502制作音频流、介绍图形流、交互图形流等各流,写入音频流存储部502a、介绍图形流存储部502b、交互图形流存储部502c中。 
当制作音频流时,素材制作部502通过根据AC3等压缩方式编码非压缩的LinearPCM声音等,制作音频流。另外,素材制作部502还根据字幕图象与显示定时和包含淡入/淡出等字幕效果的字幕信息文件,制作作为依据BD-ROM标准的PG流的格式之介绍图形流。素材制作部502根据菜单中使用的位图图象与记载了配置在菜单中的按钮的迁移或显示效果的菜单文件,制作作为依据BD-ROM标准的菜单画面的格式之交互图形流。 
脚本生成部503根据素材制作部502制作的各流的信息或来自创作团队的经由GUI的操作,以BD-ROM格式制作脚本。这里所谓的脚本相当于索引文件、电影对象文件、播放列表文件等文件。另外,脚本生成部503制作记述了用于实现多路复用处理的各AV流由何流构成的参数文件。这里制作的索引文件、电影对象文件、播放列表文件等文件为第1实施方式中说明的数据构造。 
BD程序制作部504通过GUI等用户界面,根据来自用户的要求,制作BD程序文件的源代码,制作BD程序。此时,BD程序文件的程序为了设定GFX平面的进深,可利用视频编码器501输出的进深信息。 
多路复用处理部505多路复用BD-ROM脚本数据中记述的左视点视频流、右视点视频流、视频、音频、字幕、按钮等多个流,制作MPEG2-TS形式的AV流文件。此时,还同时制作与AV流文件成对的片段信息文件。 
多路复用处理部505将自身生成的入口映射与表示AV流文件中包含的每个流的声音属性、影像属性等的属性信息成对,制作片段信息文件。片段信息文件的构成为此前各实施方式中说明的数据构造。 
格式处理部506以脚本生成部503生成的BD-ROM脚本数据、与BD程序制作部504制作的BD程序文件、多路复用处理部505生成的AV流文件或片段信息文件、或依照BD-ROM标准的格式,配置文件或目录,以作为依照BD-ROM标准的文件***的UDF的格式来制作盘图象。 
另外,利用此时视频编码器501输出的进深信息,制作PG、IG、次视频流的3D元数据。自动设定图象在画面上的配置,以不与3D影像的物体重合,调整偏移值,以使进深不重合。如此制作的盘图象的文件布局由实施方式1、2中说明的文件布局的数据构造来设定。通过将生成的盘图象变换为BD-ROM施压用数据,对该数据执行施压工序,可制造BD-ROM。 
(作为实现受控复制的记录装置的实施) 
记录装置,也可以是通过受控复制(managed copy)来写入数字流。 
所说受控复制是这样一种技术,在将记录在BD-ROM等只读的记录介质中的数字流及播放列表信息、Clip信息、应用程序,复制到其他光盘(BD-R、BD-RE、DVD-R、DVD-RW、DVD-RAM等)及硬盘、可移动介质(SD存储卡、存储棒、compact flash(注册商标)、SmartMedia、 多媒体卡等)等能够读写的记录介质中时,与服务器进行通信,只有在进行认证并被许可的状态下才能够执行复制。根据这种技术,能够进行限制备份次数、只在交费状态下允许备份等控制。 
在实现从BD-ROM向BD-R、BD-RE的复制的情况下,如果复制源和复制目的地记录容量相同,则在受控复制中,只需进行从最内周到最外周依次复制作为复制源的BD-ROM中的比特流的动作即可。 
受控复制用于假设不同类型介质间的复制,需要进行代码转换(transcoding)。其中,所说“代码转换”指下述处理,把记录在BD-ROM中的数字流的形式从MPEG2传输流形式转换为MPEG2程序流形式等,降低对视频流和音频流分配的比特速率后再进行编码,由此使数字流适合于复制目的地介质的应用格式。在采取这种代码转换时,需要通过进行上述的实时编码技术的处理,获得AV Clip、Clip信息、播放列表信息。 
(备考) 
以上说明了在本申请的申请时刻申请人得知的最佳实施方式,但对下面所示的技术主题可施加进一步的改良或变更实施。是否如各实施方式所示实施还是实施这些改良变更均是任意的,请留意基于实施者主观的实施。 
(立体观察方式) 
第1实施方式中设为说明前提的视差图像方式为了在时间轴方向上交互显示左右影像,例如若是通常的2维电影,则在1秒内显示24张影像,与此相对地,左右影像一起在1秒内需要显示48张影像。因此,该方式适于一画面改写较快的显示装置。使用该视差图像的立体观察一般已用于游乐园的游戏设备等中,技术上也确立,所以认为最接近家庭中的实用化。使用视差图像的立体观察用方法除此之外,还提议2色分离方式等各种技术。在本实施方式中,使用序列分离方式或偏振光眼镜方式来加以说明,但只要使用视差图像,不限于这两个方式。 
显示装置300不仅是双凸透镜式透镜,也可使用具有同样功能的设备、例如液晶元件。另外,也可在左眼用象素中设置纵向偏振光滤光器,在右眼用象素中设置横向偏振光滤光器,收看者使用左眼用设置了纵向偏振光、右眼用设置了横向偏振光的滤光器的偏振光眼镜,观看显示装置的画面,由此实现立体观察。 
(用于存放3D影像的Index.bdmv的数据结构) 
在2D再现装置和3D对应再现装置中区别索引文件而不是播放列表,在2D再现装置中在再现开始时参照“Index.bdmv”,但是在3D再现装置中选择“Index.3dmv”的方法也可以。 
(用于处理多个流的数据结构) 
在有多个流的情况下,上述那样使用子路径信息也可以,也可以使用用于多角度的multi_clip_entries。在使用multi_clip_entries的情况下,按照显示装置的画面尺寸选择了流之后,为了不会错误地切换到其他的画面尺寸用的流,优选禁止角度变更的UO。 
(左视点、右视点的适用对象) 
准备左视点和右视点,不仅仅是本文所涉及的视频流,也可以适用于缩略图像。视频流的情况下也同样,在2D再现装置中显示现有的2D用缩略图像,但是在3D再现装置中,按照3D显示方式输出为3D用而准备的左眼缩略图和右眼缩略图。 
同样,对于菜单图像或章节搜索用的不同场景的缩略图像,不同场景缩小画面也可以应用。 
(程序的实施方式) 
各实施方式中所示的应用程序可如下制作。首先,软件开发者使用编程语言,记述实现各流程图或功能构成要素的源程序。在该记述中,软件开发者根据编程语言的句法,使用类构造体或变量、数组变量、外部函数的调用,记述具体表现各流程图或功能构成要素的源程序。 
将记述的源程序作为文件提供给编译器。编译器翻译这些源程序,生成目标程序。
编译器执行的翻译由句法解析、优化、资源分配、代码生成等过程构成。在句法解析中,进行源程序的字句解析、句法解析和含义解析,将源程序变换为中间程序。在优化中,对中间程序进行基本块化、控制流程解析、数据流解析等作业。在资源分配中,为了实现构成目标的处理器适合于命令集,将中间程序中的变量分配给目标处理器的处理器具有的寄存器或存储器。在代码生成中,将中间程序内的各中间命令变换为程序代码,得到目标程序。 
这里生成的目标程序由让计算机执行各实施方式所示的流程图各步骤或功能构成要素各个步骤的一个以上程序代码构成。这里,程序代码有处理器的本地代码、JAVA(注册商标)字节代码等各个种类。利用程序代码来实现各步骤有各种方式。在可利用外部函数来实现各步骤的情况下,调用该外部函数的调用语句变为程序代码。另外,实现一个步骤的程序代码也归属于各个目标程序。在限制命令种类的RISC处理器中,通过组合算术运算命令或逻辑运算命令、分支命令等,也可实现流程图的各步骤。 
若生成目标程序,则编程者对其启动连接器。连接器将这些目标程序或关联的库程序分配到存储器空间中,将其结合成一个,生成加载模块。如此生成的加载模块以计算机读取为前提,让计算机执行各流程图所示的处理步骤或功能构成要素的处理步骤。也可将这种程序记录在计算机可读取的记录介质中提供给用户。 
(数据结构的记述规格) 
上述所示的数据构造中、存在多个某种确定类型的信息的反复构造,能够通过对for语句设定控制变量的初始值和反复条件来定义。也可以使用Do While语句。 
并且,在预定的条件成立时,用于定义某种确定信息的任意的数据构造,能够使用if语句,在if语句中记述其应该成立的条件、和在条件成立时应该设定的变量。该记述也可以使用switch语句、case语句。 
这样,各个实施方式所示的数据构造能够利用高级编程语言的语法来记述,所以各个实施方式所示的数据构造经过语法分析、优化、资源分配、代码生成这些基于编译器的翻译过程,与上述程序相同,以被转换为计算机能够读取的计算机代码的状态被记录在记录介质中。这样,利用高级编程语言记述的数据构造,在面向对象的语言中,作为除类构造体的方法之外的部分、即类构造体中的排列型的成员变量进行处理,并形成程序的一部分。即,各个实施方式的数据构造被转换为计算机代码后记录在记录介质中,并成为程序的成员变量,所以此前已经叙述过的数据结构实质上与程序相同。 
(光盘的再现) 
BD-ROM驱动器具有光头,光头具备:半导体激光器、准直透镜、分 束器、物镜、聚光透镜、光检测器。从半导体激光器射出的光束,通过准直透镜、分束器、物镜,聚光到光盘的信息面。 
聚光后的光束,在光盘上反射/折射,通过物镜、分束器、聚光透镜,聚光到光检测器上。根据聚光到光检测器的光的光量,生成再现信号。 
(记录介质的变更) 
各实施方式中的记录介质包含光盘、半导体存储卡等封装介质全部。本实施方式的记录介质以事先记录必要数据的光盘(例如BD-ROM、DVD-ROM等现有可读取光盘)为例进行说明,但不必限于此,例如,也可利用具有将包含经由广播或网络分发的本发明实施所需数据的3D内容写入光盘的功能的终端装置(例如也可将上述功能嵌入再现装置中,也可是与再现装置不同的装置),记录在可写入的光盘(例如BD-RE、DVD-RAM等现有可写入光盘),将该记录的光盘适用于本发明的再现装置中,可实施本发明。 
(半导体存储卡记录装置和再现装置的实施方式) 
说明将各实施方式中说明的数据构造记录在半导体存储器中的记录装置和再现的再现装置的实施方式。 
首先,作为前提技术,说明BD-ROM中记录的数据的著作权保护机制。 
有时BD-ROM中记录的数据中、例如从著作权保护、数据隐匿性提高的观点看,部分数据根据需要被加密。 
例如,BD-ROM中记录的数据中加密的数据例如是对应于视频流的数据、对应于音频流的数据、或对应于包含这些数据的流的数据。 
下面,说明BD-ROM中记录的数据中加密数据的解读。 
半导体存储卡再现装置将与解读BD-ROM内加密数据所需的密钥相对应的数据(例如设备密钥)事先存储在再现装置中。 
另一方面,在BD-ROM中记录与解读加密数据所需密钥相对应的数据(例如对应于上述设备密钥的MKB(媒体密钥块))、和将解读加密数据用的密钥自身加密后的数据(例如与上述设备密钥和MKB相对应的加密标题密钥)。这里,设备密钥、MKB和加密标题密钥成对,并且,也与写入BD-ROM上通常不能拷贝的区域(称为BCA的区域)中的识别符(例如卷ID)对应。设若该组合不正确,则不能解读加密。仅在组合正确的情况下,才能导出加 密解读需要的密钥(例如根据上述设备密钥、MKB和卷ID,对加密标题密钥进行解密得到的标题密钥),使用该加密解读所需的密钥,可解读加密的数据。 
在再现装置再现装填的BD-ROM的情况下,例如若与BD-ROM内的加密标题密钥、MKB成对的(或对应的)设备密钥不在再现装置内,则不再现加密的数据。这是因为加密数据的解读所需的密钥(标题密钥),密钥自身被加密后(加密标题密钥)记录在BD-ROM上,若MKB与设备密钥的组合不正确,则不能导出加密解读需要的密钥。 
相反,若加密标题密钥、MKB、设备密钥和卷ID的组合正确,则构成再现装置,以便使用例如上述加密解读所需的密钥(根据设备密钥、MKB和卷ID,对加密标题密钥进行解密得到的标题密钥),由解码器解码视频流,由音频解码器解码音频流。 
以上是BD-ROM中记录的数据著作权保护的机制,但该机制未必限于BD-ROM,例如在适用于可读入/写入的半导体存储器(例如SD卡等具有可移动性半导体存储卡)的情况下也可实施。 
说明半导体存储卡再现装置的再现步骤。光盘构成为例如经光盘驱动器读出数据,而在使用半导体存储卡的情况下,构成为经用于读出半导体存储卡内数据的I/F来读出数据。 
具体而言,若半导体存储卡***再现装置的槽中,则经由半导体存储卡I/F电连接再现装置与半导体存储卡。只要构成为将半导体存储卡中记录的数据经半导体存储卡I/F读出即可。 
(作为接收装置的实施方式) 
各实施方式中说明的再现装置也可实现为从电子分发服务的分发服务器接收与本实施方式中说明的数据相对应的数据(分发数据)、并记录在半导体存储卡中的终端装置。 
这种终端装置也可构成为各实施方式中说明的再现装置进行这种动作。与本实施方式的再现装置不同,也可由进行在半导体存储器中存储分发数据的专用终端装置来进行。这里说明再现装置进行的实例。另外,作为记录目的地的半导体存储器,以SD卡为例来说明。 
在***再现装置具备的槽中的SD存储卡中记录分发数据的情况下,首 先请求向存储分发数据的分发服务器发送分发数据。此时,再现装置从SD存储卡中读出唯一识别所***的SD存储卡用的识别信息(例如各个SD存储卡固有的识别序号,具体而言例如SD存储卡的序列号等),将读出的识别信息与分发请求一起,发送给分发服务器。 
该唯一识别SD存储卡用的识别信息例如相当于上述卷ID。 
另一方面,分发服务器加密分发数据中必要的数据(例如视频流、音频流等)并存储在服务器上,以便能使用加密解读所需的密钥(例如标题密钥)来解除加密。 
例如,分发服务器构成为保持私钥,对半导体存储卡的固有识别序号的每个,可动态生成不同的公钥信息。 
另外,分发服务器构成为可对加密数据解读所需的密钥(标题密钥)自身进行加密(即构成为可生成加密标题密钥)。 
生成的公钥信息例如包含相当于上述MKB、卷ID和加密标题密钥的信息。加密的数据若例如半导体存储器固有的识别序号、后述的公钥信息中包含的公钥主体和事先记录在再现装置中的设备密钥的组合正确,则得到加密解读所需的密钥(例如根据设备密钥、MKB和半导体存储器固有的识别序号,对加密标题密钥进行解密得到的标题密钥),使用该得到的加密解读所需的密钥(标题密钥),可解读加密的数据。 
接着,再现装置将接收到的公钥信息与分发数据记录在***槽中的半导体存储卡的记录区域中。 
下面,说明解密并再现半导体存储卡的记录区域中记录的公钥信息与分发数据中包含的数据中的加密数据的方法一例。 
接收到的公钥信息例如记录公钥主体(例如上述MKB和加密标题密钥)、签名信息、半导体存储卡的固有识别序号、和表示涉及应无效的设备的信息的设备列表。 
签名信息中例如包含公钥信息的散列值。 
设备列表中例如记载涉及有可能非法再现的设备的信息。这是例如事先记录在再现装置中的设备密钥、再现装置的识别序号或再现装置具备的解码器的识别序号等、唯一确定有可能非法再现的装置、装置中包含的部件或功能(程序)等的信息。 
说明半导体存储卡的记录区域中记录的分发数据中加密的数据的再现。 
首先,检查在利用公钥主体对加密数据进行解密之前是否使解密密钥主体起作用。
具体而言,进行: 
(1)公钥信息中包含的半导体存储器固有的识别信息与事先存储在半导体存储卡中的固有识别序号是否一致的检查, 
(2)再现装置内算出的公钥信息的散列值与签名信息中包含的散列值是否一致的检查,
(3)根据公钥信息中包含的设备列表示出的信息,进行再现的再现装置是否可能非法再现的检查(例如公钥信息中包含的设备列表示出的设备密钥与事先存储在再现装置中的设备密钥是否一致的检查)。 
进行这些检查的顺序按什么样的顺序进行均可。 
在上述(1)~(3)检查中,若判断为满足公钥信息中包含的半导体存储器固有的识别信息与事先存储在半导体存储卡中的固有识别序号不一致、再现装置内算出的公钥信息的散列值与签名信息中包含的散列值不一致、或进行再现的再现装置有可能非法再现中的某一个,则再现装置进行控制,以不解读加密的数据。 
另外,若判断为公钥信息中包含的半导体存储器固有的识别信息与事先存储在半导体存储卡中的固有识别序号一致、且再现装置内算出的公钥信息的散列值与签名信息中包含的散列值一致、且进行再现的再现装置不可能非法再现,则判断为半导体存储器固有的识别序号、公钥信息中包含的公钥主体和事先记录在再现装置中的设备密钥的组合正确,使用加密解读所需的密钥(根据设备密钥、MKB和半导体存储器固有的识别序号,对加密标题密钥进行解密得到的标题密钥),进行加密数据的解读。 
例如在加密数据是视频流、音频流的情况下,视频解码器利用上述加密解读所需的密钥(对加密标题密钥进行解密得到的标题密钥),解密(解码)视频流,音频解码器利用上述加密解读所需的密钥,解密(解码)音频流。 
通过上述构成,在知道有可能在电子分发时被非法利用的再现装置、部件、功能(程序)等的情况下,若将用于识别其的信息示于设备列表中分发, 则在再现装置侧包含设备列表中所示的设备的情况下,可抑制使用公钥信息(公钥主体)的解密,所以即便半导体存储器固有的识别序号、公钥信息中包含的公钥主体和事先记录在再现装置中的设备密钥的组合正确,也由于可控制成不解读加密的数据,所以可抑制非法装置利用分发数据。 
另外,期望半导体存储卡中事先记录的半导体存储卡固有的识别符采用存储在隐匿性高的记录区域中的构成。这是因为若篡改半导体存储卡中事先记录的固有识别序号(例如以SD存储卡为例,为SD存储卡的序列号等),则会容易违法拷贝。这是由于虽然向多个半导体存储卡分配各不相同的固有识别序号,但若篡改成该固有识别序号相同,则上述(1)的判定没有意义,有可能会进行相当于篡改次数的违法拷贝。 
因此,期望半导体存储卡的固有识别序号等信息采用记录在隐匿性高的记录区域中的构成。 
为了实现该构成,例如半导体存储卡构成为将记录半导体存储卡固有识别符等隐匿性高的数据所用的记录区域设置在存储通常数据的记录区域(称为第1记录区域)之外的记录区域(称为第2记录区域)中,以及设置用于访问该第2记录区域的控制电路,并且,访问第2记录区域可仅经控制电路来访问。 
例如,第2记录区域中记录的数据进行加密,记录,控制电路嵌入例如对加密数据进行解密用的电路。在向控制电路进行对第2记录区域的数据访问的情况下,只要对加密进行解密并返回解密后的数据即可。或者,控制电路也可构成为保持第2记录区域中记录的数据的存储场所信息,若有数据访问要求,则确定对应的数据存储场所,返回从确定的存储场所读取的数据。 
再现装置上动作的应用中、利用电子分发请求记录在半导体存储卡中的应用,若经存储卡I/F向控制电路发出对第2记录区域中记录的数据(例如半导体存储器固有的识别序号)的访问请求,则接受请求的控制电路读出第2记录区域中记录的数据,返回给再现装置上动作的应用。与该半导体存储卡固有的识别序号一起,向分发服务器请求必要的数据的分发请求,将从分发服务器发送的公钥信息和对应的分发数据记录在第1记录区域中。 
另外,再现装置上动作的应用中、利用电子分发请求在半导体存储卡 中记录的应用,在经存储卡I/F向控制电路发出对第2记录区域中记录的数据(例如半导体存储器固有的识别序号)的访问请求之前,期望事先检查应用是否被篡改。在篡改检查中可利用使用例如基于现有X.509标准的数字证书的检查等。 
另外,对半导体存储卡的第1记录区域中记录的分发数据的访问,不一定经由半导体存储卡具有的控制电路来进行访问。 
(***LSI) 
在再现装置的内部结构中,***目标解码器、再现控制部7、程序执行部11等,以逻辑元件为中心的部分,优选通过***LSI构成。 
所说***LSI指在高密度基板上安装裸片并封装得到的产品。通过在高密度基板上安装多个裸片并封装,使多个裸片具有像一个LSI那样的外形构造的产品,也包含于***LSI中(这种***LSI被称为多芯片模块。)。 
在此如果考察封装的类型,***LSI的种类包括QFP(方形扁平封装)、PGA(插针网格阵列)。QFP是将插针安装在封装体的四个侧面上的***LSI。PGA是在整个底面上安装多个插针的***LSI。 
这些插针作为与其他电路的接口来发挥作用。***LSI中的插针具有这种接口的作用,所以通过向***LSI中的这些插针连接其他电路,***LSI发挥作为再现装置200的核心的作用。 
这种***LSI当然能够装配在再现装置200上,还能够装配在TV或游戏机、电脑、一段(one segment)电话等处理影像再现的各种设备上,能够更广地扩展再现装置的用途。 
优选***LSI的设计思想依据于Uniphier体系。 
依据于Uniphier体系的***LSI由下面的电路单元构成。 
·数据并行处理器DPP 
数据并行处理器DPP是多个单元处理器进行相同动作的SIMD型处理器,利用一个命令使内置于各个单元处理器中的运算器同时动作,由此实现针对构成图片的多个像素的解码处理的并行化。 
·命令并行处理器IPP 
命令并行处理器IPP具有:包括命令RAM、命令高速缓冲存储器、数据RAM、数据高速缓冲存储器的“Local Memory Controller”;包括命令提 取部、解码器、执行单元、寄存器文件的“Processing Unit部”;使Processing Unit部并行执行多个应用的“Virtual Multi Processor Unit部”。 
·MPU块 
MPU块由ARM核、外部总线接口(Bus Control Unit:BCU)、DMA控制器、定时器、矢量中断控制器这些周边电路、和UART、GPIO(General Purpose Input Output:一般用途输入输出)、同步串行接口等周边接口构成。 
·流I/O块 
流I/O块通过USB接口或ATA Packet接口,与连接在外部总线上的驱动器装置、硬盘驱动器装置、SD存储卡驱动器装置进行数据的输入输出。 
·AV I/O块 
AV I/O块由音频输入输出、视频输入输出、OSD控制器构成,与电视机、AV放大器进行数据的输入输出。 
·存储器控制块 
存储器控制块是实现通过外部总线连接的SD-RAM的读写的块,包括控制各个块之间的内部连接的内部总线连接部、与在***LSI外部连接的SD-RAM进行数据传输的访问控制部、调整来自各个块的对SD-RAM的访问请求的访问计划部。 
具体的生产步骤如下所述。首先,以各个实施方式所示的结构图为基本,生成应作为***LSI的部分的电路图,使用电路元件及IC、LSI具体实现结构图中的构成要素。 
并且,为了具体实现各个构成要素,规定将电路元件及IC、LSI之间进行连接的总线及其周边电路、与外部的接口等。另外,也规定连接线、电源线、接地线、时钟信号线等。在进行这种规定时,考虑LSI的规格来调整各个构成要素的动作定时,对各个构成要素实施保证必要的带宽等的调整,由此完成电路图。 
在完成电路图后,进行安装设计。所说安装设计指基板布局的作成作业,即,将根据电路设计作成的电路图上的部件(电路元件及IC、LSI)配置在基板上的何处、或者确定在基板上如何布线电路图上的连接线。 
在进行这种安装设计并确定基板上的布局后,把安装设计结果转换为CAM数据,输出给NC工作机械等设备。NC工作机械以该CAM数据为基 础进行SoC安装及SiP安装。SoC(System on chip:芯片上***)安装指在一个芯片上形成多个电路的技术。SiP(System in Package:封装中***)安装指利用树脂等将多个芯片作成一个封装体的技术。经过以上过程,能够以各个实施方式所示的再现装置200的内部结构图为基础形成本发明涉及的***LSI。 
另外,按照以上所述生成的集成电路根据集成度的不同,有时也称为IC、LSI、超级(super)LSI、特级(ultra)LSI。 
在使用FPAG来实现***LSI的情况下,多个逻辑元件被配置成网格状,根据在LUT(Look UP Table:查找表)中记述的输入输出的组合,连接纵、横的布线,由此能够实现各个实施方式所示的硬件结构。LUT存储在SRAM中,这种SRAM的内容因电源断开而消失,所以在使用这种FPGA时,需要向SRAM写入利用配置信息的定义来实现各个实施方式所示的硬件结构的LUT。 
在本实施方式中,利用中间件和对应于***LSI的硬件、除***LSI之外的硬件、针对中间件的接口的部分、中间件和***LSI之间的接口的部分、中间件和除***LSI之外的必要硬件之间的接口的部分、用户接口的部分来实现,在装配它们来构成再现装置时,通过使它们协作动作来提供特有的功能。 
通过适当定义针对中间件的接口以及中间件与***LSI的接口,能够分别独立地并行开发再现装置的用户接口部分、中间件部分、***LSI部分,能够更高效地进行开发。另外,各个接口的分割方法(切り方),可以有各种分割方法。 
产业上的可利用性 
本发明的再现装置,在3D影像再现和2D影像再现之间的切换中,由于输出帧速率不变,所以在通过需要输出帧速率的同步的HDMI连接与监视器相连接的用途中是有用的。 
符号说明 
100 BD-ROM 
200 再现装置 
300 电视 
400 3D眼镜 
500 遥控器 
1 BD驱动器 
2a,b读缓冲器 
4 ***目标解码器 
5 平面加法部 
6 HDMI收发部 
7 再现控制部 
9 管理信息存储器 
10 寄存器组 
11 程序执行部 
12 程序存储器 
13 HDMV模块 
14 BD-J平台 
15 中间件 
16 模式管理模块 
17 用户事件处理部 
18 本地存储器 
19 非易失性存储器 
23 PID过滤器 
27 PID过滤器 
31 主视频解码器 
32 左视点视频平面 
33 右视点视频平面 
34 辅视频解码器 
35 辅视频平面 
36 PG解码器 
37 PG平面 
38 IG平面 
39 IG平面 
40 主视频解码器 
41 辅视频解码器 
42 混合器 

Claims (15)

1.一种再现装置,对包含有基本视点视频流和从属视点视频流在内的3D视频流进行再现,其特征在于,
在使用上述3D视频流进行立体视觉再现的情况下,将解码上述基本视点视频流而得到的图片数据和解码上述从属视点视频流而得到的图片数据向显示装置输出,
在使用上述3D视频流进行平面视觉再现的情况下,将解码上述基本视点视频流而得到的各图片数据,至少各重复两次向显示装置输出。
2.根据权利要求1所述的再现装置,其特征在于,
在使用上述3D视频流进行平面视觉再现的情况下,重复输出各图片数据的次数是每一个图片数据两次,
通过上述重复,将平面视觉再现中的输出帧速率变换为与立体视觉再现中的输出帧速率相同的帧速率。
3.根据权利要求1所述的再现装置,其特征在于,
上述再现装置具有受理单元,
该受理单元在再现3D视频流时,受理从立体视觉再现及平面视觉再现中的某一方向另一方的变更指示。
4.根据权利要求1所述的再现装置,其特征在于,
上述再现装置包括:
基本视点视频平面存储器;
从属视点视频平面存储器;
解码器,对上述基本视点视频流和上述从属视点视频流进行解码;以及
切换装置,对路径进行切换,以便于将通过上述基本视点视频流的解码而得到的图片数据导入到上述基本视点视频平面存储器,将通过上述从属视点视频流的解码而得到的图片数据导入到上述从属视点视频平面存储器,
在使用上述3D视频流进行立体视觉再现的情况下,输出存储在上述基本视点视频平面存储器中的图片数据和存储在上述从属视点视频平面存储器中的图片数据,
在使用上述3D视频流进行平面视觉再现的情况下,将存储在上述基本视点视频平面存储器中的图片数据至少各重复输出两次。
5.根据权利要求1所述的再现装置,其特征在于,
上述再现装置包括:
基本视点视频平面存储器;
从属视点视频平面存储器;
解码器,对上述基本视点视频流和上述从属视点视频流进行解码;以及
切换装置,对路径进行切换,以便于在使用上述3D视频流进行立体视觉再现的情况下,将通过上述基本视点视频流的解码而得到的图片数据导入到上述基本视点视频平面存储器,将通过上述从属视点视频流的解码而得到的图片数据导入到上述从属视点视频平面存储器;在使用上述3D视频流进行平面视觉再现的情况下,将通过上述基本视点视频流的解码而得到的图片数据导入到上述基本视点视频平面存储器和从属视点视频平面存储器两方中,
输出存储在上述基本视点视频平面存储器中的图片数据和存储在上述从属视点视频平面存储器中的图片数据。
6.一种再现装置的集成电路,对包含有基本视点视频流和从属视点视频流在内的3D视频流进行再现,其特征在于,
在使用上述3D视频流进行立体视觉再现的情况下,对解码上述基本视点视频流而得到的图片数据和解码上述从属视点视频流而得到的图片数据进行输出,
在使用上述3D视频流进行平面视觉再现的情况下,将解码上述基本视点视频流而得到的各图片数据,至少各重复输出两次。
7.一种再现装置,基于再现区间信息对记录在记录介质中的视频流进行再现,其特征在于,
上述再现区间信息中具有对实现立体视觉再现的3D再现区间进行规定的信息和对实现平面视觉再现的2D再现区间进行规定的信息,
在将3D再现区间和2D再现区间无缝连接的情况下,上述再现装置将通过属于2D再现区间的压缩图片数据的解码而得到的各图片数据至少各重复两次输出到显示装置。
8.根据权利要求7所述的再现装置,其特征在于,
在2D再现区间重复输出各图片数据的次数是每一个图片数据两次,
通过上述重复,将平面视觉再现中的输出帧速率变换为与立体视觉再现中的输出帧速率相同的帧速率。
9.根据权利要求7所述的再现装置,其特征在于,
基本视点视频平面存储器;
从属视点视频平面存储器;
解码器,对基本视点视频流和从属视点视频流进行解码;以及
切换装置,对路径进行切换,以便于将通过上述基本视点视频流的解码而得到的图片数据导入到上述基本视点视频平面存储器,将通过上述从属视点视频流的解码而得到的图片数据导入到上述从属视点视频平面存储器,
在3D再现区间的再现中,输出存储在上述基本视点视频平面存储器中的图片数据和存储在上述从属视点视频平面存储器中的图片数据,
在2D再现区间的再现中,将存储在上述基本视点视频平面存储器中的图片数据至少各重复输出两次。
10.根据权利要求7所述的再现装置,其特征在于,
上述再现装置包括:
基本视点视频平面存储器;
从属视点视频平面存储器;
解码器,对基本视点视频流和从属视点视频流进行解码;以及
切换装置,对路径进行切换,以便于在3D再现区间的再现中,将通过上述基本视点视频流的解码而得到的图片数据导入到上述基本视点视频平面存储器,将通过上述从属视点视频流的解码而得到的图片数据导入到上述从属视点视频平面存储器;在2D再现区间的再现中,将通过上述基本视点视频流的解码而得到的图片数据导入到上述基本视点视频平面存储器和从属视点视频平面存储器两方中,
输出存储在上述基本视点视频平面存储器中的图片数据和存储在上述从属视点视频平面存储器中的图片数据。
11.一种再现装置的集成电路,基于再现区间信息对记录在记录介质中的视频流进行再现,其特征在于,
上述再现区间信息中具有对实现立体视觉再现的3D再现区间进行规定的信息和对实现平面视觉再现的2D再现区间进行规定的信息,
在将3D再现区间和2D再现区间无缝连接的情况下,上述集成电路将通过属于2D再现区间的压缩图片数据的解码而得到的各图片数据至少各重复输出两次。
12.一种记录介质,存储3D视频流和播放列表信息,该3D视频流包含有基本视点视频流和从属视点视频流,该记录介质的特征在于,
上述播放列表信息包含再现区间信息,该再现区间信息是根据上述基本视点视频流和上述从属视点视频流的再现时间轴上的再现开始时刻以及再现结束时刻来规定再现区间的信息,
上述再现区间信息中具有对实现立体视觉再现的3D再现区间进行规定的信息和对实现平面视觉再现的2D再现区间进行规定的信息,
对2D再现区间进行规定的再现区间信息还包括标志,该标志指示将通过属于被该再现区间信息规定的再现区间的压缩图片数据的解码而得到的各图片数据至少各重复两次输出到显示装置。
13.一种再现装置,对包含有基本视点视频流和从属视点视频流在内的3D视频流进行再现,其特征在于,包括:
基本视点视频平面存储器;
从属视点视频平面存储器;
解码器,对上述基本视点视频流和上述从属视点视频流进行解码;以及
切换装置,对路径进行切换,以便于将通过上述基本视点视频流的解码而得到的图片数据导入到上述基本视点视频平面存储器,将通过上述从属视点视频流的解码而得到的图片数据导入到上述从属视点视频平面存储器,
在上述基本视点视频流和上述从属视点视频流中的某一方的视频流的解码时产生错误并且一方的图片数据缺损的情况下,上述切换装置对路径进行切换,以便于将通过另一方的视频流的解码而得到的图片数据导入到两方的视频平面存储器中。
14.一种再现装置,对包含有基本视点视频流和从属视点视频流在内的3D视频流进行再现,其特征在于,包括:
基本视点视频平面存储器;
从属视点视频平面存储器;
解码器,对上述基本视点视频流和上述从属视点视频流进行解码;以及
切换装置,对路径进行切换,以便于将通过上述基本视点视频流的解码而得到的图片数据导入到上述基本视点视频平面存储器,将通过上述从属视点视频流的解码而得到的图片数据导入到上述从属视点视频平面存储器,
在上述基本视点视频流和上述从属视点视频流中的某一方的视频流的解码时产生错误并且一方的图片数据缺损的情况下,输出存储在另一方的视频平面存储器中的图片数据、和在上述错误之前存储在对应于上述一方的视频流的视频平面存储器中的图片数据。
15.一种记录介质,存储3D视频流和流信息,该3D视频流包含有基本视点视频流和从属视点视频流,该记录介质的特征在于,
上述基本视点视频流和上述从属视点视频流具有相同的再现时间轴,
上述流信息包含:
第一入口映射,表示将基本视点视频流上的入口点与上述再现时间轴上的再现时刻建立对应;以及
第二入口映射,表示将从属视点视频流上的入口点与上述再现时间轴上的再现时刻建立对应,
与登记在上述第一入口映射中的入口点建立了对应的再现时刻和与相同的再现时刻建立了对应的入口点被登记在上述第二入口映射中。
CN200980149315XA 2008-09-30 2009-09-28 再现装置、记录介质及集成电路 Pending CN102232295A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US10132408P 2008-09-30 2008-09-30
US61/101,324 2008-09-30
PCT/JP2009/004950 WO2010038409A1 (ja) 2008-09-30 2009-09-28 再生装置、記録媒体、及び集積回路

Publications (1)

Publication Number Publication Date
CN102232295A true CN102232295A (zh) 2011-11-02

Family

ID=42073191

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200980149315XA Pending CN102232295A (zh) 2008-09-30 2009-09-28 再现装置、记录介质及集成电路

Country Status (11)

Country Link
US (1) US20100086285A1 (zh)
EP (1) EP2360935A4 (zh)
JP (1) JPWO2010038409A1 (zh)
CN (1) CN102232295A (zh)
AU (1) AU2009299356A1 (zh)
CA (1) CA2746156A1 (zh)
MX (1) MX2011006360A (zh)
RU (1) RU2011135363A (zh)
SG (1) SG172182A1 (zh)
TW (1) TW201029466A (zh)
WO (1) WO2010038409A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102282858A (zh) * 2009-04-08 2011-12-14 索尼公司 回放设备、回放方法和程序
CN103139581A (zh) * 2011-11-30 2013-06-05 四川长虹电器股份有限公司 一种偏光3d液晶电视重影消除方法
CN104796641A (zh) * 2015-04-09 2015-07-22 康佳集团股份有限公司 眼镜式和自由式二合一立体电视机
CN110214448A (zh) * 2017-01-31 2019-09-06 索尼公司 信息处理装置和方法
CN115185526A (zh) * 2022-05-27 2022-10-14 韩济澎 一种能够逆向推理的编程语言的编译***及方法

Families Citing this family (62)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010088092A (ja) * 2008-09-02 2010-04-15 Panasonic Corp 立体映像伝送システム、映像表示装置および映像出力装置
KR20100040640A (ko) * 2008-10-10 2010-04-20 엘지전자 주식회사 수신 시스템 및 데이터 처리 방법
USRE45394E1 (en) 2008-10-20 2015-03-03 X6D Limited 3D glasses
US20110228062A1 (en) * 2008-10-20 2011-09-22 Macnaughton Boyd 3D Glasses with OLED Shutters
CA2684513A1 (en) * 2008-11-17 2010-05-17 X6D Limited Improved performance 3d glasses
US8542326B2 (en) 2008-11-17 2013-09-24 X6D Limited 3D shutter glasses for use with LCD displays
JP5632291B2 (ja) * 2008-11-18 2014-11-26 パナソニック株式会社 特殊再生を考慮した再生装置、集積回路、再生方法
US20100177161A1 (en) * 2009-01-15 2010-07-15 Dell Products L.P. Multiplexed stereoscopic video transmission
US8947504B2 (en) * 2009-01-28 2015-02-03 Lg Electronics Inc. Broadcast receiver and video data processing method thereof
WO2010089956A1 (ja) * 2009-02-04 2010-08-12 パナソニック株式会社 映像処理装置及び映像表示装置
JP5604810B2 (ja) * 2009-05-26 2014-10-15 三菱電機株式会社 映像情報再生方法、映像情報再生装置、及び記録媒体
KR20100128233A (ko) * 2009-05-27 2010-12-07 삼성전자주식회사 영상 처리 방법 및 장치
US8836757B2 (en) * 2009-06-23 2014-09-16 Lg Electronics Inc. 3D image providing device, display device, and method thereof
TW201130289A (en) * 2009-07-14 2011-09-01 Panasonic Corp Image reproducing apparatus
JP4875127B2 (ja) 2009-09-28 2012-02-15 パナソニック株式会社 三次元画像処理装置
JP5482254B2 (ja) * 2009-11-05 2014-05-07 ソニー株式会社 受信装置、送信装置、通信システム、表示制御方法、プログラム、及びデータ構造
USD692941S1 (en) 2009-11-16 2013-11-05 X6D Limited 3D glasses
KR101279507B1 (ko) * 2009-12-15 2013-06-28 한국전자통신연구원 병렬 처리 기반 파이프라인 복호화 장치 및 방법
US8599932B2 (en) 2009-12-18 2013-12-03 General Instrument Corporation Carriage systems encoding or decoding JPEG 2000 video
US20110200303A1 (en) * 2010-02-12 2011-08-18 Telefonica, S.A. Method of Video Playback
US20110211816A1 (en) * 2010-02-22 2011-09-01 Richard Edwin Goedeken Method and apparatus for synchronized workstation with two-dimensional and three-dimensional outputs
US20110216173A1 (en) * 2010-03-02 2011-09-08 Comcast Cable Communications, Llc Impairments To 3D Experiences
US9426441B2 (en) 2010-03-08 2016-08-23 Dolby Laboratories Licensing Corporation Methods for carrying and transmitting 3D z-norm attributes in digital TV closed captioning
JP5577789B2 (ja) * 2010-03-25 2014-08-27 ソニー株式会社 画像データ送信装置、画像データ送信方法および画像データ受信装置
RU2011148354A (ru) * 2010-03-29 2014-05-10 Панасоник Корпорэйшн Устройство обработки видео
US10448083B2 (en) 2010-04-06 2019-10-15 Comcast Cable Communications, Llc Streaming and rendering of 3-dimensional video
US11711592B2 (en) 2010-04-06 2023-07-25 Comcast Cable Communications, Llc Distribution of multiple signals of video content independently over a network
JP2011223247A (ja) * 2010-04-08 2011-11-04 Sony Corp 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
JP5601006B2 (ja) * 2010-04-08 2014-10-08 ソニー株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
JP5494152B2 (ja) * 2010-04-08 2014-05-14 ソニー株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
US9237366B2 (en) 2010-04-16 2016-01-12 Google Technology Holdings LLC Method and apparatus for distribution of 3D television program materials
JP5393593B2 (ja) * 2010-05-31 2014-01-22 日立コンシューマエレクトロニクス株式会社 多視点画像補正装置
US8934757B2 (en) * 2010-06-23 2015-01-13 Panasonic Corporation Content distribution system, playback device, distribution server, playback method, and distribution method
JP2012023648A (ja) * 2010-07-16 2012-02-02 Sony Corp 再生装置、再生方法、およびプログラム
JP5633259B2 (ja) * 2010-09-06 2014-12-03 ソニー株式会社 立体画像データ送信装置、立体画像データ送信方法および立体画像データ受信装置
US20120113218A1 (en) * 2010-10-01 2012-05-10 Manabu Sasamoto Receiving apparatus and receiving method
WO2012045319A1 (en) * 2010-10-05 2012-04-12 Telefonaktiebolaget L M Ericsson (Publ) Multi-view encoding and decoding technique based on single-view video codecs
JP2012089931A (ja) * 2010-10-15 2012-05-10 Sony Corp 情報処理装置、情報処理方法およびプログラム
JP5622537B2 (ja) * 2010-11-30 2014-11-12 三菱電機株式会社 エラーコンシールメント装置
US20120154559A1 (en) * 2010-12-21 2012-06-21 Voss Shane D Generate Media
US9204123B2 (en) * 2011-01-14 2015-12-01 Comcast Cable Communications, Llc Video content generation
JP5431390B2 (ja) * 2011-02-28 2014-03-05 株式会社東芝 映像出力装置及び映像出力方法
EP2495979A1 (en) * 2011-03-01 2012-09-05 Thomson Licensing Method, reproduction apparatus and system for display of stereoscopic 3D video information
JP5335022B2 (ja) * 2011-04-05 2013-11-06 住友電気工業株式会社 映像再生装置
US8988512B2 (en) * 2011-04-14 2015-03-24 Mediatek Inc. Method for adjusting playback of multimedia content according to detection result of user status and related apparatus thereof
US9519994B2 (en) 2011-04-15 2016-12-13 Dolby Laboratories Licensing Corporation Systems and methods for rendering 3D image independent of display size and viewing distance
US8643699B2 (en) * 2011-04-26 2014-02-04 Mediatek Inc. Method for processing video input by detecting if picture of one view is correctly paired with another picture of another view for specific presentation time and related processing apparatus thereof
US20120300046A1 (en) * 2011-05-24 2012-11-29 Ilya Blayvas Method and System for Directed Light Stereo Display
KR20130030406A (ko) * 2011-09-19 2013-03-27 엘지전자 주식회사 이동 단말기
JP2013106288A (ja) * 2011-11-16 2013-05-30 Sharp Corp 電子機器、表示制御方法、およびプログラム
USD711959S1 (en) 2012-08-10 2014-08-26 X6D Limited Glasses for amblyopia treatment
CN103024450B (zh) * 2012-12-10 2016-09-14 惠州Tcl移动通信有限公司 一种通过nfc技术实现互动电视的方法及***
JP2015080035A (ja) * 2013-10-15 2015-04-23 キヤノン株式会社 画像処理装置、画像処理方法、プログラム
US20150253974A1 (en) 2014-03-07 2015-09-10 Sony Corporation Control of large screen display using wireless portable computer interfacing with display controller
JP6340882B2 (ja) * 2014-04-04 2018-06-13 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
JP6917378B2 (ja) 2015-09-17 2021-08-11 ファゾム・オプティクス・インコーポレイテッド マルチビューディスプレイ並びに関連するシステム及び方法
CN109690674B (zh) * 2016-09-08 2021-05-11 索尼公司 信息处理装置、信息处理方法和程序
WO2018123719A1 (ja) 2016-12-27 2018-07-05 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
US10616551B2 (en) * 2017-01-27 2020-04-07 OrbViu Inc. Method and system for constructing view from multiple video streams
CA3070691A1 (en) * 2017-08-09 2019-02-14 Lumii, Inc. Manufacturing light field prints
CN112839238B (zh) * 2019-11-22 2023-03-24 腾讯科技(深圳)有限公司 投屏播放方法、装置和存储介质
EP4137866A1 (en) * 2021-08-18 2023-02-22 Carl Zeiss Microscopy GmbH Digital microscope and method for capturing and displaying microscopic images

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1247004A (zh) * 1996-12-04 2000-03-08 松下电器产业株式会社 用于高分辨率和三维视频记录的光盘及其再现和记录设备
JP2003260028A (ja) * 2002-03-11 2003-09-16 Fuji Photo Optical Co Ltd 立体電子内視鏡装置
KR20080063323A (ko) * 2005-10-19 2008-07-03 톰슨 라이센싱 스케일링가능한 비디오 코딩을 이용한 멀티-뷰 비디오 코딩

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4798210A (en) * 1984-03-28 1989-01-17 National Biomedical Research Foundation Three-dimensional imaging system
EP2259588B1 (en) 1996-02-28 2013-12-11 Panasonic Corporation High-resolution optical disk for recording stereoscopic video, optical disk reproducing device and optical disk recording device
DE69841532D1 (de) * 1997-08-29 2010-04-15 Panasonic Corp Optische Platte mit hierarchisch codiertem digitalen Videosignal, Wiedergabevorrichtung und Aufnahmevorrichtung für die optische Platte
US6999673B1 (en) * 1999-09-30 2006-02-14 Matsushita Electric Industrial Co., Ltd. Moving picture decoding method, moving picture decoding apparatus and program recording medium
US6765568B2 (en) * 2000-06-12 2004-07-20 Vrex, Inc. Electronic stereoscopic media delivery system
KR100779634B1 (ko) * 2003-06-20 2007-11-26 니폰 덴신 덴와 가부시끼가이샤 가상시점 화상 생성방법 및 3차원 화상 표시방법 및 장치
KR100739730B1 (ko) * 2005-09-03 2007-07-13 삼성전자주식회사 3d 입체 영상 처리 장치 및 방법
CN102036070A (zh) * 2005-12-08 2011-04-27 维德约股份有限公司 用于视频通信***中的差错弹性和随机接入的***和方法
JP2007180982A (ja) * 2005-12-28 2007-07-12 Victor Co Of Japan Ltd 画像復号装置、画像復号方法、及び画像復号プログラム
KR100905723B1 (ko) * 2006-12-08 2009-07-01 한국전자통신연구원 비실시간 기반의 디지털 실감방송 송수신 시스템 및 그방법
US8237776B2 (en) * 2007-10-19 2012-08-07 Warner Bros. Entertainment Inc. Method and apparatus for generating stereoscopic images from a DVD disc
CN102106146B (zh) * 2008-07-22 2016-08-17 汤姆森许可贸易公司 可缩放视频解码中增强层分组丢失错误的隐藏方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1247004A (zh) * 1996-12-04 2000-03-08 松下电器产业株式会社 用于高分辨率和三维视频记录的光盘及其再现和记录设备
JP2003260028A (ja) * 2002-03-11 2003-09-16 Fuji Photo Optical Co Ltd 立体電子内視鏡装置
KR20080063323A (ko) * 2005-10-19 2008-07-03 톰슨 라이센싱 스케일링가능한 비디오 코딩을 이용한 멀티-뷰 비디오 코딩

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102282858A (zh) * 2009-04-08 2011-12-14 索尼公司 回放设备、回放方法和程序
CN103139581A (zh) * 2011-11-30 2013-06-05 四川长虹电器股份有限公司 一种偏光3d液晶电视重影消除方法
CN104796641A (zh) * 2015-04-09 2015-07-22 康佳集团股份有限公司 眼镜式和自由式二合一立体电视机
CN104796641B (zh) * 2015-04-09 2018-11-30 康佳集团股份有限公司 眼镜式和自由式二合一立体电视机
CN110214448A (zh) * 2017-01-31 2019-09-06 索尼公司 信息处理装置和方法
CN115185526A (zh) * 2022-05-27 2022-10-14 韩济澎 一种能够逆向推理的编程语言的编译***及方法
CN115185526B (zh) * 2022-05-27 2023-10-10 韩济澎 一种能够逆向推理的编程语言的编译***及方法

Also Published As

Publication number Publication date
JPWO2010038409A1 (ja) 2012-03-01
RU2011135363A (ru) 2013-03-27
US20100086285A1 (en) 2010-04-08
SG172182A1 (en) 2011-07-28
WO2010038409A1 (ja) 2010-04-08
CA2746156A1 (en) 2010-04-08
EP2360935A1 (en) 2011-08-24
AU2009299356A1 (en) 2011-08-25
TW201029466A (en) 2010-08-01
EP2360935A4 (en) 2012-06-20
MX2011006360A (es) 2011-07-13

Similar Documents

Publication Publication Date Title
CN102547359B (zh) 再现装置、集成电路
CN102355590B (zh) 3d 影像的记录介质、再现装置、***lsi、再现方法、眼镜、显示装置
CN102232295A (zh) 再现装置、记录介质及集成电路
CN102833573B (zh) 接收装置
CN102172033B (zh) 再生装置、记录方法、记录介质再生***
CN102160389B (zh) 再现装置、集成电路、记录介质
CN102150434A (zh) 立体视觉再现影像内容的再现装置、再现方法及再现程序

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20111102