CN101111898A - 内容再现装置和字幕再现方法 - Google Patents

内容再现装置和字幕再现方法 Download PDF

Info

Publication number
CN101111898A
CN101111898A CNA2006800036420A CN200680003642A CN101111898A CN 101111898 A CN101111898 A CN 101111898A CN A2006800036420 A CNA2006800036420 A CN A2006800036420A CN 200680003642 A CN200680003642 A CN 200680003642A CN 101111898 A CN101111898 A CN 101111898A
Authority
CN
China
Prior art keywords
data item
caption data
captions
reproduction
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2006800036420A
Other languages
English (en)
Inventor
外山春彦
上林达
三村英纪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Publication of CN101111898A publication Critical patent/CN101111898A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/87Regeneration of colour television signals
    • H04N9/8715Regeneration of colour television signals involving the mixing of the reproduced video signal with a non-recorded signal, e.g. a text signal
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/806Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
    • H04N9/8063Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

一种内容再现装置,包括:内容再现单元,从记录介质再现内容数据项,所述记录介质存储所述内容数据项和用结构化文档描述语言描述的多个段数据项,所述多个段数据项分别对应于多个时间间隔,所述多个时间间隔是用于再现完整的所述内容数据项所需的再现时间间隔的多个段,并且与所述多个时间间隔的每一个对应的所述多个段数据项的每一个包括要在所述多个时间间隔的所述每一个中再现的一组字幕数据项;以及字幕再现单元,当所述内容再现单元再现要在所述多个时间间隔的所述每一个中再现的局部内容数据部分的同时,所述字幕再现单元对所述多个段数据项的所述每一个中包括的一组字幕数据项进行再现。

Description

内容再现装置和字幕再现方法
技术领域
本发明涉及一种用于再现对应于记录介质中内容数据的字幕数据的方法,以及使用这种方法的再现装置。
背景技术
在现有DVD的视频标准中,位图信息的字幕可以存储为光盘中的子图像。下一代DVD的视频标准需要用多种语音来存储字幕,或者从网络下载和添加字幕。由于存储成位图信息的字幕具有大小问题,需要将该字幕保持为文本格式。有一种单独定义的用于将字幕保持为文本格式的方法,但是希望由使用XML标准的标准方法来替代这种方法。
在另一方面,在W3C时控文本工作组中,通过使用SMIL来公式化用于将字幕信息组织成XML文档的作为标记语言的时控文本,其中该SMIL描述了多媒体的再现顺序(见,例如,文件1:因特网http://www.w3.org/AdioVdeo/TT/)。于2004年11月,将这种受限的子集公开为工作草案(DFXP)(见文件2:时控文本(TT)制作格式1.0?分布格式交换设置文件(DFXP),[在线],2004年11月,因特网<http://www/w3.org/TR/rraf1-dfxp/>)。
时控文本描述了字幕信息以及子集语法中的布局,并且描述了每个段落的显示开始时间信息以及显示持续时间。
在光盘中,移动光头的寻道时间慢。随机访问能更高效地根据需要来读取诸如视频数据和音频数据的内容数据中所复用的数据。为了高效地处理多个多语言字幕文件,对按照再现段来分割的字幕数据进行处理优于在再现开始对所有字幕数据进行读取。
即使在字幕信息是诸如时控文本的XML文档的情况下,当从网络上下载该信息时,在下载该数据前通过再现段来分割该XML数据能更高效地下载。因此,仅需要对分割成多个文件的XML文档片断进行再现。
然而,由于XML文档不能简单地按语法关系分割,并且进一步在时控文本格式中,通过每个字幕段落显示完成后经过的时间来表示该字幕段落的显示开始时间。因此,不能仅从分割的片断来再现显示时间。
因此,在这里,在用XML等来描述字幕数据,并且从网络下载字幕数据的情况下,存在的问题是,分割的字幕数据是连续读取的,并且字幕再现不易于与记录介质中内容数据的再现同步。
因此,本发明的一个目的是提供字幕再现方法和使用该内容再现方法的内容再现装置,在该再现方法中,对字幕数据进行分割并存储,字幕再现易于与记录介质中内容数据的再现同步,并且适于随机地访问该字幕数据。
本发明的公开
根据本发明的实施例,内容再现装置包括:用于从记录介质再现内容数据项的内容再现单元,该记录介质存储内容数据项和用结构化文件描述语言来描述的多个段数据项,该多个段数据项分别对应于多个时间间隔,该多个时间间隔是用于再现完整内容数据项所需要的再现时间间隔的多个时间段,每个时间间隔所对应的每个段数据项包括将在每个时间间隔内再现的一组字幕数据项;以及字幕再现单元,当该内容再现单元再现要在每个时间间隔中再现的局部内容数据部分的同时,该字幕再现单元再现包括在每个段数据项中的该组字幕数据。
利用本发明实施例中描述的内容再现装置,字幕再现易于与记录介质中内容数据的再现同步。
附图说明
图1是示出了内容再现装置的构造实例的图;
图2是示出了包括完整字幕数据的XML文档的一个实例的图;
图3是示出了在内容再现装置中所配置的显示设备的显示屏中的字幕显示实例的图;
图4是示出了用图2的XML来描述的字幕数据的图;
图5是示出了盘中的内容数据和字幕数据的存储实例的图;
图6是示出了分割的字幕XML数据的一个实例的图;
图7是示出了公共字幕XML数据的一个实例的图;
图8是示出了字幕再现控制信息的一个实例的图;
图9是示出了内容数据的每个时间间隔,以及分割的字幕XML数据的图,该分割的字幕XML数据对应于用于再现将在每个时间间隔内再现的字幕文本的时间间隔;
图10是示出了可再现的分割的字幕XML数据,以及示出了对应于时间间隔401的可再现的分割的字幕XML数据的一个实例的图;
图11是示出了可再现的分割的字幕XML数据,以及示出了对应于时间间隔402的可再现的分割的字幕XML数据的另一个实例的图;
图12是示出了可再现的分割的字幕XML数据,以及示出了对应于时间间隔403的可再现的分割的字幕XML数据的另一个实例的图;
图13是示出了包括完整字幕数据的XML文档、从XML文档提取的<head>元素的公共字幕XML数据,以及不包括任何<headelement>的部分的图;
图14是示出了用于从不包括任何<head element>的部分中生成分割的字幕XML数据的过程的图,其中从包括完整字幕数据的XML文档中提取该任何<head element>;
图15是示出了从分割的字幕XML数据形成可再现的分割的字幕XML数据的过程;
图16是示出了字幕再现控制信息的一个实例的图,该字幕再现控制信息包括每个分割的字幕XML数据的预取时间;
图17是示出了用于仅生成<head>元素的公共字幕XML数据,以及生成分割的字幕XML数据的过程的流程图,其中该分割的字幕XML数据不包括来自包括完整字幕数据的XML文档的任何<headelement>;以及
图18是示出了在字幕再现单元中再现字幕的处理操作的流程图。
具体实施方式
下面结合附图描述本发明的实施例。
此处将描述用于再现记录介质的内容再现装置的实例,该记录介质例如光盘,其中存储了包括视频或音频数据、字幕数据等等的内容数据。
当再现记录介质中内容数据的同时,本实施例中的内容再现装置显示记录介质中存储的字幕数据或从网络下载的字幕数据。
此处,根据每个记录介质(此后称为盘)中记录的内容数据,对每种语言准备字幕数据,并且用结构化文档描述语言,例如可扩展标记语言(XML)或超文本标记语言,来描述每种语言的每个字幕数据项。此处假设文档是根据例如DFXP在时控文本中描述的可扩展标记语言(XML)文档。
首先,将描述在时控文本中所描述的字幕数据的XML文档。
图2示出了字幕数据的XML文档的一个实例。图3示出了当视频数据记录在盘中,并且在连接到图1的内容再现装置上的预定显示设备中显示图2的XML文档的字幕数据的情况下,显示屏中的显示实例。在图3的实例中,字幕叠加显示在图片中的两个区域301、302上。通常,配音所获得的字幕显示在显示设备的底边中心附近,如区域301,但是此外,在图片中显示的另一种语言的字符形式的布告、句子和情况解释有时独立显示在右边,如区域302。
图2的XML文档是在屏幕(图片)的多个位置中显示字幕的实例。时控文本具有类似于HTML文档的语法,并且基本上包括<head>元素605和<body>元素606。
<head>元素605包括样式属性的规则定义,其应用级联样式表(CSS)。这个实例包括两个样式规则定义601、602,并且这些样式是针对图3的对应于ID属性“region 1”的区域301中显示的元素603,以及对于图3的对应于ID属性“region 2”的区域302中显示的元素604来定义的。
在<head>元素中,作为用于在屏幕中为每个字幕显示区域(此处,区域301、302)显示字幕的布局上样式信息,包括了关于字幕的显示区域的信息,例如字幕显示区域的的大小和位置以及文本的排列,此外还有关于字幕显示形式的信息,例如字符的字体类型、大小及颜色。
在图2中,样式规则定义601指示在图3的位置301中显示<div>元素603,并且样式规则定义602指示在图3的位置302中显示<div>元素604。
在<body>元素606中,描述了将要显示的字幕数据和显示定时。在<body>元素的时间容器(timeContainer)属性是“par”的情况下,作为<body>元素的子元素的<div>元素的时间并行前进。即,在图2所述的实例中,并行对两个字幕:<div>元素603和<div>元素604进行时间管理和显示。
在<div>元素603、604中,将“seq”指定为timeContainer属性的值。这指示连续地显示作为子元素的<p>元素。<p>元素包括一个显示单元的字幕文本,并且指定了开始(begin)属性和持续时间(dur)属性。begin属性指示显示开始时间(再现开始时间),该显示开始时间指示何时显示(再现)对应的元素;并且dur属性指示显示时间,该显示时间指示该元素将要显示多少秒。然而,每个元素的begin属性所指定的时间是从紧接在该对应元素之前的元素显示完成的时间直到该元素的显示开始(再现开始)的时间,即,从紧接在该对应元素之前的元素显示完成的时间开始计算的相对时间,并且该时间不同于从盘中的视频或音频(内容数据)的再现开始时间所计算的再现时间。
图4是示出了图2的XML文档中所描述的字幕数据的图。横坐标指示盘中的视频或音频(内容数据)的再现时间,并且纵坐标指示将要在分别对应于图3的两个区域301、302的“region 1”和“region2”中显示的排列字幕。在图4中,用矩形方框包围每个字幕文本,并且矩形方框的位置和大小指示文本显示(再现)开始时间、显示结束时间,以及字幕的显示时间。处于每个字幕文本的矩形方框之下的数字例如“17-20”指示出该字幕文本被分配(显示)在17秒和20再现时间之间。
在“region 1”中,作为首先被显示的<p>元素,假设begin=“10s”,dur=“6s”。因此,从十秒再现时间开始,对字幕(文本)“Goodmoring!”分配六秒进行显示。对于下一个<p>元素,由于begin=“1s”,dur=“3s”,在从16秒再现时间再过去一秒的时间,对字幕“Hi...”分配(显示)三秒,其中该16秒再现时间是前一字幕“Good moring!”的显示结束时间。
类似地,在“region 2”中,把字幕“Washington state”分配(显示)在2秒再现时间和14秒再现时间之间,并且把“extra news,occurrence of accident”分配在38秒再现时间和48秒再现时间之间。
(构造)
图1示出了用于再现记录介质的内容再现装置的构造的实例,该记录介质例如光盘,其中记录了包括视频和音频数据、字幕数据等等的内容数据。当再现该记录介质中内容数据的同时,该设备对记录在记录介质中的字幕数据或从网络下载的字幕数据进行显示。
在图1中,在内容再现装置中,当***盘时,存储控制单元1从该对应盘中读取各种类型的信息(VOBU(以后描述))、再现控制信息等等)。分解单元(Demux)2从由存储控制单元1从该盘所读取的VOBU(以后描述)中分解出音频数据、视频数据和分割的字幕XML数据(段数据项),把音频数据输出到音频解码器3,把视频数据输出到视频解码器4,并且把分割的字幕XML数据输出到临时存储器5。把由存储控制单元1从盘所读取的字幕再现所需的信息,例如字幕再现控制信息和公共字幕XML数据,输出到字幕再现单元6。
音频解码器3对输入的音频数据进行解码,并且把该数据输出到音频输出单元8。
视频解码器4对输入的视频数据进行解码,并且把该数据输出到合成单元(Mux)7。
计数器22计算再现时间,并且当盘的再现开始(存储控制单元1开始从该盘读取内容数据等等)时开始计算再现时间。
字幕再现单元6生成显示数据(字幕显示数据),用于通过使用临时存储单元5中存储的字幕再现控制信息、公共字幕XML数据以及分割的字幕XML数据来显示字幕文本,并且把该显示数据输出到合成单元(Mux)7。应该注意的是,如后述,为了从网络中的服务器获得字幕再现控制信息、公共字幕XML数据以及分割的字幕XML数据等等,通信单元10访问该服务器以获得需要的数据。
合成单元7将字幕显示数据合成在通过视频解码器4解码的视频数据上,并且把该数据输出到视频输出单元9。
输入单元11输入与存储控制单元1、字幕再现单元6等等有关的、用于盘21等的再现开始和结束的指令。
在本实施例中,将描述:用于将一个XML文档分割成多个文档来存储这些文档的方法,该XML文档包括与盘中所记录的内容数据对应的(多种语言之一的)完整字幕数据;用于当再现内容数据的同时,仅从分割的部分文档中准备分割的字幕XML数据并且再现该字幕的方法,其中该分割的字幕XML数据在指定的时间间隔内执行相同的动作。
(盘中的数据构造和存储方法)
图5示出了用于在盘中存储分割的字幕XML数据的方法。例如,在DVD视频标准中,对视频数据、音频数据、作为位图字幕的子图像、导航信息等等进行复用和存储。即,根据时间将每个介质数据进行分割,打包成包信息,复用到视频对象单元(VOBU)中并存储,其中VOBU是0.4到1秒的单元。视频对象由一行VOBU构成。
在类似于本实施例所具有的构造中,不是将子图像而是将分割的字幕XML数据201存储到包含该VOBU的子图像的SP_PACK202中。应该注意到,可以将该数据存储为独立的新包,而不是SP_PACK。
将头信息(包头)206添加到分割的字幕XML数据中,以构造包数据。该头信息包括包数据的长度、类别信息等,该类别信息指示包数据中所包括的信息类别。分割的字幕XML数据301包括在预定时间间隔内显示的字幕文本、显示定时以及时间修正信息。图6示出了分割的XML数据的描述实例。
伴随着视频再现,从盘将该分割的字幕XML数据201连续地提供到字幕信息临时存储单元5。将公共字幕XML数据205和用于保持分割的字幕XML数据的再现控制信息的字幕再现控制信息203存储在盘的另一部分中。在盘的再现开始时间读取公共字幕XML数据205和字幕再现控制信息203,并且在再现期间将它们与分割的字幕XML数据201组合在一起,并且在字幕再现中使用。公共字幕XML数据205包括字幕数据的初始XML文档的<head>部分的信息、样式规则定义(样式表)等等。图7示出了公共字幕XML数据的一个实例,并且图8示出了字幕再现控制信息的一个实例。
字幕再现控制信息203与视频的再现顺序一起存储在再现控制信息204中,再现控制信息204控制盘中内容数据的再现。要注意的是,字幕再现控制信息203可以存储在不同于再现控制信息204的文件中。
在盘中内容数据的再现开始期间,可以将公共字幕XML数据本身作为独立的文件进行读取,或者可以将其与每个分割的字幕XML数据201一起,存储在与该分割的字幕XML数据201相同的包数据中。在公共字幕XML数据中,样式规则定义本身可以作为样式表存储在独立的文档中,仅可以在<head>元素中查阅该样式表,并且将该定义与每个分割的字幕XML数据201一起,存储在与该分割的字幕XML数据201相同的包数据中。
(沿时间轴的字幕数据的分割方法,分割的字幕XML数据,以及字幕再现控制信息)
此处,结合图4和9,将描述用于在每个时间间隔内分割图2中所示的包括全部字幕数据的一个XML文档的方法,其中该XML文档对应于盘中记录的内容数据。此处,将描述将图5的时间轴分割成三个时间间隔的情况。
基于屏幕切换等将数据沿时间轴分割,由此在没有字幕要显示的位置分割数据。即,图9示出了把时间轴分割成时间间隔401、时间间隔402和时间间隔403的情况,其中时间间隔401从0秒到22秒再现时间,时间间隔402从22秒到50秒再现时间,时间间隔403从50到70秒。
图8示出了在将时间轴如图9所示进行分割的情况下的字幕再现控制信息。图8所示的字幕再现控制信息指示出:在0到22秒再现时间的时间间隔内,再现具有文件名“Subtitle1.xml”的分割的字幕XML数据,在22到50秒再现时间的时间间隔内,再现具有文件名“Subtitle2.xml”的分割的字幕XML数据,在50到70秒再现时间的时间间隔内,再现具有文件名“Subtitle3.xml”的分割的字幕XML数据。例如,为了从37秒再现时间开始再现数据,可以从“Subtitle2.xml”的第15秒的位置开始执行再现。
在图8所示的字幕再现控制信息中,通过统一资源标识符(URI)来查阅将在每个时间间隔内再现的分割的字幕XML数据的文件名,但是可以在目录中预先保持包数据中的分割的字幕XML数据的索引,或者可以独立地保持用于将包数据映射到目录的名称空间中的映射信息,以查阅文档名。可替换地,可以通过使用包数据的识别号等等来从字幕再现控制信息中直接查阅该包数据。
图6示出了对应于图9的时间间隔402的分割的字幕XML数据。这个分割的字幕XML数据包括对应于各自显示区域301(“region 1“)、302(“region 2”)的<div>元素,<div>元素仅包括初始XML文档的各<body>元素中的对应时间间隔的<p>元素,以及(每个显示区域的)时间修正信息。
在图6的实例中,包括作为begin属性的时间修正信息,该begin属性不包括在初始XML文档中,例如<div>元素1501、1052的“begin=‘-2s’”,该<div>元素1501、1052包括与图3的显示区域301、302对应的字幕文本的<p>元素。
如图9所示,当把时间轴分割成多个时间间隔,并且简单地从初始字幕数据的XML文档中提取对应于每个时间间隔的部分文档时,不能执行再现。例如,假设在分割前,通过begin=“5s”所指示的,在前一字幕显示完成五秒后,开始再现包括字幕“you are notfine,are you?”的<p>元素。然而,当将时间轴分割后,需要在具有文件名“Subtitle2.xml”的分割的字幕XML数据的开始位置的三秒后开始该再现,其中该分割的字幕XML数据对应于22到50秒再现时间的时间周期。需要将这个时间(例如,此处为-2秒)作为修正时间进行添加和存储。
例如,注意“region 1”,与具有名称“Subtitle1.xml”的分割的字幕XML数据对应的时间间隔401在字幕“Hi...”显示结束两秒后结束。在对应于具有名称“Subtitle2.xml”的分割的字幕XML数据的时间间隔402中,字幕“Hi...”的显示结束五秒后,显示第一个字幕“you are not fine,are you?”。因此,当“Subtitle2.xml”的分割的字幕XML数据的开始时间前移两秒时,或者当在时间间隔402开始5-2=3秒之后开始再现字幕“you are not fine,are you?”时,在字幕“Hi...”的显示结束五秒之后显示字幕“you are not fine,areyou?”。
用“begin=‘-2s’”来表示这种修正时间(“-2s”意味着在每个显示区域中的时间间隔中,将第一个字幕的再现开始时间前移两秒),作为与“Subtitle2.xml”的“region 1”对应的<div>元素的begin属性的值。应该注意,对于在“region 1”中的字幕“you are notfine,are you?”之后的字幕“Look at this.”,由于用从前一字幕结束开始的相对时间来表示显示开始时间,所以该时间无须修正。
可以通过从再现时间“20秒”减去再现时间“22秒”,获得与时间间隔402的“region 1”对应的<div>元素的修正时间“-2秒”,其中该再现时间“22秒”对应于时间间隔402的开始,该再现时间“20秒”指示与时间间隔402之前的时间间隔401的“region 1”对应的<div>元素的最后一个子元素,即<p>元素(字幕“Hi...”)的显示结束时间。
更通常地,可以通过从用于指示在第n个时间间隔之前的第(n-1)个时间间隔的对应<div>元素的最后一个子元素,即<p>元素的显示结束时间的再现时间,减去与第n个时间间隔的开始时间对应的再现时间,来获得第n(n为大于等于2的整数)个时间间隔的特定<div>元素的修正时间。
这也适用于“region 2”。在字幕“Washington state”的显示结束八秒之后,与名为“Subtitle1.xml”的分割的字幕XML数据对应的时间间隔401结束。在字幕“Washington state”的显示结束24秒之后,显示在与名为“Subtitle2.xml”的分割的字幕XML数据对应的时间间隔402中首先再现的字幕“extra news,occurrence of accident”。因此,当分割的字幕XML数据“Subtitle2.xml”的开始时间被前移八秒时,或者当时间间隔402的第一个字幕“extra news,occurrence ofaccident”的再现在时间间隔402开始时间的24-8=16秒之后开始时,在字幕“Washington state”的显示结束24秒之后显示该字幕“extranews,occurrence ofaccident”。这种修正时间(“-8秒”意味着在该时间间隔中,第一个字幕的再现开始时间被前移八秒)用“begin=‘-8s’”来表示,作为与“Subtitle2.xml”的“region 2”对应的<div>元素的begin属性。
如上所述,对于每个显示区域,把时间修正信息添加到每个分割的字幕XML数据中,该时间修正信息包括与分割的字幕XML数据对应的时间间隔的开始时间或者用于在该时间间隔中修正第一个字幕的再现开始时间的修正时间。因此,即使当通过任意的时间间隔来分割初始XML文档的<body>元素内部时,也可以将每个部分文档中的每个字幕文本与内容数据的再现时间同步地显示。
因此,还易于准备从第一个到最后一个内容数据的完整字幕数据的XML文档,并且根据文件大小将该文档分割成多个局部文档。
(从分割的字幕XML数据生成每个时间间隔中可再现的分割的字幕XML数据)
与分割之前的初始XML文档不同,图6中所示的分割的字幕XML数据本身不包括任何<head>元素。即,不能仅通过该分割的字幕XML数据来执行在该时间间隔中的数据的再现。因此,为了在每个时间间隔中再现该分割的字幕XML数据的每个字幕文本,如图10到12所示,需要可执行再现的(可再现的)分割的字幕XML数据,其包括在初始XML文档中出现的<head>元素(公共字幕XML数据)。
图10到12示出了每个时间间隔的可再现的分割的字幕XML数据的实例。该数据是用于仅再现图9的时间间隔401、402、403中的字幕的XML数据。
以时控文本形式的文件形式来描述该数据,可以从图10中的0秒再现时间、图11中的22秒再现时间、图12中的50秒再现时间开始再现该时控文本形式的数据,并且描述了在各自时间间隔中的字幕。
如上所述,通过从分割前的初始XML文档的<body>元素中的各个<div>元素去除对应时间间隔之外的各时间间隔的<p>元素,并且将(每个显示区域的)时间修正信息添加到剩余的元素中,来获得可再现的分割的字幕XML数据,即,仅包括对应时间间隔中<p>元素的<div>元素。
在图10、11、12的实例中,修正时间表示为初始字幕XML数据中不包括的begin属性的值,例如<div>元素801、802、901、902、1001和1002的“begin=‘-4’”,这些<div>元素包括与图3的显示区域301、302对应的字幕文本的<p>元素
图10示出了与图9的0秒到22秒再现时间的时间间隔401对应的可再现的分割的字幕XML数据。由于该再现从0秒再现时间开始,没有必要修正每个显示区域的时间间隔401的开始时间或者时间间隔401中的第一个<p>元素的再现开始时间,因此“begin=‘0s’”,或者该数据中不包括时间修正信息。
图11示出了与图9的22秒到50秒再现时间的时间间隔402对应的可再现的分割的字幕XML数据。对应于“region 1”的<div>元素901包括“begin=‘-2’”作为时间修正信息,并且在“region 1”中,把时间间隔402的再现开始时间或者时间间隔402中的第一个<p>元素的再现开始时间向前修正两秒。
类似地,对应于“region 2”的<div>元素902包括“begin=‘-8s’”作为时间修正信息,并且在“region 2”中,把时间间隔402的再现开始时间或者时间间隔402中的第一个<p>元素的再现开始时间向前修正八秒。
图12示出了与图9的从50秒再现时间开始的时间间隔403对应的可再现的分割的字幕XML数据。对应于“region 1”的<div>元素1001包括“begin=‘-6s’”作为时间修正信息。并且在“region1”中,把时间间隔403的再现开始时间或者时间间隔403中的第一个<p>元素的再现开始时间向前修正六秒。
类似地,对应于“region 2”的<div>元素1002包括“begin=‘-2s’”作为时间修正信息,并且在“region 2”中,把时间间隔403的再现开始时间或者时间间隔403中的第一个<p>元素的再现开始时间向前修正两秒。
在由图1字幕再现单元6中的字幕再现控制信息所指示的每个时间间隔的开始时间,图10到12中所示的可再现的分割的字幕XML数据作为时控文本文件被再现。在此情况下,对于每个显示区域,通过每个显示区域的修正时间,来修正每个时间间隔的开始时间或者在每个时间间隔中首先显示的字幕文本的再现开始时间,从而可以再现对应时间间隔内的字幕。
(生成公共字幕XML数据和分割的字幕XML数据的过程)
图10到12所示的可再现的分割的字幕XML数据可以用作分割的字幕XML数据201,但是头信息(<head>元素)是冗余的。这个信息作为公共字幕XML数据205,可以如图5所示将其与分割的字幕XML数据201独立的存储和分割。此处,将参考图17的流程图,描述用于从图2中所示的包括完整字幕数据的XML文档中生成图6中所示的只有<head>元素的公共字幕XML数据和如图8中所示的不包括任何<head element>的分割的字幕XML数据的过程。
首先,如图13所示,从包括完整字幕数据的XML文档1001中提取<head>元素1102和<body>元素1103(步骤S1),并且该<head>元素1102被视为公共字幕XML数据(步骤S2)。
接下来,每个时间间隔中,从提取的<body>元素1103的每个<div>元素中提取在对应时间间隔中显示的<p>元素(步骤S3),并且对于每个时间间隔中的每个<div>元素,如上所述计算修正时间(步骤S4)。此外,如图14中所示,对于每个时间间隔,生成分割的字幕XML数据,其包括时间修正信息(begin属性),用于指示在对应时间间隔中显示的每个<div>元素和<p>元素的修正时间(步骤S5)。
图14示出了从<body>元素1103中生成分别与图9中所示的三个时间间隔401到403对应的三个分割的字幕XML数据1202到1204的情况。
分割的字幕XML数据1202到1204分别包括<p>元素和时间修正信息(begin属性)1202a、1202b、1203a、1203b、1204a以及1204b,其中该<p>元素包括在相同时间间隔中显示的字幕文本,从分别与图3的显示区域301、302对应的<body>元素1103中的<div>元素1104、1105中提取出该<p>元素,该时间修正信息包括(对于每个显示区域)所计算的对应时间间隔中的<div>元素的修正时间。
此处,将更加详细地描述用于从<body>元素1103中生成分别与如9所示的三个时间间隔对应的三个分割的字幕XML数据1202到1204的过程。首先,如图4所示,<body>元素1103中的每个<p>元素中所包括的显示开始时间和显示时间,与盘中的视频或音频(内容数据)的再现时间一起前进。此外,对于图9中所示的各个时间间隔401到403,从<body>元素1103中为每个显示区域(“region 1”、“region 2”)拷贝对应时间间隔中的每个<p>元素。此外,为每个显示区域计算修正时间,将该修正时间添加为时间修正信息,由此生成分割的字幕XML数据。将这个分割的字幕XML数据存储到SP_PACK 202中。
(用于把分割的字幕XML数据转换为可再现的分割的字幕XML数据的方法)
如上所述,仅通过图14的分割的字幕XML数据1202到1204,不能在每个时间间隔中再现字幕。因此,接下来将参考图15,描述用于将图14的分割的字幕XML数据1202到1204转换为可再现的分割的字幕XML数据的方法(用于从分割的字幕XML数据生成可再现的分割的字幕XML数据的方法)。
此处,将描述把图14的分割的字幕XML数据1203转换成可再现的分割的字幕XML数据的情况。
将公共字幕XML数据1102连接在分割的字幕XML数据1203之前。用开始标签<tt>和结束标签<end>将最终连接的XML片断包围起来,由此,获得与图9的时间间隔402对应的可再现的分割的字幕XML数据。
(盘中的字幕的再现过程)
将结合图18中所示的流程图,描述在将与视频或音频数据复用的字幕再现控制信息203、公共字幕XML数据205以及分割的字幕XML数据201存储在盘中的情况下,通过字幕再现单元6来再现字幕的过程。
当将盘***内容再现装置开始该盘的再现时(步骤S11),计数器22开始计算再现时间。在盘或字幕的再现开始期间,存储控制单元1从盘读取字幕再现控制信息、公共字幕XML数据以及再现控制信息,并且经由分解单元(Demux)2,将这些数据传递到字幕再现单元6(步骤S12)。
在再现期间,存储控制单元1读取光盘中的VOB数据,并且Demux 2对视频数据、音频数据、和分割的字幕XML数据进行分解。把该分割的字幕XML数据存储到临时存储单元5中。
临时存储单元5将字幕再现控制信息中的每个时间间隔与计数器22的值(盘的再现时间)进行比较(步骤S13),并且获得对应于当前再现时间的或者将要在当前再现时间获得的分割的字幕XML数据(步骤S14)。在这种情况下,当获得了新的分割的字幕XML数据时,检查该分割的字幕XML数据是否出现在临时存储单元5中。如果临时存储单元5中没有该数据,该处理一直等到该分割的字幕XML数据到来。
当对应于当前再现时间的或者将要在当前再现时间获得的分割的字幕XML数据存储在临时存储单元5中时,获得该数据,并且从该分割的字幕XML数据和公共字幕数据生成可再现的分割的字幕XML数据(步骤S15)。
当在每个用于显示字幕的显示区域内再现与该可再现的分割的字幕XML数据对应的时间间隔中的第一个字幕文本(<p>元素)时,字幕再现单元6通过使用时间修正信息,对第一个字幕文本的再现开始时间进行修正(步骤S16)。即,计算从对应时间间隔的开始时间到该第一个字幕文本的再现开始时间的时间。例如,如图9中所示,在与时间间隔402对应的分割的字幕XML数据中再现每个字幕文本的情况下,当在“region 1”中再现时间间隔402中的第一个字幕文本“You are not fine,are you?”时,包括begin=“5s”来作为字幕文本的<p>元素的属性信息,并且包括“-2s”作为分割的字幕XML数据的“region 1”的时间修正信息。因此,将在时间间隔402中的第一个字幕文本“You are not fine,are you?”的再现开始时间计算为时间间隔402的开始时间的5-2=3秒之后。当在“region 2”中再现时间间隔402中的第一个字幕文本“extra news,occurrence ofaccident”时,包括begin=“24s”来作为字幕文本的<p>元素中的属性信息,并且包括“-8s”作为该分割的字幕XML数据的“region2”的时间修正信息。因此,将在时间间隔402中的第一个字幕文本“extra news,occurrence of accident”的再现开始时间计算为时间间隔402的开始时间的24-8=16秒之后。
字幕再现单元6通过使用可再现的分割的字幕XML数据,再现与该可再现的分割的字幕XML数据对应的时间间隔中的每个字幕文本(步骤S17)。首先,为了在每个用于显示字幕文本的显示区域中再现该时间间隔中的第一个字幕文本,在步骤S16中所获得的在该时间间隔的开始时间之后的时间开始再现第一个字幕文本,并且生成用于显示第一个字幕文本的字幕显示数据,并且将该显示数据输出到合成单元(Mux)7。为了再现第二个以及后续的字幕文本,当从该前一字幕文本的显示结束时间开始经过了在第二个和后续字幕文本中所包括的作为<p>元素的begin属性的时间时,开始第二个和后续字幕文本的再现,并且生成用于显示第二个和后续字幕文本的字幕显示数据,并且将该显示数据输出到合成单元(Mux)7。
用于显示每个字幕文本的字幕显示数据,在用于显示内容(视频)的显示屏中由可再现的分割的字幕数据中所包括的<head>元素所指定的字幕显示区域(显示位置)中,按照<head>元素所指定的显示形式(字符的字体类型、大小、颜色等等)来显示字幕文本。
Mux 7将输入字幕显示数据合成到通过Dmux 2分解的并通过视频解码器4解码的视频数据上,并且将该数据输出到视频输出单元9。把从视频输出单元9所输出的字幕显示数据的合成视频数据发送到显示设备中,并在显示设备中显示。
字幕再现单元6中的可再现的分割的字幕XML数据的执行过程,从字幕再现控制信息中所描述的分割的字幕XML数据的时间间隔开始,一直执行到所有<p>元素的再现显示结束。当该时间间隔中的最后一个<p>元素的显示时间结束时,该处理等待,直到下一个新的分割的字幕XML数据到达临时存储单元5。
重复步骤S13到S17的处理,直到输入了用于结束盘再现的指令(步骤S18)。
(在从网络下载和获得分割的字幕XML数据的情况下,字幕的再现过程)
以上描述了字幕数据存储在盘中的情况。接下来,将参考图18描述字幕数据存储在网络上的服务器中,并从网络服务器连续地提供字幕数据的情况。在这种情况中,通过与所有字幕数据都存在于上述盘中的情况一样的方式来再现字幕,除了所有字幕再现控制信息、公共字幕XML数据和多个分割的字幕XML数据、或它们中的一部分存在在服务器中,以及如果在盘再现期间有需要则执行处理来从服务器请求这些数据并且下载和获得它们之外。这种情况与图18的步骤S12和S14的处理操作不同,其中,字幕再现控制信息、公共字幕XML数据和多个分割的字幕XML数据都存储在盘中。
所有字幕再现控制信息、公共字幕XML数据和多个分割的字幕XML数据都可以保持在网络上的服务器中,或者它们中的一部分可以保持在网络上的服务器中,而剩余的信息/数据可以存储在盘中。
此外,在<head>元素包括在每个分割的字幕XML数据中的情况下,把地址信息,例如用于指示目的地服务器的统一资源定位符,包括在字幕再现控制信息、公共字幕XML数据(<head>元素)、各自的分割的字幕XML数据、以及<head>元素的至少一个中。可替换地,可以将该信息预先存储在盘中预先确定的特定区域中。此外,与该特定区域中所存储的地址信息对应的服务器,可以通知能够获得所有或部分字幕再现控制信息、公共字幕XML数据和多个分割的字幕XML数据的服务器的地址信息。内容再现装置通过使用,例如,从盘读取的或从网络获得的地址信息来访问服务器,以获得需要的信息。
如上所述,在盘再现开始的情况下(步骤S11),当字幕再现控制信息和公共字幕XML数据存储在盘中时,内容再现装置的字幕再现单元6获得从盘所读取的字幕再现控制信息和公共字幕XML数据(步骤S12)。在另一方面,当字幕再现控制信息和公共字幕XML数据存在于网络上的服务器中,而不在盘中时,通过使用通信单元10从服务器获得字幕再现控制信息和公共字幕XML数据(步骤S12)。
临时存储单元5把字幕再现控制信息中的每个时间间隔与计数器22的值(盘再现时间)进行比较(步骤13),并且获得对应于当前再现时间的或者将要在当前再现时间获得的分割的字幕XML数据(步骤S14)。在这种情况下,当该对应于当前再现时间的或者将要在当前再现时间获得的分割的字幕XML数据存在于服务器中时,通过使用通信单元10从服务器获得该分割的字幕XML数据(步骤S14)。
即,在步骤S14,一旦从服务器接收到该分割的字幕XML数据,通信单元10将其存储到临时存储单元5中,并且将其通知给字幕再现单元6。当字幕再现单元6从临时存储单元5读取该对应于当前再现时间的或者将要在当前再现时间获得的分割的字幕XML数据时,该再现单元6从分割的字幕XML数据和公共字幕数据生成可再现的分割的字幕XML数据(步骤S15)。
此外,如上所述,字幕再现单元6通过使用用于显示字幕文本的每个显示区域中的时间修正信息,来修正在该可再现的分割的字幕XML数据所对应的时间间隔中的第一字幕文本的再现开始时间(步骤S16),之后,该单元通过使用可再现的分割的字幕XML数据,再现该可再现的分割的字幕XML数据所对应的时间间隔中的每个字幕文本(步骤S17)。即,在每个字幕文本的再现开始时间开始再现字幕文本,并且生成用于显示每个字幕文本的字幕显示数据,并且将该数据输出到合成单元(Mux)7。
如上所述,图18的处理操作,除了步骤S12和S14之外,都与字幕再现控制信息、公共字幕XML数据和多个分割的字幕XML数据全部存储在盘中的情况相同。
应该注意到,在向服务器请求下载对应于该时间间隔的分割的字幕XML数据的情况下,最好在进入该时间间隔之前,提前在预先确定的再现时间,向服务器请求对应于该时间间隔的分割的字幕XML数据。在这种情况下,从该服务器请求对应于每个时间间隔的分割的字幕XML数据,或者在字幕再现控制信息或再现控制信息中预先描述用于从服务器获得数据的时间(预取时间)。
图16示出了字幕再现控制信息包括预取时间的情况,该字幕再现控制信息指示每个时间间隔(时间间隔的开始时间和结束时间)以及对应于该时间间隔的分割的字幕XML数据的文件,该预取时间是对于每个时间间隔,从服务器请求对应于该时间间隔的分割的字幕XML数据或者从服务器获得数据的时间。
图16的<Clip>元素1601对应于图9的时间间隔402,指示出从“10秒”再现时间开始向服务器请求或者从服务器获得对应于该时间间隔的分割的字幕XML数据。即,由于该分割的字幕XML数据对应于从22秒再现时间到50秒再现时间的时间间隔,所以<Clip>元素1601指示出,在没有向服务器做出任何对于分割的字幕XML数据的请求的情况下,向服务器请求下载该分割的字幕XML数据,或者从服务器获得该数据,并且在10秒再现时间(其在该时间间隔开始时间之前10秒)和50秒再现时间之间该分割的字幕XML数据没有存储在临时存储单元5中。因此,在图18的步骤S14中,当在10秒再现时间分割的字幕XML数据没有存储在临时存储单元5中的情况下,字幕再现单元6请求服务器下载分割的字幕XML数据,并且获得该分割的字幕XML数据。
类似地,与图9的时间间隔403对应的<Clip>元素1602指示出,从20秒再现时间开始向服务器请求对应于该时间间隔的分割的字幕XML数据。即,由于该分割的字幕XML数据对应于从50秒再现时间到70秒再现时间的时间间隔,所以该<Clip>元素1602指示出,在没有向服务器做出任何对于分割的字幕XML数据的请求的情况下,向服务器请求下载该分割的字幕XML数据,或者从服务器获得该数据,并且在40秒再现时间(其在该时间间隔开始时间之前10秒)和70秒再现时间之间该分割的字幕XML数据没有存储在临时存储单元5中。
因此,在图18的步骤S14中,当在40秒再现时间该分割的字幕XML数据没有存储在临时存储单元5中的情况下,字幕再现单元6请求服务器下载该分割的字幕XML数据,并且获得该分割的字幕XML数据。
如上所述,在每个时间间隔的开始时间之前的预定时间,从服务器请求并获得(预取)对应于该时间间隔的分割的字幕XML数据。因此,可以预期在每个时间间隔中显示该时间间隔的字幕,而不受通信时间延时的影响,其中由于通信拥塞程度的原因,该通信时间波动剧烈。
如上所述,根据本发明,在(通过包括音频解码器3、视频解码器4等的再现装置)从记录介质再现内容数据的情况下,在将要再现的内容数据的每个时间间隔中,经由网络或从记录介质中获得包括将要在该时间间隔中再现的字幕文本的分割的字幕XML数据,并且通过使用所获得的分割的字幕XML数据,来再现该内容数据的时间间隔中的每个字幕文本,其中该记录介质存储了包括视频数据和音频数据的内容数据。
此外,该记录介质还存储用于指示内容数据的每个时间间隔的字幕再现控制信息和对应于每个时间间隔的分割的字幕XML数据,并且字幕再现单元6基于从记录介质读取的字幕再现控制信息,从记录介质或经由网络获得与要再现的内容数据的时间间隔对应的分割的字幕XML数据。
在经由输入单元11输入语言(日语、英语等等),并且在开始再现记录介质中的内容数据之前经由网络或从记录介质获得分割的字幕XML数据的情况下,在图18的步骤S14和步骤S12中,获得该输入语言的分割的字幕XML数据(以及字幕再现控制信息)。
此外,为了再现内容数据的时间间隔中的每个字幕文本,字幕再现单元6从公共字幕XML数据生成可再现的分割的字幕XML数据和对应于该时间间隔的分割的字幕XML数据,其中从记录介质或者经由网络获得该公共字幕XML数据,并且该公共字幕XML数据是用于再现分割的字幕XML数据所需要的。该单元通过使用可再现的分割的字幕XML数据,再现该时间间隔中的每个字幕文本。
例如图6所示,从记录介质或经由网络获得的分割的字幕XML数据包括将要在每个时间间隔中再现的每个字幕文本(<p>元素),其中通过分割内容数据的再现时间来获得每个时间间隔,但是如图10到12所示,还有一种情况,包括<head>元素,该<head>元素包括关于字幕显示区域或格式的信息。在前一种情况的字幕再现过程中,如已经参考图18的描述,在步骤15,有必要通过使用公共字幕XML数据,来生成可再现的分割的字幕XML数据。然而,在后一种情况中,由于分割的字幕XML数据是这种可再现的分割的字幕XML数据分割的,所以略过步骤S15。剩下的字幕再现过程类似于前一种情况。
分割的字幕XML数据中所包括的每个字幕文本都包括属性信息,用于通过从前一字幕文本的显示结束时间到该字幕文本的再现开始时间之间的时间,来指示该字幕文本的再现开始时间。该分割的字幕XML数据包括时间修正信息,用于修正与用于显示字幕的每个显示区域的分割的字幕XML数据对应的时间间隔中的第一个字幕文本的再现开始时间。为了在用于显示字幕文本的每个显示区域中再现在将要再现的内容数据的时间间隔中的第一个字幕文本,字幕再现单元6在再现开始时间对第一个字幕文本开始进行再现,其中已用第一字幕文本的属性信息和时间修正信息修正了该再现开始时间。为了再现第二个以及后续的字幕文本,当从各自前一个字幕文本的显示结束时间开始经过了第二个和后续字幕文本的属性信息所指示的时间时,该单元开始再现第二个以及后续的字幕文本。
根据这种构造,在对诸如光盘的记录介质中的内容数据准备了多种语言字幕数据(用诸如时控文本的XML来描述)的情况下,可以容易地与记录介质中的内容数据的再现同步地再现和显示与当前再现的内容数据对应的期望语言的字幕。在从当前时间的盘再现位置跳到另一个再现位置以再现内容数据的情况下,本实施例适用于随机访问。
此外,在从网络下载字幕数据的情况下,可以容易地与记录介质中的内容数据再现同步地对该字幕进行再现。
可以将本发明的实施例中所描述的本发明的技术作为计算机可执行程序存储和分布在记录介质中,例如磁盘(软盘、硬盘等等)、光盘(CD-ROM、DVD等等)或者半导体存储器,。
例如,当具有诸如临时存储器5的存储装置、通信单元10等等的计算机执行用于实现再现存储在记录介质中的内容数据的再现装置(音频解码器3、视频解码器4等等)和字幕再现单元6的功能的程序时,可以实现图1的内容再现装置,其中该记录介质用于存储包括视频或音频数据的内容数据和程序。
此外,在上述实施例中,描述了用XML来描述字幕数据的情况,但是本发明不限于这种情况,并且本发明同样适用于用其它结构化文档描述语言来描述数据的情况。
工业实用性
本发明应用于内容再现装置,该内容再现装置再现和执行记录在诸如光盘的记录介质上的包括视频/音频信息的内容数据以及程序。

Claims (21)

1.一种内容再现装置,包括:
内容再现单元,从记录介质再现内容数据项,所述记录介质存储所述内容数据项和用结构化文档描述语言描述的多个段数据项,所述多个段数据项分别对应于多个时间间隔,所述多个时间间隔是用于再现完整的所述内容数据项所需的再现时间间隔的多个段,并且与所述多个时间间隔的每一个对应的所述多个段数据项的每一个包括要在所述多个时间间隔的所述每一个中再现的一组字幕数据项;以及
字幕再现单元,当所述内容再现单元再现要在所述多个时间间隔的所述每一个中再现的局部内容数据部分的同时,所述字幕再现单元对所述多个段数据项的所述每一个中包括的一组字幕数据项进行再现。
2.如权利要求1所述的内容再现装置,其中,所述记录介质还存储字幕再现控制信息项,用于表示所述多个时间间隔及其分别对应的所述多个段数据项,以及
所述字幕再现单元对所述多个段数据项的所述每一个中包括的、参考所述字幕再现控制信息项选择的一组字幕数据项进行再现。
3.如权利要求1所述的内容再现装置,其中,所述多个段数据项的每一个中包括的一组字幕数据项中的每一个字幕数据项包括属性数据项,用于表示所述每一个字幕数据项的再现开始时间,
所述多个字幕数据项中被首先再现和显示的一个字幕数据项的再现开始时间,该再现开始时间对应于从所述一个字幕数据项的再现之前刚刚显示的字幕数据项的显示结束时间点到所述一个字幕数据项的再现开始时间点的时间,
所述多个字幕数据项中紧接着所述一个字幕数据项被再现和显示的另一个字幕数据项的再现开始时间,该再现开始时间对应于从所述一个字幕数据项的显示结束时间点到所述另一个字幕数据项的再现开始时间点的时间,
所述多个段数据项的每一个包括时间修正数据项,用于修正所述一个字幕数据项的再现开始时间,
当从所述多个时间间隔的每一个的开始时间点经过了修正的再现开始时间时,所述字幕再现单元开始再现所述一个字幕数据项,所述修正的再现开始时间是通过用所述时间修正数据项对所述一个字幕数据项的所述再现开始时间进行修正来获得的,以及
当从所述一个字幕数据项的所述显示结束时间点经过了所述另一个字幕数据项的所述再现开始时间时,所述字幕再现单元开始再现所述另一个字幕数据项。
4.如权利要求3所述的内容再现装置,其中,所述修正的再现开始时间对应于从所述多个时间间隔的每一个的开始时间点到所述一个字幕数据项的再现开始时间点的时间。
5.如权利要求1所述的内容再现装置,其中,所述记录介质还存储公共字幕数据项,所述字幕再现单元需要所述公共字幕数据项来再现所述一组字幕数据项,并且所述公共字幕数据项包括样式信息项,用于指示所述一组字幕数据项中的每个字幕数据项的字幕显示区域和显示形式,以及
所述字幕再现单元从所述多个段数据项的每一个和所述公共字幕数据项生成可再现的段数据项,并且基于所述可再现的段数据项在所述字幕显示区域上以所述显示形式显示所述一组字幕数据项。
6.一种内容再现装置,包括:
内容再现单元,从记录介质再现内容数据项,所述记录介质存储所述内容数据项;
获取单元,经由网络获取用结构化文档描述语言描述的多个段数据项,所述多个段数据项分别对应于多个时间间隔,所述多个时间间隔是用于再现完整的所述内容数据项所需的再现时间间隔的多个段,并且与所述多个时间间隔的每一个对应的所述多个段数据项的每一个包括要在所述多个时间间隔的所述每一个中再现的一组字幕数据项;以及
字幕再现单元,当所述内容再现单元再现要在所述多个时间间隔的所述每一个中再现的局部内容数据部分的同时,所述字幕再现单元对所述多个段数据项的所述每一个中包括的一组字幕数据项进行再现。
7.如权利要求6所述的内容再现装置,其中,所述记录介质还存储字幕再现控制信息项,用于表示所述多个时间间隔及其分别对应的所述多个段数据项,以及
所述获取单元获取参考所述字幕再现控制信息项所选择的所述多个段数据项的每一个。
8.如权利要求6所述的内容再现装置,其中,所述多个段数据项的每一个中包括的一组字幕数据项中的每一个字幕数据项包括属性数据项,用于表示所述每一个字幕数据项的再现开始时间,
所述多个字幕数据项中被首先再现和显示的一个字幕数据项的再现开始时间,该再现开始时间对应于从所述一个字幕数据项的再现之前刚刚显示的字幕数据项的显示结束时间点到所述一个字幕数据项的再现开始时间点的时间,
所述多个字幕数据项中紧接着所述一个字幕数据项被再现和显示的另一个字幕数据项的再现开始时间,所述再现开始时间对应于从所述一个字幕数据项的显示结束时间点到所述另一个字幕数据项的再现开始时间点的时间,
所述多个段数据项的每一个包括时间修正数据项,用于修正所述一个字幕数据项的再现开始时间,
当从所述多个时间间隔的每一个的开始时间点经过了修正的再现开始时间时,所述字幕再现单元开始再现所述一个字幕数据项,所述修正的再现开始时间是通过用所述时间修正数据项对所述一个字幕数据项的所述再现开始时间进行修正来获得的,以及
当从所述一个字幕数据项的所述显示结束时间点经过了所述另一个字幕数据项的所述再现开始时间时,所述字幕再现单元开始再现所述另一个字幕数据项。
9.如权利要求8所述的内容再现装置,其中,所述修正的再现开始时间对应于从所述多个时间间隔的每一个的开始时间点到所述一个字幕数据项的再现开始时间点的时间。
10.如权利要求6所述的内容再现装置,其中,所述记录介质还存储公共字幕数据项,所述字幕再现单元需要所述公共字幕数据项来再现所述一组字幕数据项,并且所述公共字幕数据项包括样式信息项,用于指示所述一组字幕数据项中的每个字幕数据项的字幕显示区域和显示形式,以及
所述字幕再现单元从所述多个段数据项的每一个和所述公共字幕数据项生成可再现的段数据项,并且基于所述可再现的段数据项在所述字幕显示区域上以所述显示形式显示所述一组字幕数据项。
11.如权利要求7所述的内容再现装置,其中,所述字幕再现控制信息还包括获取时间,所述获取时间对应于从所述内容数据项的再现开始时间点到要经由所述网络获得所述多个段数据项的所述每一个的时间点的时间,以及
当从所述内容数据项的再现开始时间点经过了所述获取时间时,所述获取单元经由所述网络获取所述多个段数据项的所述每一个。
12.如权利要求6所述的内容再现装置,其中,所述获取单元还经由所述网络获取公共字幕数据项,所述字幕再现单元需要所述公共字幕数据项来再现所述一组字幕数据项,并且所述公共字幕数据项包括样式信息项,用于指示所述一组字幕数据项中的每个字幕数据项的字幕显示区域和显示形式,以及
所述字幕再现单元从所述多个段数据项的每一个和所述公共字幕数据项生成可再现的段数据项,并且基于所述可再现的段数据项在所述字幕显示区域上以所述显示形式显示所述一组字幕数据项。
13.如权利要求1所述的内容再现装置,其中,所述多个段数据项的每一个包括样式信息项,用于指示所述一组字幕数据项中的每个字幕数据项的字幕显示区域和显示形式,以及
所述字幕再现单元基于所述样式信息项在所述字幕显示区域上以所述显示形式显示所述一组字幕数据项。
14.如权利要求6所述的内容再现装置,其中,所述多个段数据项的每一个包括样式信息项,用于指示所述一组字幕数据项中的每个字幕数据项的字幕显示区域和显示形式,以及
所述字幕再现单元基于所述样式信息项在所述字幕显示区域上以所述显示形式显示所述一组字幕数据项。
15.如权利要求1所述的内容再现装置,其中,将所述多个段数据项和所述内容数据项进行复用并存储在所述记录介质中。
16.一种内容再现装置,包括:
再现单元,从记录介质再现内容数据项,所述记录介质存储所述内容数据项和用结构化文档描述语言来描述的多个段数据项、以及字幕再现控制信息项和公共字幕数据项,(a)所述多个段数据项分别对应于多个时间间隔,所述多个时间间隔是用于再现完整的所述内容数据项所需的再现时间间隔的多个段,并且与所述多个时间间隔的每一个对应的所述多个段数据项的每一个包括要在所述多个时间间隔的所述每一个中再现的一组字幕数据项,(b)所述字幕再现控制信息项表示所述多个时间间隔及其分别对应的所述多个段数据项,(c)所述公共字幕数据项包括样式信息项,用于指示所述一组字幕数据项中的每个字幕数据项的字幕显示区域和显示形式;以及
字幕再现单元,当所述内容再现单元再现要在所述多个时间间隔的所述每一个中再现的局部内容数据部分的同时,所述字幕再现单元对所述多个段数据项的所述每一个中包括的一组字幕数据项进行再现,所述多个段数据项的所述每一个是参考所述字幕再现控制信息项来选择的,并且所述字幕再现单元基于所述公共字幕数据项在所述字幕显示区域上以所述显示形式来显示所述一组字幕数据项。
17.一种在包括内容再现单元的内容再现装置中的字幕再现方法,所述内容再现单元从记录介质再现内容数据项,所述记录介质存储所述内容数据项,所述方法包括:
经由网络获取用结构化文档描述语言描述的多个段数据项,所述多个段数据项分别对应于多个时间间隔,所述多个时间间隔是用于再现完整的所述内容数据项所需的再现时间间隔的多个段,并且与所述多个时间间隔的每一个对应的所述多个段数据项的每一个包括要在所述多个时间间隔的所述每一个中再现的一组字幕数据项;以及
当所述内容再现单元再现要在所述多个时间间隔的所述每一个中再现的局部内容数据部分的同时,对所述多个段数据项的所述每一个中包括的一组字幕数据项进行再现。
18.如权利要求17所述的字幕再现方法,其中,所述记录介质还存储字幕再现控制信息项,用于表示所述多个时间间隔及其分别对应的所述多个段数据项,并且其中,所述获取步骤获取参考所述字幕再现控制信息项所选择的所述多个段数据项的每一个。
19.如权利要求17所述的字幕再现方法,其中,所述多个段数据项的每一个中包括的一组字幕数据项中的每一个字幕数据项包括属性数据项,用于表示所述每一个字幕数据项的再现开始时间;
所述多个字幕数据项中被首先再现和显示的一个字幕数据项的再现开始时间,该再现开始时间对应于从所述一个字幕数据项的再现之前刚刚显示的字幕数据项的显示结束时间点到所述一个字幕数据项的再现开始时间点的时间;
所述多个字幕数据项中紧接着所述一个字幕数据项被再现和显示的另一个字幕数据项的再现开始时间,该再现开始时间对应于从所述一个字幕数据项的显示结束时间点到所述另一个字幕数据项的再现开始时间点的时间;
所述多个段数据项的每一个包括时间修正数据项,用于修正所述一个字幕数据项的再现开始时间,并且其中
当从所述多个时间间隔的每一个的开始时间点经过了修正的再现开始时间时,所述再现步骤开始再现所述一个字幕数据项,所述修正的再现开始时间是通过用所述时间修正数据项对所述一个字幕数据项的所述再现开始时间进行修正来获得的,当从所述一个字幕数据项的所述显示结束时间点经过了所述另一个字幕数据项的所述再现开始时间时,开始再现所述另一个字幕数据项。
20.如权利要求17所述的字幕再现方法,其中,所述记录介质还存储公共字幕数据项,所述公共字幕数据项是再现所述一组字幕数据项所需的,并且所述公共字幕数据项包括样式信息项,用于指示所述一组字幕数据项中的每个字幕数据项的字幕显示区域和显示形式,以及
所述再现步骤包括从所述多个段数据项的每一个和所述公共字幕数据项生成可再现的段数据项,并且基于所述可再现的段数据项在所述字幕显示区域上以所述显示形式显示所述一组字幕数据项。
21.如权利要求17所述的字幕再现方法,其中,所述多个段数据项的每一个包括样式信息项,用于指示所述一组字幕数据项中的每个字幕数据项的字幕显示区域和显示形式,以及
所述再现步骤基于所述样式信息项在所述字幕显示区域上以所述显示形式显示所述一组字幕数据项。
CNA2006800036420A 2005-02-25 2006-02-24 内容再现装置和字幕再现方法 Pending CN101111898A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005050987A JP2006238147A (ja) 2005-02-25 2005-02-25 コンテンツ再生装置、字幕再生方法及びプログラム
JP050987/2005 2005-02-25

Publications (1)

Publication Number Publication Date
CN101111898A true CN101111898A (zh) 2008-01-23

Family

ID=36572022

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2006800036420A Pending CN101111898A (zh) 2005-02-25 2006-02-24 内容再现装置和字幕再现方法

Country Status (5)

Country Link
US (1) US20060233531A1 (zh)
EP (1) EP1866923A1 (zh)
JP (1) JP2006238147A (zh)
CN (1) CN101111898A (zh)
WO (1) WO2006090908A1 (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101640781A (zh) * 2008-07-30 2010-02-03 株式会社日立制作所 动画图像再现装置
CN102065230A (zh) * 2009-11-12 2011-05-18 新奥特(北京)视频技术有限公司 一种网络化的字幕制播***
CN102065229A (zh) * 2009-11-12 2011-05-18 新奥特(北京)视频技术有限公司 一种通用字幕的制播方法及装置
CN102065228A (zh) * 2009-11-12 2011-05-18 新奥特(北京)视频技术有限公司 一种用于对通用字幕文件进行播出的字幕机
CN102118572A (zh) * 2009-12-30 2011-07-06 新奥特(北京)视频技术有限公司 一种针对大型体育综合赛事的字幕播出服务器
CN103370929A (zh) * 2011-02-15 2013-10-23 索尼公司 显示控制方法、记录介质、和显示控制装置
CN106464961A (zh) * 2014-05-12 2017-02-22 索尼公司 接收装置、发送装置以及数据处理方法
CN106804011A (zh) * 2017-02-10 2017-06-06 深圳创维数字技术有限公司 一种播放视频时加载字幕文件的方法及***
CN108702529A (zh) * 2016-01-19 2018-10-23 索尼公司 发送设备、发送方法、接收设备和接收方法
CN104471562B (zh) * 2012-07-12 2018-11-09 三星电子株式会社 组成用于排列多媒体元素的标记的方法和装置

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4356645B2 (ja) * 2005-04-28 2009-11-04 ソニー株式会社 字幕生成装置及び方法
JP4899476B2 (ja) * 2005-12-28 2012-03-21 富士通株式会社 分割プログラム、連結プログラム、情報処理方法
WO2007136195A1 (en) * 2006-05-19 2007-11-29 Lg Electronics Inc. Method for managing and processing information of an object for presentation of multiple sources and apparatus for conducting said method
US20080165281A1 (en) * 2007-01-05 2008-07-10 Microsoft Corporation Optimizing Execution of HD-DVD Timing Markup
JP4839488B2 (ja) * 2007-12-07 2011-12-21 Necカシオモバイルコミュニケーションズ株式会社 字幕付映像再生装置及びその方法、プログラム
JP2011521383A (ja) * 2008-05-20 2011-07-21 ザ・フィードルーム, インコーポレイテッド 身体障害のあるユーザに対応するビデオプレーヤの実時間作成および変更のためのシステムおよび方法
KR102023788B1 (ko) * 2011-07-29 2019-09-20 소니 주식회사 스트리밍 배신 장치 및 방법, 스트리밍 수신 장치 및 방법, 스트리밍 시스템, 프로그램과 기록 매체
JP2012043466A (ja) * 2011-11-09 2012-03-01 Sharp Corp データ配信装置、データ配信方法、データ受信装置およびデータ受信方法
BR112014013976A2 (pt) * 2011-12-16 2017-06-13 Sony Corp dispositivos de recepção e de distribuição, programa, método para distribuição realizado por um dispositivo de distribuição, e, sistema de distribuição
WO2014078805A1 (en) * 2012-11-19 2014-05-22 John Douglas Steinberg System and method for creating customized, multi-platform video programming
JP6416698B2 (ja) * 2014-05-30 2018-10-31 日本放送協会 送信装置および受信装置、ならびにプログラム
JP6796376B2 (ja) * 2014-11-28 2020-12-09 日本放送協会 分割装置および解析装置、ならびにプログラム
EP3493548B1 (en) * 2016-07-26 2022-01-26 Sony Group Corporation Transmission device, transmission method, reception device, and reception method

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7580614B2 (en) * 2002-12-09 2009-08-25 Kabushiki Kaisha Toshiba Information playback apparatus having expansion information storage unit and information playback method
KR100939711B1 (ko) * 2002-12-12 2010-02-01 엘지전자 주식회사 텍스트 기반의 서브타이틀 재생장치 및 방법
US7505050B2 (en) * 2003-04-28 2009-03-17 Panasonic Corporation Recording medium, reproduction apparatus, recording method, reproducing method, program and integrated circuit for recording a video stream and graphics with window information over graphics display

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101640781A (zh) * 2008-07-30 2010-02-03 株式会社日立制作所 动画图像再现装置
CN102065230B (zh) * 2009-11-12 2015-02-18 新奥特(北京)视频技术有限公司 一种网络化的字幕制播***
CN102065230A (zh) * 2009-11-12 2011-05-18 新奥特(北京)视频技术有限公司 一种网络化的字幕制播***
CN102065229A (zh) * 2009-11-12 2011-05-18 新奥特(北京)视频技术有限公司 一种通用字幕的制播方法及装置
CN102065228A (zh) * 2009-11-12 2011-05-18 新奥特(北京)视频技术有限公司 一种用于对通用字幕文件进行播出的字幕机
CN102065228B (zh) * 2009-11-12 2015-07-08 新奥特(北京)视频技术有限公司 一种用于对通用字幕文件进行播出的字幕机
CN102065229B (zh) * 2009-11-12 2014-12-24 新奥特(北京)视频技术有限公司 一种通用字幕的制播方法及装置
CN102118572B (zh) * 2009-12-30 2015-05-27 新奥特(北京)视频技术有限公司 一种针对大型体育综合赛事的字幕播出服务器
CN102118572A (zh) * 2009-12-30 2011-07-06 新奥特(北京)视频技术有限公司 一种针对大型体育综合赛事的字幕播出服务器
CN103370929A (zh) * 2011-02-15 2013-10-23 索尼公司 显示控制方法、记录介质、和显示控制装置
CN103370929B (zh) * 2011-02-15 2017-03-22 索尼公司 显示控制方法和显示控制装置
CN104471562B (zh) * 2012-07-12 2018-11-09 三星电子株式会社 组成用于排列多媒体元素的标记的方法和装置
US10152555B2 (en) 2012-07-12 2018-12-11 Samsung Electronics Co., Ltd. Method and apparatus for composing markup for arranging multimedia elements
CN106464961A (zh) * 2014-05-12 2017-02-22 索尼公司 接收装置、发送装置以及数据处理方法
CN108702529A (zh) * 2016-01-19 2018-10-23 索尼公司 发送设备、发送方法、接收设备和接收方法
US11290785B2 (en) 2016-01-19 2022-03-29 Sony Corporation Transmission apparatus, transmission method, reception apparatus, and reception method for transmitting subtitle text information
CN106804011A (zh) * 2017-02-10 2017-06-06 深圳创维数字技术有限公司 一种播放视频时加载字幕文件的方法及***

Also Published As

Publication number Publication date
JP2006238147A (ja) 2006-09-07
WO2006090908A1 (en) 2006-08-31
US20060233531A1 (en) 2006-10-19
EP1866923A1 (en) 2007-12-19

Similar Documents

Publication Publication Date Title
CN101111898A (zh) 内容再现装置和字幕再现方法
CN100440356C (zh) 记录交互内容版本信息的信息存储介质的记录与重现方法
CN100511457C (zh) 通过网络再现交互式光盘的方法和设备
JP3901298B2 (ja) 複数メディアのデータ同期再生装置
CN101213609B (zh) 播放交互式多媒体演示的方法和***
CN101059982B (zh) 包括元数据的存储介质及其再现设备和方法
US6539370B1 (en) Dynamically generated HTML formatted reports
CN1989563B (zh) 再现装置、程序和再现方法
KR100825898B1 (ko) 소형매체형식 파일들을 동기식 멀티미디어통합언어로변환하기 위한 시스템 및 방법
JP2001024985A (ja) データ処理装置および方法、データ再生装置および方法、並びに記録媒体
JP2010238356A (ja) インタラクティブグラフィックストリームを記録した情報記録媒体、その再生装置及び方法
JP3405897B2 (ja) データ選択及びまたはデータに対する処理を容易とするデータ処理装置並びにデータ処理方法
US20090274435A1 (en) Reproduction device, reproduction method, recording device, recording medium, program storage medium, and program
CN104768083B (zh) 一种章节内容展示的视频播放方法及装置
JP5025791B2 (ja) 付加データアップデート方法及び再生装置
CN100555432C (zh) 以交互式模式再现av数据的方法和设备及其存储介质
WO2014037698A1 (en) Methods for generating file relationship data, and media file systems that generate file relationship data
RU2342692C2 (ru) Временные ссылки для объектов мультимедиа
KR20010024999A (ko) 문서 코딩방법
JP4592653B2 (ja) 録画再生装置及び方法
Furini Multimedia Contents within MP3 Files: From Simple Audio Track to a Media Rich Product.
KR20030082886A (ko) 인터렉티브 컨텐츠 버전 정보가 기록된 정보저장매체, 그기록방법 및 재생방법
JP2009004034A (ja) 情報記憶媒体,および情報再生方法
Weimann et al. Adaptation of multimedia browsing techniques
JP2007266996A (ja) 番組記録装置及び検索用番組情報の生成方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20080123