CN109792554A - 再现装置、再现方法和程序 - Google Patents

再现装置、再现方法和程序 Download PDF

Info

Publication number
CN109792554A
CN109792554A CN201780060681.2A CN201780060681A CN109792554A CN 109792554 A CN109792554 A CN 109792554A CN 201780060681 A CN201780060681 A CN 201780060681A CN 109792554 A CN109792554 A CN 109792554A
Authority
CN
China
Prior art keywords
dynamic image
image content
reproduction
reproduced
processing unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780060681.2A
Other languages
English (en)
Other versions
CN109792554B (zh
Inventor
胜股充
温仕豪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN109792554A publication Critical patent/CN109792554A/zh
Application granted granted Critical
Publication of CN109792554B publication Critical patent/CN109792554B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本公开内容涉及能够提供更好的用户体验的再现装置、再现方法和程序。再现处理单元执行用于根据与运动图像内容相对应的各个再现模式对多种类型的运动图像内容进行再现的处理。用户界面显示处理单元执行用于对表示正在被再现的运动图像内容的类型或再现模式中的至少一者的用户界面进行显示的处理。本技术可以应用于例如能够对二维运动图像内容、全天球运动图像内容和自由视点运动图像内容进行再现的再现装置。

Description

再现装置、再现方法和程序
技术领域
本公开内容涉及再现装置、再现方法和程序，特别涉及能够提供更好的用户体验的再现装置、再现方法和程序。
背景技术
通常，运动图像内容例如用户生成内容(UGC)被分布在使用户能够上传运动图像的分布式站点中，并且运动图像内容例如电影和戏剧被免费分布或收费分布在商业分布式站点中。传统上，作为运动图像内容，在内容生成时通过相机工作来固定视线方向和视点位置的二维运动图像内容是主流。
另一方面，近年来，可以创建可以自由地改变视线方向的运动图像内容(下文中称为全球面运动图像内容)。在全球面运动图像内容中，例如，可以通过使用头戴式显示器根据脸的朝向来改变视线方向，使得这具有更高的逼真感并且有望在将来变得流行。
此外，将来，可以如同全球面运动图像内容的情况那样改变视线方向并且可以在由运动图像再现的空间内自由移动的运动图像内容(在下文中称为自由视点运动图像内容)有望变得流行。
同时，作为对二维运动图像内容的用户操作，例如，当使用录像带提供运动图像时，执行基本再现、停止等。此后，例如，当使用磁盘提供运动图像时，由于提高了搜索的便利性，因此新提出了诸如搜索条的用户界面，并且从自由再现时间开始再现的操作变为可能。
此外，传统上，作为针对全球面运动图像内容的用户界面，基本上，二维运动图像内容中使用的用户界面被连续使用。
例如，专利文献1公开了一种能够正确显示其中编辑有作为二维内容的数据部分的三维内容的三维再现装置。
引用列表
专利文献
专利文献1：日本专利申请公开第2013-118538号
发明内容
本发明要解决的问题
同时，当在二维运动图像内容中使用的用户界面仅应用于全球面运动图像内容、自由视点运动图像内容等时，用户在使用它们时可能会感到不方便。因此，传统情况使得不能提供足够优秀的用户体验。
鉴于这种情况实现了本公开内容，并且本公开内容的目的是提供更好的用户体验。
问题的解决方案
根据本公开内容的方面的再现装置设置有：再现处理单元，其执行以分别与多种类型的运动图像内容相对应的再现模式对所述运动图像内容进行再现的处理；以及显示处理单元，其执行对表示正在被再现的运动图像内容的类型和再现模式中的至少一者的用户界面进行显示的处理。
根据本公开内容的方面的再现方法或程序包括以下步骤：执行以分别与多种类型的运动图像内容相对应的再现模式对所述运动图像内容进行再现的处理；以及执行对表示正在被再现的运动图像内容的类型和再现模式中的至少一者的用户界面进行显示的处理。
在本公开内容的方面中，执行以分别与多种类型的运动图像内容相对应的再现模式对所述运动图像内容进行再现的处理，并且执行对表示正在被再现的运动图像内容的类型和再现模式中的至少一者的用户界面进行显示的处理。
本发明的效果
根据本公开内容的方面，可以提供更好的用户体验。
附图说明
图1是示出应用本技术的再现装置的一个实施方式的配置示例的框图。
图2是示出用户界面的示例的视图。
图3是用于解释再现图标的视图。
图4是用于解释再现图标的功能的视图。
图5是用于解释搜索条的视图。
图6是示出再现图标的变型的视图。
图7是用于解释用户界面的显示处理的流程图。
图8是示出应用本技术的计算机的一个实施方式的配置示例的框图。
具体实施方式
在下文中，参照附图详细描述应用本技术的具体实施方式。
<再现装置的配置示例>
图1是示出应用本技术的再现装置的一个实施方式的配置示例的框图。
如图1所示出的，可以与连接的操作单元12和显示单元13一起使用的再现装置11设置有操作信号获取单元21、内容记录单元22、再现处理单元23和用户界面显示处理单元24。
操作单元12例如通过有线或无线电向再现装置11提供与用户的操作对应的各种操作信号，作为远程控制器等。例如，操作单元12可以根据用户的操作向再现装置11提供用于执行关于运动图像内容的再现的控制的操作信号、用于执行稍后描述的视线方向或视点位置的控制的操作信号等。
显示单元13显示由再现装置11再现的运动图像内容本身或者显示如稍后将描述的图2所示的叠加在运动图像内容上的各种用户界面。
操作信号获取单元21获取从操作单元12提供的操作信号并且将该操作信号提供给再现处理单元23。
例如，上面描述的二维运动图像内容、全球面运动图像内容和自由视点运动图像内容在内容记录单元22中被记录为可以由再现装置11再现的运动图像内容。
再现处理单元23从内容记录单元22读取运动图像内容以进行解码，执行对运动图像内容进行再现的处理，并且将运动图像内容提供给显示单元13进行显示。
例如，再现处理单元23从内容记录单元22读取二维运动图像内容并且在二维再现模式下再现该二维运动图像内容，该二维再现模式是仅从特定视点位置沿着特定视线方向观看并且不能在空间上移动和环视地观看的再现模式。此外，再现处理单元23从内容记录单元22读取全球面运动图像内容并且在全球面再现模式下再现该全球面运动图像内容，该全球面再现模式是一种尽管不能在空间上移动但是可以从特定视点位置在任意视线方向上环视的再现模式。此外，再现处理单元23从内容记录单元22读取自由视点运动图像内容并且在自由视点再现模式下再现该自由视点运动图像内容，该自由视点再现模式是可以从各种视点位置在任意视线方向上进行空间移动和环视的再现模式。
此外，再现处理单元23将关于正在被再现的运动图像内容的信息(下文中称为“再现内容信息”)提供给用户界面显示处理单元24。例如，再现内容信息包括指示运动图像内容的再现模式的信息、指示运动图像内容的类型的信息、指示运动图像内容的再现时间的信息等。
基于从再现处理单元23提供的再现内容信息，用户界面显示处理单元24生成用户界面，例如呈现正在被再现的运动图像内容的类型、再现模式等的图标、呈现正在被再现的运动图像内容的再现时间的搜索条等，并且将该用户界面提供给显示单元13进行显示。
例如，以这种方式配置的再现装置11可以对表示正在被再现的运动图像内容的类型和再现模式的图标进行显示，并且可以提供更好的用户体验。换言之，利用用户界面显示处理单元24在显示单元13上显示的图标，用户可以识别正在被再现的运动图像内容是二维运动图像内容、全球面运动图像内容和自由视点运动图像内容中的哪一个。类似地，用户可以识别正在被再现的运动图像内容的再现模式是二维再现模式、全球面再现模式和自由视点再现模式中的哪一个。
因此，例如，用户可以容易地掌握是否可以在正在被再现的运动图像内容中环视或移动，使得用户可以顺利地执行这样的操作并且获得更好的用户体验。
<用户界面的显示示例>
图2是示出显示在显示单元13上的用户界面的示例的视图。
例如，由再现处理单元23再现的运动图像内容被显示在显示单元13上显示的整个再现屏幕31上。然后，在再现屏幕31上，如图2所示，图标显示部分41设置在再现屏幕31的右上角，并且搜索条显示部分42设置在再现屏幕31的下侧。
在图标显示部分41中，显示了表示由再现处理单元23再现的运动图像内容的再现模式的再现模式图标。在图2的示例中显示了指示再现处理单元23以全球面再现模式再现运动图像内容的全球面再现模式图标。例如，当指示对用户界面进行显示的操作被执行时，图标被显示在图标显示部分41中。
在搜索条显示部分42中，搜索条包括条43和滑块44，条43表示运动图像内容的总再现时间(在图2的示例中为0:30)，滑块44表示与显示在再现屏幕31上的运动图像内容的帧的再现时间相对应的位置。例如，在搜索条显示部分42中，当指示对用户界面进行显示的操作、指示快进或快退的操作等被执行时，搜索条被显示。
<再现图标的显示示例>
参照图3描述在图标显示部分41中显示的再现图标。
图3的A示出了当再现装置11以二维再现模式再现运动图像内容时在再现屏幕31的图标显示部分41中显示的二维再现模式图标的示例。例如，二维再现模式图标表示二维运动图像内容的特征，即再现屏幕是二维平面。
图3的B示出了当再现装置11以全球面再现模式再现运动图像内容时在再现屏幕31的图标显示部分41中显示的全球面再现模式图标的示例。例如，全球面再现模式图标表示全球面运动图像内容的特征，即通过从表示由运动图像再现的全球面的球面形状的中心向外的箭头标记来观看任意视线方向上的运动图像。
图3的C示出了当再现装置11以自由视点再现模式再现运动图像内容时在再现屏幕31的图标显示部分41中显示的自由视点再现模式图标。例如，自由视点再现模式图标表示自由视点运动图像内容的特征，即通过布置在表示由运动图像再现的空间中的可移动范围的平面上的箭头标记和人形标记来观看任意视点位置和视点方向上的运动图像。
以这种方式，用户界面显示处理单元24可以生成表示正在被再现的运动图像内容的特征的再现图标，向显示单元13提供该再现图标，并且在再现屏幕31的图标显示部分41中显示该再现图标。
参照图4对全球面再现模式图标和自由视点再现模式图标的功能进行描述。
例如，全球面再现模式图标(图3的B)包括箭头标记，并且全球面再现模式图标可以具有使用该箭头标记来表示视线方向的功能。
图4的A示出了具有表示视线方向的功能的全球面再现模式图标的示例。用户界面显示处理单元24基于由操作信号获取单元21获取的操作信号、根据用户的视线方向来改变在全球面再现模式图标中显示的箭头标记的方向。
例如，假设全球面再现模式图标的视线方向如图4的A中的左侧所示时用户执行面朝上的操作。与该操作同步，用户界面显示处理单元24改变全球面再现模式图标中显示的箭头的方向，以便成为如图4的A中的右侧所示的全球面再现模式图标的视线方向。
此外，自由视点再现模式图标(图3的C)包括箭头标记和人形标记，并且全球面再现模式图标可以具有使用箭头标记和人形标记来表示视线方向和视点位置的功能。
在图4的B中，示出了具有表示视线方向和视点位置的功能的自由视点再现模式图标的示例。用户界面显示处理单元24基于由操作信号获取单元21获取的操作信号、根据与用户的视线方向和视点位置对应的自由视点运动图像的整***置关系来改变自由视点再现模式图标中显示的箭头标记的方向和人形标记的位置。
例如，假设当如在图4的B中的左侧所示的自由视点再现模式图标中那样视点位置在自由视点运动图像的中心时，用户执行以下操作：将视点位置移动到自由视点运动图像的端部并且面朝左。与该操作同步，用户界面显示处理单元24改变在自由视点再现模式图标中显示的箭头的方向和人形标记的位置，以便成为如图4的B中的右侧所示的自由视点再现模式图标的视点位置和视线方向。
以这种方式，在图标显示部分41中，当再现装置11以全球面再现模式再现运动图像内容时，全球面再现模式图标可以表示视线方向。类似地，在图标显示部分41中，当再现装置11以自由视点再现模式再现运动图像内容时，自由视点再现模式图标可以表示视线方向和视点位置。
<搜索条的显示示例>
参照图5对在搜索条显示部分42中显示的搜索条进行描述。
例如，由再现装置11再现的运动图像内容除了包括其中独立形成二维运动图像内容、全球面运动图像内容和自由视点运动图像内容的运动图像内容以外，还包括针对每个再现时间它们被混合的运动图像内容。因此，在搜索条显示部分42中显示的搜索条可以具有在其中混合了二维运动图像内容、全球面运动图像内容和自由视点运动图像内容的运动图像内容中区分再现时间的功能。
图5的A示出了其中可以通过条43的厚度来区分二维运动图像内容、全球面运动图像内容和自由视点运动图像内容的再现时间的搜索条的示例。在图5的A的示例中，可以再现二维运动图像内容的时间由最细的条43a表示，可以再现全球面运动图像内容的时间由中间条43b表示，以及可以再现自由视点运动图像内容的时间由最粗的条43c表示。
图5的B示出了其中可以通过条43的布置来区分二维运动图像内容、全球面运动图像内容和自由视点运动图像内容的再现时间的搜索条的示例。在图5的B的示例中，可以再现二维运动图像内容的时间由布置在上段的条43a表示，可以再现全球面运动图像内容的时间由布置在中间段的条43b表示，以及可以再现自由视点运动图像内容的时间由布置在下段的条43c表示。
以这种方式通过条43的布置(对于运动图像内容的每种类型并行布置)来区分的方法也可以应用于在相同的再现时间中存在多种类型的运动图像内容的情况。
换言之，如图5的C所示出的，布置在上段——表示可以再现二维运动图像内容的时间——中的条43a表示可以从该时间的开始到结束对二维运动图像内容进行再现。然后，与条43a并行，布置在中间段的条43b和布置在下段的条43c被显示，表示可以在交叠时间期间选择性地再现任何一个运动图像内容。
此外，图5的C中示出的搜索条可以表示多个运动图像内容中再现的运动图像内容，其可以通过滑块44的布置再现。换言之，在图5的C中的示例中，滑块44被布置在表示可以再现自由视点运动图像内容的时间的条43c上，表示正在再现自由视点运动图像内容。
此外，在该搜索条中，例如，与用户界面能够通过执行向右和向左移动滑块44的操作来改变再现时间的情况一样，可以通过执行向上和向下移动滑块44的操作来选择要被再现的运动图像内容。可以通过在图5的C中的显示位置中执行向上和向下移动滑块44的操作来选择二维运动图像内容或自由视点运动图像内容的再现。
注意到，例如，在再现装置11不具有再现自由视点运动图像内容的功能的情况下，如图5的D所示，可以使表示可以再现自由视点运动图像内容的时间的条43c的显示变灰。换言之，在图5的D中示出的示例中示出了再现装置11具有再现二维运动图像内容和全球面运动图像内容的功能。因此，再现装置11的功能可以由搜索条表示。
以这种方式，用户界面显示处理单元24可以控制搜索条的显示，从而区分二维运动图像内容、全球面运动图像内容和自由视点运动图像内容的再现时间并且选择要被再现的运动图像内容。
注意到，例如，在运动图像内容没有被混合的情况下，也可以通过条43的厚度和布置类似地表示运动图像内容的类型。此外，除了条43的厚度和布置以外，运动图像内容的类型还可以由条43的颜色、图案等表示。
参照图6描述再现图标的变型。
图6的A示出了使用再现图标同时显示运动图像内容的类型和再现模式的用户界面的示例。
例如，再现处理单元23可以以全球面再现模式再现全球面运动图像内容，并且与在二维运动图像内容的情况下一样，再现处理单元23可以在视线方向和视点位置固定的情况下以二维再现模式再现该全球面运动图像内容。类似地，再现处理单元23可以以自由视点再现模式再现自由视点运动图像内容，并且与在二维运动图像内容的情况下一样，再现处理单元23可以在视线方向和视点位置固定的情况下以二维再现模式再现该自由视点运动图像内容，并且与在全球面运动图像内容的情况下一样，再现处理单元23可以在视点位置固定的情况下以全球面再现模式再现该自由视点运动图像内容。
因此，可以在图2中的图标显示部分41中同时对表示运动图像内容的类型的图标和表示运动图像内容的再现模式的图标进行显示，并且允许用户识别该图标。
例如，在图6的A的示例中，表示运动图像内容的再现模式的图标显示在左上方，并且表示运动图像内容的类型的图标显示在右下方。换言之，图6的A示出了以全球面再现模式再现自由视点运动图像内容。注意到，例如，当指示对用户界面进行显示的操作被执行时将显示这样的图标。
图6的B和图6的C示出了使用再现图标表示暂时停止状态的用户界面的示例。
例如，在执行了在时间上暂时停止自由视点运动图像内容的操作的情况下，除此以外，空间移动的暂时停止和观看方向的暂时停止变得可能。作为时间上暂时停止、空间移动的暂时停止和观看方向的暂时停止的组合，假设有三种模式：完全暂时停止(时间上暂时停止、禁止移动、观看方向固定)、时间的暂时停止和移动的暂时停止(仅可以改变观看方向)以及仅时间的暂时停止(移动和观看方向的变化是可以的)。
因此，在图6的B中，通过在左上方显示暂时停止标记来示出表示时间上的暂时停止状态——其中仅可以改变观看方向——的图标的示例。
此外，图6的C示出了通过对表示全球面运动图像内容的图标和表示自由视点运动图像内容的图标进行并排显示来明确地表示暂时停止的操作的图标的示例。换言之，通过在左上方显示暂时停止标记来显示时间上的暂时停止状态，并且利用在表示自由视点运动图像内容的图标上的交叉标记显示移动也被停止。利用这种用户界面，图6的C中的显示比图6的B中的显示直观地更容易理解。
此外，例如，通过选择图6的C中所示的图标被显示的状态下的任何图标，再现装置11可以具有使得可以移动的功能以及禁止环视的功能。
注意到，例如，在再现装置11不具有对自由视点运动图像内容进行再现的功能的情况下，可以使表示自由视点运动图像内容的图标的显示变灰。
<运动图像内容的再现处理>
参照图7中的流程图对由再现装置11执行的运动图像内容的再现处理进行描述。
例如，当用户对操作单元12执行操作并且用于选择预定运动图像内容作为再现目标并通过指定再现模式来指示再现的操作信号被提供给再现装置11时，移动图像内容的再现处理开始。
在步骤S11处，操作信号获取单元21获取从操作单元12提供的操作信号并且将该操作信号提供给再现处理单元23。
在步骤S12处，再现处理单元23根据在步骤S11处从操作信号获取单元21提供的操作信号来从内容记录单元22读取被用户作为再现目标的运动图像内容。然后，再现处理单元23以由在步骤S11处从操作信号获取单元21提供的操作信号指定的再现模式来执行对从内容记录单元22读取的运动图像内容进行再现的处理并且在显示单元13上进行显示。此外，再现处理单元23将关于此时再现的运动图像内容的再现内容信息提供给用户界面显示处理单元24。
在步骤S13处，用户界面显示处理单元24基于在步骤S12处从再现处理单元23提供的再现内容信息来执行在显示单元13上显示用户界面的处理。例如，用户界面显示处理单元24根据指示在再现内容信息中包括的运动图像内容的再现模式的信息来在再现屏幕31的图标显示部分41(图2)中显示再现模式图标。
在步骤S14处，再现处理单元23确定在步骤S12处再现的运动图像内容的再现模式是二维再现模式、全球面再现模式和自由视点再现模式中的哪一个。
在步骤S14处，在再现处理单元23确定运动图像内容的再现模式是全球面再现模式的情况下，过程转至步骤S15。
在步骤S15处，当从操作单元12提供了指示用户执行了改变视线方向的操作的操作信号时，操作信号获取单元21获取操作信号并且将该操作信号提供给再现处理单元23。
在步骤S16处，再现处理单元23根据在步骤S15处从操作信号获取单元21提供的操作信号来改变以全球面再现模式再现的运动图像内容中的视线方向。然后，再现处理单元23在显示单元13上显示应用了视线方向的改变的运动图像内容。
另一方面，在再现处理单元23在步骤S14处确定运动图像内容的再现模式是自由视点再现模式的情况下，过程转至步骤S17。
在步骤S17处，当从操作单元12提供了指示用户执行了改变视线方向和视点位置的操作的操作信号时，操作信号获取单元21获取操作信号并且将该操作信号提供给再现处理单元23。
在步骤S18处，再现处理单元23根据在步骤S17处从操作信号获取单元21提供的操作信号来改变以自由视点再现模式再现的运动图像内容中的视线方向和视点位置。然后，再现处理单元23在显示单元13上显示应用了视线方向的改变和视点位置的改变的运动图像内容。
在步骤S16处或步骤S18处的处理之后，过程转至步骤S19。此外，同样在再现处理单元23在步骤S14处确定运动图像内容的再现模式是二维再现模式的情况下，过程转至步骤S19。
在步骤S19处，再现处理单元23确定是否完成了对运动图像内容的再现。例如，在直到结束时间已完成运动图像内容的再现的情况下或者当用户执行停止再现的操作时，再现处理单元23确定完成了运动图像内容的再现。
在步骤S19处，在再现处理单元23确定未完成对运动图像内容的再现的情况下，过程返回至步骤S12，并且在之后重复执行类似处理。另一方面，在再现处理单元23确定完成了对运动图像内容的再现的情况下，运动图像内容的再现处理完成。
如上所描述的，再现装置11可以使用户能够通过简单的用户界面来识别运动图像内容的类型和再现模式。
注意到，除了上面描述的二维运动图像内容、全球面运动图像内容和自由视点运动图像内容以外，再现装置11还可以例如对具有视差的每个运动图像内容进行再现。在这种情况下，再现装置11可以针对二维运动图像内容、全球面运动图像内容和自由视点运动图像内容中的每一个对表示视差的存在或不存在的图标(例如，字符“三维”)进行显示。此外，再现装置11可以没有视差地再现有视差的运动图像内容，并显示对此进行表示的再现图标。
注意到，参照上面所描述的流程图描述的每个处理不一定需要按照与如流程图所描述的顺序对应的时间顺序处理，并且这也包括并行或单独执行的处理(例如，并行处理或由对象处理)。此外，程序可以由一个CPU处理或者可以由多个CPU以分布式方式处理。
此外，上面描述的一系列处理(再现方法)可以由硬件或软件执行。在由软件执行一系列处理的情况下，构成软件的程序是从程序记录介质中安装的，其中，程序被记录在例如能够用安装的各种程序执行各种功能的、嵌入专用硬件中的计算机或通用个人计算机等上。
图8是示出通过程序执行上面描述的一系列处理的计算机的硬件的配置示例的框图。
在计算机中，中央处理单元(CPU)101、只读存储器(ROM)102和随机存取存储器(RAM)103通过总线104相互连接。
输入/输出接口105也连接至总线104。以下部件均连接至输入/输出接口105：输入单元106，其包括键盘、鼠标、麦克风等；输出单元107，其包括显示器、扬声器等；存储单元108，其包括硬盘、非易失性存储器等；通信单元109，其包括网络接口等；以及驱动器110，其驱动可移动介质111例如磁盘、光盘、磁光盘和半导体存储器。
在以上面描述的方式配置的计算机中，CPU 101经由输入/输出接口105和总线104将存储在存储单元108中的程序加载到例如RAM 103上以进行执行，使得上面描述的一系列处理被执行。
由计算机(CPU 101)执行的程序以被记录在可移除介质111上的状态提供，或者通过有线或无线传输介质例如局域网、因特网和数字卫星广播来提供，该可移除介质111是包括例如磁盘(包括软盘)、光盘(压缩盘只读存储器(CD-ROM)、数字通用盘(DVD)等)、磁光盘或半导体存储器的封装介质。
然后，通过将可移除介质111安装在驱动器110上，程序可以通过输入/输出接口105被安装在存储单元108上。此外，程序可以由通信单元109经由有线或无线传输介质接收以安装在存储单元108上。另外，程序可以预先安装在ROM 102和存储单元108上。
注意到，本技术也可以具有以下配置。
(1)一种再现装置，设置有：
再现处理单元，其执行以分别与多种类型的运动图像内容相对应的再现模式对所述运动图像内容进行再现的处理；以及
显示处理单元，其执行对表示正在被再现的所述运动图像内容的类型和再现模式中的至少一者的用户界面进行显示的处理。
(2)根据上述(1)的再现装置，
其中，所述显示处理单元同时显示所述运动图像内容的类型和再现模式。
(3)根据上述(1)或(2)的再现装置，
其中，所述显示处理单元使用表示正在被再现的所述运动图像内容的整个长度中的再现部分的搜索条，来针对所述运动图像内容的每种类型显示每种类型的再现时间。
(4)根据上述(3)的再现装置，
其中，所述显示处理单元针对所述运动图像内容的每种类型并行地显示与各个类型的运动图像内容相对应的搜索条。
(5)根据上述(4)的再现装置，
其中，根据用户对所述搜索条的操作来选择要被再现的运动图像内容的类型。
(6)根据上述(4)或(5)的再现装置，
其中，所述显示处理单元使与不具有由所述再现装置再现的功能的类型的运动图像内容相对应的搜索条变灰。
(7)根据上述(1)至(6)中任一项的再现装置，
其中，在执行了暂时停止所述运动图像内容的再现的操作的情况下，所述显示处理单元针对表示所述运动图像内容的类型或再现模式的用户界面显示表示暂时停止状态的用户界面。
(8)根据上述(1)至(7)中任一项的再现装置，
其中，所述显示处理单元对表示用户的视线方向或视点位置的用户界面进行显示。
(9)一种再现方法，设置有以下步骤：
执行以分别与多种类型的运动图像内容相对应的再现模式对所述运动图像内容进行再现的处理；以及
执行对表示正在被再现的所述运动图像内容的类型和再现模式中的至少一者的用户界面进行显示的处理。
(10)一种使计算机执行再现处理的程序，所述再现处理设置有以下步骤：
执行以分别与多种类型的运动图像内容相对应的再现模式对所述运动图像内容进行再现的处理；以及
执行对表示正在被再现的所述运动图像内容的类型和再现模式中的至少一者的用户界面进行显示的处理。
注意到，该实施方式不限于上述实施方式并且可以在不脱离本公开内容的主旨的情况下进行各种改变。
附图标记列表
11 再现装置
12 操作单元
13 显示单元
21 操作信号获取单元
22 内容记录单元
23 再现处理单元
24 用户界面显示处理单元
31 再现屏幕
41 图标显示部分
42 搜索条显示部分
43 条
44 滑块

Claims (10)

1.一种再现装置，包括：
再现处理单元，其执行以分别与多种类型的运动图像内容相对应的再现模式对所述运动图像内容进行再现的处理；以及
显示处理单元，其执行对表示正在被再现的所述运动图像内容的类型和再现模式中的至少一者的用户界面进行显示的处理。
2.根据权利要求1所述的再现装置，
其中，所述显示处理单元同时显示所述运动图像内容的类型和再现模式。
3.根据权利要求1所述的再现装置，
其中，所述显示处理单元使用表示正在被再现的所述运动图像内容的整个长度中的再现部分的搜索条，来针对所述运动图像内容的每种类型显示每种类型的再现时间。
4.根据权利要求3所述的再现装置，
其中，所述显示处理单元针对所述运动图像内容的每种类型并行地显示与各个类型的运动图像内容相对应的搜索条。
5.根据权利要求4所述的再现装置，
其中，根据用户对所述搜索条的操作来选择要被再现的运动图像内容的类型。
6.根据权利要求4所述的再现装置，
其中，所述显示处理单元使与不具有由所述再现装置再现的功能的类型的运动图像内容相对应的搜索条变灰。
7.根据权利要求1所述的再现装置，
其中，在执行了暂时停止所述运动图像内容的再现的操作的情况下，所述显示处理单元针对表示所述运动图像内容的类型或再现模式的用户界面显示表示暂时停止状态的用户界面。
8.根据权利要求1所述的再现装置，
其中，所述显示处理单元对表示用户的视线方向或视点位置的用户界面进行显示。
9.一种再现方法，包括以下步骤：
执行以分别与多种类型的运动图像内容相对应的再现模式对所述运动图像内容进行再现的处理；以及
执行对表示正在被再现的所述运动图像内容的类型和再现模式中的至少一者的用户界面进行显示的处理。
10.一种使计算机执行再现处理的程序，所述再现处理包括以下步骤：
执行以分别与多种类型的运动图像内容相对应的再现模式对所述运动图像内容进行再现的处理；以及
执行对表示正在被再现的所述运动图像内容的类型和再现模式中的至少一者的用户界面进行显示的处理。
CN201780060681.2A 2016-10-06 2017-09-22 再现装置、再现方法和计算机可读存储介质 Active CN109792554B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016-198249 2016-10-06
JP2016198249 2016-10-06
PCT/JP2017/034237 WO2018066381A1 (ja) 2016-10-06 2017-09-22 再生装置および再生方法、並びにプログラム

Publications (2)

Publication Number Publication Date
CN109792554A true CN109792554A (zh) 2019-05-21
CN109792554B CN109792554B (zh) 2022-10-11

Family

ID=61830857

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780060681.2A Active CN109792554B (zh) 2016-10-06 2017-09-22 再现装置、再现方法和计算机可读存储介质

Country Status (5)

Country Link
US (1) US20210297746A1 (zh)
JP (1) JP6996511B2 (zh)
CN (1) CN109792554B (zh)
DE (1) DE112017005090T5 (zh)
WO (1) WO2018066381A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7146472B2 (ja) * 2018-06-18 2022-10-04 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10155138A (ja) * 1996-09-30 1998-06-09 Toshiba Corp マルチアングルブロック再生システム
US6445387B1 (en) * 1998-11-04 2002-09-03 Electronics And Telecommunications Research Institute Interface method for searching virtual space based on body icon
US20090041378A1 (en) * 2005-11-11 2009-02-12 Shigemitsu Yamaoka Image Processing Device, Image Processing Method, Program Thereof, and Recording Medium Containing the Program
US20100037178A1 (en) * 2008-08-07 2010-02-11 Dassault Systemes Animated Icons To Preview Transformations Related to 3D Models
CN102187680A (zh) * 2008-08-18 2011-09-14 三星电子株式会社 用于确定图像序列的二维或三维显示模式的方法和设备
US20110285827A1 (en) * 2009-07-14 2011-11-24 Panasonic Corporation Image reproducing apparatus and image display apparatus
CN102411473A (zh) * 2010-09-20 2012-04-11 Lg电子株式会社 移动终端以及控制移动终端的操作的方法
CN102783164A (zh) * 2010-03-05 2012-11-14 夏普株式会社 立体感视频显示装置、及立体感视频显示装置的动作方法
US20130076876A1 (en) * 2010-10-19 2013-03-28 Mitsubishi Electric Corporation 3dimension stereoscopic display device
CN103294763A (zh) * 2012-02-24 2013-09-11 Lg电子株式会社 移动终端及其控制方法
JP2013183209A (ja) * 2012-02-29 2013-09-12 Nagoya Univ 多視点映像ストリーム視聴システムおよび方法
CN103873842A (zh) * 2012-12-15 2014-06-18 联想(北京)有限公司 一种显示方法和装置
US20160112698A1 (en) * 2014-10-17 2016-04-21 Samsung Electronics Co., Ltd. Method and apparatus for playing video
CN106488323A (zh) * 2015-08-26 2017-03-08 Lg电子株式会社 移动终端及其控制方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8184943B2 (en) * 2007-01-08 2012-05-22 Apple Inc. Transport controls for a media device
JP2012248960A (ja) * 2011-05-25 2012-12-13 Sony Computer Entertainment Inc コンテンツ再生装置
KR101249901B1 (ko) * 2011-06-22 2013-04-09 엘지전자 주식회사 이동통신 단말기 및 그 동작방법
JP2013118538A (ja) 2011-12-05 2013-06-13 Hitachi Consumer Electronics Co Ltd 再生方法／装置及び記録方法／装置

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10155138A (ja) * 1996-09-30 1998-06-09 Toshiba Corp マルチアングルブロック再生システム
US6445387B1 (en) * 1998-11-04 2002-09-03 Electronics And Telecommunications Research Institute Interface method for searching virtual space based on body icon
US20090041378A1 (en) * 2005-11-11 2009-02-12 Shigemitsu Yamaoka Image Processing Device, Image Processing Method, Program Thereof, and Recording Medium Containing the Program
US20100037178A1 (en) * 2008-08-07 2010-02-11 Dassault Systemes Animated Icons To Preview Transformations Related to 3D Models
CN102187680A (zh) * 2008-08-18 2011-09-14 三星电子株式会社 用于确定图像序列的二维或三维显示模式的方法和设备
US20110285827A1 (en) * 2009-07-14 2011-11-24 Panasonic Corporation Image reproducing apparatus and image display apparatus
CN102783164A (zh) * 2010-03-05 2012-11-14 夏普株式会社 立体感视频显示装置、及立体感视频显示装置的动作方法
CN102411473A (zh) * 2010-09-20 2012-04-11 Lg电子株式会社 移动终端以及控制移动终端的操作的方法
US20130076876A1 (en) * 2010-10-19 2013-03-28 Mitsubishi Electric Corporation 3dimension stereoscopic display device
CN103294763A (zh) * 2012-02-24 2013-09-11 Lg电子株式会社 移动终端及其控制方法
JP2013183209A (ja) * 2012-02-29 2013-09-12 Nagoya Univ 多視点映像ストリーム視聴システムおよび方法
CN103873842A (zh) * 2012-12-15 2014-06-18 联想(北京)有限公司 一种显示方法和装置
US20160112698A1 (en) * 2014-10-17 2016-04-21 Samsung Electronics Co., Ltd. Method and apparatus for playing video
CN106488323A (zh) * 2015-08-26 2017-03-08 Lg电子株式会社 移动终端及其控制方法

Also Published As

Publication number Publication date
US20210297746A1 (en) 2021-09-23
JPWO2018066381A1 (ja) 2019-07-18
DE112017005090T5 (de) 2019-08-01
WO2018066381A1 (ja) 2018-04-12
CN109792554B (zh) 2022-10-11
JP6996511B2 (ja) 2022-01-17

Similar Documents

Publication Publication Date Title
CN100433057C (zh) 信息记录装置和方法
US10079040B2 (en) Systems and methods for video clip creation, curation, and interaction
US8161452B2 (en) Software cinema
JP4727342B2 (ja) 画像処理装置、画像処理方法、画像処理プログラム及びプログラム格納媒体
US10515143B2 (en) Web-based system for capturing and sharing instructional material for a software application
US8091039B2 (en) Authoring interface which distributes composited elements about the display
TR201808891T4 (tr) Metaveri kullanılarak çoklu video akışının kullanımına yönelik yöntem ve cihaz.
EP1381224A2 (en) Method and system for display and manipulation of thematic segmentation in the analysis and presentation of film and video
EP2182522B1 (en) Information processing
US20080148153A1 (en) System, method and medium organizing templates for generating moving images
US9843823B2 (en) Systems and methods involving creation of information modules, including server, media searching, user interface and/or other features
JP6949612B2 (ja) 動画再生装置およびその制御方法、並びにプログラム
US10296158B2 (en) Systems and methods involving features of creation/viewing/utilization of information modules such as mixed-media modules
US10504555B2 (en) Systems and methods involving features of creation/viewing/utilization of information modules such as mixed-media modules
US11099714B2 (en) Systems and methods involving creation/display/utilization of information modules, such as mixed-media and multimedia modules
CN109792554A (zh) 再现装置、再现方法和程序
KR101118536B1 (ko) 상호 작용이 가능한 콘텐츠 저작 수단을 제공하는 방법
Jokela et al. Mobile video editor: design and evaluation
Smith Adobe After Effects CS6 Digital Classroom
JP4401740B2 (ja) 編集装置
CN104123112A (zh) 一种图像处理方法及电子设备
US20170069354A1 (en) Method, system and apparatus for generating a position marker in video images
JP2005229501A (ja) 情報処理装置及びその方法、並びにそのプログラム及び記憶媒体
WO2013096701A1 (en) Systems and methods involving features of creation/viewing/utilization of information modules
KR20200022995A (ko) 콘텐츠 제작 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant